JP6816247B2 - 情報提供装置 - Google Patents

Description

本発明は、情報提供装置に関する。

従来、車両の乗員に対して情報を提供する装置が知られている。

例えば、特許文献１の技術は、運転者の運転負荷レベルに応じて、運転負荷が高い場合には情報を提示せずに保留し、運転負荷が低い場合に情報を提示することにより、運転者の注意を妨げることなく情報を提供することができる装置が開示されている。

特開２００８−２４１３０９号公報

特許文献１の技術は、運転負荷レベルに基づいて情報の提示の要不要を判断している。運転の負荷状況は刻一刻と変化するものであるから、運転負荷レベルの変化に応じて頻繁に情報の出力と非出力とが切り替わる可能性があり、車両のユーザに違和感を覚えさせるおそれがあった。

そこで、本発明は、車両のユーザの違和感を軽減または解消しながら、運転負荷に応じて情報を提供することができる情報提供装置を提供することを目的とする。

本発明の情報提供装置は、
情報を出力する出力部と、
車両の走行状態を検出する走行状態検出部と、
前記車両の仮想的な感情を決定する感情決定部と、
前記車両の仮想的な感情に応じて、前記出力部に出力させる情報の内容及び出力態様の一方または両方を決定する出力制御部と、
前記情報に対する前記車両のユーザの反応を検知する入力部と、を備え、
前記感情決定部は、前記走行状態検出部により検出された前記車両の走行状態が所定の走行状態である期間が所定の期間以上継続したという条件を充足する場合に、所定の感情を前記車両の仮想的な感情として決定するように構成され、
さらに、
前記条件が充足されている期間において、前記入力部により検知された前記情報に対する前記ユーザの反応に基づいて、前記ユーザの嗜好を推定する嗜好推定部と、
前記車両のユーザの感情を推定するユーザ感情推定部と、を備え、
前記嗜好推定部は、前記ユーザ感情推定部により推定された前記ユーザの感情に応じて、前記入力部により検知された前記情報に対する前記ユーザの反応に対する信頼度を決定し、前記信頼度に基づいて前記ユーザの反応の確度を決定し、前記ユーザの反応と前記ユーザの反応の確度とに基づいて、前記ユーザの嗜好を推定するように構成されている。

当該構成の情報提供装置によれば、車両の仮想的な感情に応じて出力部に出力される情報の内容及び出力態様の一方または両方が決定される。出力される情報の内容または出力態様に、車両の仮想的な感情に応じた傾向が反映されることとなる。種々の傾向の情報の内容または出力態様を認知したユーザに対して、あたかも車両が感情を有しているかのような印象を与えうる。ひいては、情報の内容及び出力態様の一方または両方が変更されたとしても、車両の感情が変わったことが原因だとユーザに印象を与えうることができ、ユーザに与えられる違和感を軽減または解消しうる。

また、前記車両の走行状態が所定の走行状態である期間が所定の期間以上継続したという条件が充足される場合、車両の走行が安定しており、条件を満たさない場合と比べれば長期にわたって運転負荷が低い状態が継続しやすい。車両の走行が安定している場合には、ユーザの運転負荷が低いと推察される。運転負荷が低い場合、ユーザは出力される情報に注意を払いやすい。このようなユーザが情報に注意を払いやすい期間に、所定の感情に応じた傾向の情報の内容及び出力態様の一方または両方で情報が出力されることで、情報に注意を払っているときに情報の内容及び出力態様の一方または両方が頻繁に変化する場合よりも、ユーザに与えられる違和感を軽減または解消しながら、情報を適切に与えうる。

これにより、ユーザに与えられる違和感を軽減または解消しながら、ユーザの運転負荷に応じてユーザに対して適切に情報を与えうる。

本発明の情報提供装置において、
前記情報に対する前記車両のユーザの反応を検知する入力部と、
前記条件が充足されている期間において、前記入力部により検知された前記情報に対する前記ユーザの反応に基づいて、前記ユーザの嗜好を推定する嗜好推定部とを備えることが好ましい。

本明細書において「反応」とは、無条件反射もしくは条件反射等の、生体において刺激にもとづいて起こる運動に加え、ある出来事もしくは動作などに対するコミュニケーションもしくは動作等の応答も含む用語として用いる。

当該構成の情報提供装置によれば、前記条件が充足されている期間における出力部に出力される情報に対するユーザの反応に基づいて、ユーザの嗜好が推定される。前述したとおり、条件が充足する期間は、運転負荷が低いと推定される期間であるところ、運転負荷が低いときにはユーザが提供された情報に注意を払いやすいと推察される。したがって、運転負荷が低いときの反応は、ユーザが提供された情報に注意を払った上での反応であると推察されるから、ユーザの嗜好を信頼性高く示している蓋然性が高い。

したがって、当該構成の情報提供装置によれば、信頼性の高い反応に基づいてユーザの嗜好が精度よく推定されうる。

当該構成の情報提供装置において、
前記所定の感情に応じて出力される情報は、前記ユーザの嗜好を推定するための質問を含むことが好ましい。

当該構成の情報提供装置によれば、車両の所定の感情に応じて出力される情報が前記ユーザの嗜好を推定するための質問を含むので、効率よくユーザの嗜好を推定するための信頼性の高い情報を収集しうる。

本発明によれば、前記ユーザ感情推定部により推定された前記ユーザの感情に応じて、ユーザの反応に対する信頼性を決定するように構成されている。

ここで、ユーザの機嫌が悪いときにはユーザが提供された情報にあまり注意を払わなかったり、逆にユーザの機嫌がよいときにはユーザが提供された情報に注意を払い、真摯に対応するなど、ユーザの反応の信頼性はユーザの感情に応じて変化すると推察される。

したがって、ユーザの感情に応じてユーザの反応に信頼度が付加されることにより、ユーザの嗜好を推定するにあたって基礎となる情報を適切に信頼度を評価することができる。

本発明の情報提供装置において、
前記車両の走行状態は、前記車両の走行速度を含み、
前記条件は、前記車両の走行速度がゼロを含まない速度範囲に含まれる期間が所定の期間以上継続したという条件であることが好ましい。

当該構成の情報提供装置によれば、条件が充足される期間においては、車両の走行速度が一定の範囲で安定しているので、ユーザの運転負荷が低くなり、ユーザが出力部から出力される情報に注意を払いやすくなると推察される。この期間に車両の所定の感情に応じて出力部から出力される情報の内容及び出力態様の一方または両方が決定されることで、ユーザに与えられる違和感を軽減または解消しながら、ユーザの運転負荷に応じてユーザに対して適切に情報を与えうる。

本発明の情報提供装置において、
前記車両の走行状態は、前記車両の加速度を含み、
前記条件は、前記車両の加速度がゼロを含む加速度範囲に含まれる期間が所定の期間以上継続したという条件であることが好ましい。

当該構成の情報提供装置によれば、条件が充足される期間においては、車両の加速度が一定の範囲で安定しているので、ユーザの運転負荷が低くなり、ユーザが出力部から出力される情報に注意を払いやすくなると推察される。この期間に車両の所定の感情に応じて出力部から出力される情報の内容及び出力態様の一方または両方が決定されることで、ユーザに与えられる違和感を軽減または解消しながら、ユーザの運転負荷に応じてユーザに対して適切に情報を与えうる。

基本システムの構成説明図。 エージェント装置の構成説明図。 携帯端末装置の構成説明図。 エージェントの感情表現の構成を説明する図。 情報出力処理のフローチャート。 基本感情表現のマップの説明図。 付加パーツのマップの説明図。

（基本システムの構成）
図１に示されている基本システムは、対象車両Ｘ（移動体）に搭載されているエージェント装置１、乗員により対象車両Ｘの内部に持ち込み可能な携帯端末装置２（例えばスマートホン）およびサーバ３により構成されている。エージェント装置１、携帯端末装置２およびサーバ３は無線通信網（例えばインターネット）を通じて相互に無線通信する機能を備えている。エージェント装置１および携帯端末装置２は、同一の対象車両Ｘの空間内に共存するなど、物理的に近接している場合、近接無線方式（例えばＢｌｕｅｔｏｏｔｈ（登録商標）)により相互に無線通信する機能を備えている。対象車両Ｘが、本発明の「車両」に相当する。

（エージェント装置の構成）
エージェント装置１は、例えば図２に示されているように、制御部１００、センサ部１１（ＧＰＳセンサ１１１、車速センサ１１２およびジャイロセンサ１１３を備えている。）、車両情報部１２、記憶部１３、無線部１４（近接無線通信部１４１および無線通信網通信部１４２を備えている。）、表示部１５、操作入力部１６、オーディオ部１７（音声出力部）、ナビゲーション部１８、撮像部１９１（車内カメラ）および音声入力部１９２（マイク）を備えている。エージェント装置１が、本発明の「情報提供装置」の一例に相
当する。表示部１５及びオーディオ部１７のそれぞれが、本発明の「出力部」の一例に相当する。操作入力部１６及び音声入力部１９２のそれぞれが、本発明の「入力部」の一例に相当する。センサ部１１が、本発明の「走行状態検出部」に相当する。制御部１００が、後述する演算を実行することにより、本発明の「感情決定部」「出力制御部」「嗜好推定部」「ユーザ感情推定部」として機能する。なお、情報提供装置のすべての構成要素がエージェント装置１に含まれる必要はなく、エージェント装置１が通信を介して外部のサーバ等に必要な機能を実行させることにより、情報提供装置の構成要素として機能させてもよい。

センサ部１１のＧＰＳセンサ１１１はＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）衛星からの信号を基に現在位置を算出する。車速センサ１１２は回転軸からのパルス信号を基に対象車両Ｘの速度を算出する。ジャイロセンサ１１３は角速度を検出する。これらＧＰＳセンサ、車速センサ、ジャイロセンサにより、対象車両Ｘの現在位置や向きを正確に算出することが可能となっている。また、ＧＰＳセンサ１１１は、ＧＰＳ衛星から現在日時を示す情報を取得してもよい。

車両情報部１２は、ＣＡＮ−ＢＵＳなどの車内ネットワークを通じて車両情報を取得する。車両情報には、例えばイグニッションＳＷのＯＮ／ＯＦＦ、安全装置系の動作状況（ＡＤＡＳ、ＡＢＳおよびエアバッグなど）の情報が含まれている。操作入力部１６は、スイッチ押下等の操作のほか、乗員の感情推定に利用可能なステアリング、アクセルペダルまたはブレーキペダルの操作量、窓およびエアコンの操作（温度設定など）などの入力を検知する。

記憶部１３は、エージェント画像１３１を記憶する。

エージェント画像１３１は、車両Ｘの仮想的なキャラクターの顔の画像として、人の顔を模した画像である。エージェント画像１３１は、図４に示されるように、基本表情画像４１と、付加パーツ４２とを含む。基本表情画像４１と付加パーツ４２とを組み合わせることにより、応用表情画像４３が構成される。エージェント画像１３１は、例えばサーバ３からダウンロードされた画像である。

基本表情画像４１は、例えば、図４に示されるように、好き、平穏、嫌い及び耐えるという感情に対応する夫々の画像である。付加パーツ４２は、基本表情画像４１のそれぞれに対応する愛しい、楽しい、機嫌がいい、安心、悲しい、怒り、苦しい及び辛いに関するパーツである。

例えば、好きの基本表情画像４１１と、好きに対応する愛しいの付加パーツ４２１とが組み合わされることにより、愛しいの応用表現画像４３１が構成される。

無線部１４の近接無線通信部１４１は、例えばＷｉ−Ｆｉ： Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の通信部であり、無線通信網通信部１４２は、３Ｇやセルラー、ＬＴＥ通信等のいわゆる携帯電話網に代表される無線通信網に接続される通信部である。

（携帯端末装置の構成）
携帯端末装置２は、例えば図３に示されているように、制御部２００、センサ部２１（ＧＰＳセンサ２１１およびジャイロセンサ２１３を備えている。）、記憶部２３（データ記憶部２３１およびアプリケーション記憶部２３２を備えている。）、無線部２４（近接無線通信部２４１および無線通信網通信部２４２を備えている。）、表示部２５、操作入力部２６、音声出力部２７、撮像部２９１（カメラ）および音声入力部２９２（マイク）
を備えている。携帯端末装置２が、本発明の「情報提供装置」として機能してもよい。この場合、表示部２５及び音声出力部２７のそれぞれが、本発明の「出力部」の一例に相当する。操作入力部２６及び音声入力部２９２のそれぞれが、本発明の「入力部」の一例に相当する。制御部２００が、本発明の「感情決定部」「出力制御部」「嗜好推定部」「ユーザ感情推定部」として機能しうる。

携帯端末装置２は、エージェント装置１と共通する構成要素を備えている。携帯端末装置２は、車両情報を取得する構成要素（図２／車両情報部１２参照）を備えていないが、例えば近接無線通信部２４１を通じてエージェント装置１又は対象車両Ｘに備えられた「走行状態検出部」から車両情報を取得することが可能である。また、アプリケーション記憶部２３２に記憶されているアプリケーション（ソフトウェア）にしたがって、エージェント装置１のオーディオ部１７およびナビゲーション部１８のそれぞれと同様の機能を携帯端末装置２が備えていてもよい。

（サーバの構成）
サーバ３は、一又は複数のコンピュータにより構成されている。サーバ３は、それぞれのエージェント装置１または携帯端末装置２から、データ及びリクエストを受信し、データをデータベース等の記憶部に記憶し、リクエストに応じた処理を実行し、処理結果をエージェント装置１または携帯端末装置２に送信するように構成されている。

サーバ３を構成するコンピュータの一部又は全部が、移動局、例えば、一又は複数のエージェント装置１または携帯端末装置２の構成要素により構成されていてもよい。

本発明の構成要素が担当演算処理を実行するように「構成されている」とは、当該構成要素を構成するＣＰＵ等の演算処理装置が、ＲＯＭ、ＲＡＭ等のメモリ又は記録媒体から必要な情報に加えてソフトウェアを読み出し、当該情報に対して当該ソフトウェアにしたがって演算処理を実行するように「プログラムされている」又は「デザイン（設計）されている」ことを意味する。各構成要素が共通のプロセッサ（演算処理装置）により構成されてもよく、各構成要素が相互通信可能な複数のプロセッサにより構成されてもよい。

（情報出力処理）
次に、図５〜図７を参照して、情報出力処理を説明する。

エージェント装置１の制御部１００は、センサ部１１により取得された情報、操作入力部１６により検知された操作、撮像部１９１により撮像された画像、音声入力部１９２により検知された音声及び不図示の対象車両Ｘのユーザである対象ユーザが装着しているウェアラブルセンサから取得された対象ユーザの生体情報のうちの少なくとも１つに基づいて、対象車両Ｘの走行状態及び対象ユーザの状態の一方または両方を認識する（図５／ＳＴＥＰ１０２）。また、制御部１００は、認識した対象車両Ｘの走行状態及び対象ユーザの状態の一方または両方の時系列データを記憶部１３に記憶する。

例えば、制御部１００は、センサ部１１により取得された情報に基づいて、対象車両Ｘの動作状態としての、時系列的な位置、対象車両Ｘの走行速度、対象車両Ｘの向きを認識する。

また、例えば、制御部１００は、操作入力部１６により検知された操作に基づいて、対象ユーザの状態としての、「今の気分は？」等のアンケートに対する回答を認識する。

また、例えば、制御部１００は、撮像部１９１により撮像された画像に基づいて、対象ユーザの状態としての、対象ユーザの表情及び挙動を認識する。

また、例えば、制御部１００は、音声入力部１９２により検知された音声に基づいて、対象ユーザの状態としての、対象ユーザの発言内容及び発言する際の声の高さを認識する。

また、例えば、制御部１００は、対象ユーザが装着したウェアラブルデバイスから受信した生体情報（筋電、脈拍、血圧、血中酸素濃度、体温等）を認識する。

制御部１００は、対象車両Ｘの走行状態及び対象ユーザの状態の一方または両方に基づいて、対象ユーザの感情を推定する（図５／ＳＴＥＰ１０４）。

例えば、制御部１００は、あらかじめ定められた規則に従って、対象車両Ｘの走行状態及び対象ユーザの状態の一方または両方に基づいて、対象ユーザの感情を推定してもよい。

感情を示す情報は、好き、平穏、嫌い、耐えるのような感情の種別と、整数で表され、感情の強弱を示す強度とを含む。感情の種別は、好き、平穏のように肯定的な感情と、嫌い、耐えるのような否定的な感情とを少なくとも含む。

たとえば、対象車両Ｘの速度が所定の速度以上である状態が所定の時間以上続いている場合、制御部１００は、肯定的な感情、例えば好きを対象ユーザの感情の種別として推定してもよい。また、対象車両Ｘの速度が所定の速度未満である状態が所定の時間以上続いていたり、対象車両Ｘの速度が短期間で頻繁に増減しているような場合には、制御部１００は、否定的な感情、肯定的な感情、例えば嫌いを対象ユーザの感情の種別として推定してもよい。

また、制御部１００は、これらの状態が長く続いているほど、高い値を対象ユーザの感情の強度として推定してもよい。

また、制御部１００は、例えば、アンケートに対する回答に基づいて、対象ユーザの感情を推定してもよい。たとえば、アンケートに対する回答が「とても落ち着いている」であった場合には、制御部１００は、対象ユーザの感情の種別を肯定的な感情の「平穏」、対象ユーザの感情の強度を高い値（たとえば３）として推定してもよい。アンケートに対する回答が「少しイライラしている」であった場合には、制御部１００は、対象ユーザの感情の種別を否定的な感情の「嫌い」、対象ユーザの感情の強度を低い値（たとえば１）として推定してもよい。

また、制御部１００は、対象ユーザの表情に基づいて、対象ユーザの感情を推定してもよい。たとえば、制御部１００は、画像解析を行って対象ユーザが笑っているような表情をしていると判断した場合、対象ユーザの感情の種別を肯定的な感情の「好き」、対象ユーザの感情の強度を高い値（たとえば５）として推定してもよい。また、たとえば、制御部１００は、画像解析を行って対象ユーザがむっとした表情をしていると判断した場合、制御部１００は、対象ユーザの感情の種別を否定的な感情の「嫌い」、対象ユーザの感情の強度を低い値（たとえば２）として推定してもよい。これに加えて又は代えて、制御部１００は、対象ユーザの視線または顔の向きを加味して対象ユーザの感情を推定してもよい。

また、制御部１００は、対象ユーザの挙動に基づいて、対象ユーザの感情を推定してもよい。たとえば、制御部１００は、画像解析を行って対象ユーザの動きがほとんどないと判断した場合、制御部１００は、対象ユーザの感情の種別を肯定的な感情の「平穏」、感
情の強度を低い値（たとえば２）として推定してもよい。また、たとえば、制御部１００は、画像解析をおこなって対象ユーザが落ち着きなく動いていると判断した場合、制御部１００は、対象ユーザの感情の種別を否定的な感情の「嫌い」、感情の強度を高い値（たとえば４）として推定してもよい。

また、制御部１００は、対象ユーザの発言内容に基づいて、対象ユーザの感情を推定してもよい。たとえば、制御部１００は、音声解析を行って対象ユーザの発言内容が何かをほめたり、期待したりしている等肯定的な内容であると判断した場合には、対象ユーザの感情を肯定的な感情である「好き」、対象ユーザの感情の強度を低い値（たとえば１）として推定してもよい。たとえば、制御部１００は、音声解析を行って対象ユーザの発言内容が何かを非難したりする等否定的な内容であると判断した場合には、対象ユーザの感情を否定的な感情である「嫌い」、対象ユーザの感情の強度を高い値（たとえば５）として推定してもよい。また、制御部１００は、対象ユーザの発言内容に特定のキーワードが含まれる場合（「いいね」「超いいね」等）に、当該キーワードに関連付けられた感情の種別と、感情の強度とを対象ユーザの感情として推定してもよい。

また、制御部１００は、対象ユーザの発言する際の声の高さに基づいて、対象ユーザの感情を推定してもよい。たとえば、制御部１００は、対象ユーザの発言する際の声の高さが所定の高さ以上である場合、対象ユーザの感情を肯定的な感情である「好き」、対象ユーザの感情の強度を高い値（たとえば５）として推定してもよい。制御部１００は、対象ユーザの発言する際の声の高さが所定の高さ未満である場合、対象ユーザの感情を否定的な感情である「耐える」、対象ユーザの感情の強度を中程度の値（たとえば３）として推定してもよい。

また、制御部１００は、対象ユーザが装着したウェアラブルデバイスからの生体情報（筋電、脈拍、血圧、血中酸素濃度、体温等）を用いて対象ユーザの感情を推定してもよい。

また、例えば、制御部１００は、機械学習によって生成された対象車両Ｘの走行状態及び対象ユーザの状態から対象ユーザの感情を出力する感情エンジンを用いて、対象車両Ｘの走行状態及び対象ユーザの状態に基づいて、対象ユーザの感情を推定してもよい。

また、例えば、制御部１００は、あらかじめ定められたテーブルを参照して、対象車両Ｘの走行状態及び対象ユーザの状態に基づいて、対象ユーザの感情を推定してもよい。

制御部１００は、これらを組み合わせて対象ユーザの感情を推定してもよい。

制御部１００は、対象車両Ｘの走行状態が所定の走行状態である期間が所定の期間以上継続しているという条件が充足しているかを判定する（図５／ＳＴＥＰ１０６）。

所定の走行状態とは、例えば、対象車両Ｘが高速道路を走行しているなど、対象車両Ｘの走行が安定している可能性がある状態であることが好ましい。例えば、所定の走行状態とは、対象車両Ｘの走行速度が所定の速度範囲（ゼロｋｍ／ｈより大きい第１速度以上、かつ、第１速度以上の第２速度以下）に含まれるような状態であってもよい。また、例えば、所定の走行状態とは、対象車両Ｘの前後加速度または横加速度が急加速または急減速がない所定の加速度範囲（ゼロｋｍ／ｈ２以下の第１加速度以上、かつ、ゼロｋｍ／ｈ２以上の第２加速度以下）に含まれるような状態であってもよい。また、例えば、所定の走行状態とは、対象車両Ｘの向きがある方向から所定の角度範囲に含まれるような状態であってもよい。ある方向とは、例えば、対象車両Ｘの時系列的な位置から推定される対象車両Ｘの進行方向であってもよい。

所定の期間とは、対象車両Ｘが高速道路を走行しているなど、対象車両Ｘの走行が安定している蓋然性が高いと判断できるような期間（たとえば３０秒、１分または５分）であることが好ましい。

当該判定結果が肯定的である場合（図５／ＳＴＥＰ１０６・・ＹＥＳ）、制御部１００は、第１感情を対象車両Ｘの仮想的な感情として決定する（図５／ＳＴＥＰ１０８Ａ）。第１感情は、例えば、肯定的な感情であり、好き、平穏、愛しい、楽しい、機嫌がいい、安心である。

制御部１００は、さらに、対象ユーザの感情を勘案して、対象ユーザの感情に近くなるように、対象車両Ｘの仮想的な感情を決定してもよい。制御部１００は、エージェント感情指標値を第１感情（たとえば「楽しい」）になるように調整したうえで、後述する図５／ＳＴＥＰ１０８Ｂと同様の処理により対象車両Ｘの仮想的な感情を決定してもよい。

制御部１００は、第１の感情に対応するエージェント画像を作成する（図５／ＳＴＥＰ１１０Ａ）。例えば、楽しいの感情であれば、図４の基本表現４１のうち好きの基本表現と、付加パーツ４２のうち楽しいの付加パーツとを組み合わせることで、楽しいの応用表現を作成する。

制御部１００は、第１の感情に応じて、出力する情報の内容及び出力態様を選択する（図５／ＳＴＥＰ１１２Ａ）。出力する情報の内容は、ユーザの嗜好に関する質問、その他の質問、ニュース、豆知識、ユーザが走行している地域の紹介、有名な地点の紹介、音楽等のコンテンツ及びその説明等、様々な内容であってもよいが、ユーザの嗜好に関する質問が含まれていることが好ましい。また、出力される情報の情報量は、豊富であることが好ましく、所定の閾値以上の情報量であることが好ましい。また、情報を出力する間隔は、比較的頻繁であることが好ましく、所定の間隔以下で情報が出力されることが好ましい。また、出力される情報の出力態様は、第１の感情を反映したものであることが好ましく、例えば、出力される音声のトーンが高いものであることが好ましい。

制御部１００は、選択された出力する情報の内容及び出力態様に従って、表示部１５及びオーディオ部１７の一方または両方に情報を出力する（図５／ＳＴＥＰ１１４Ａ）。

制御部１００は、操作入力部１６、撮像部１９１、音声入力部１９２及びウェアラブルセンサを介して、対象ユーザの反応としての、操作情報、対象ユーザの表情、対象ユーザの挙動、対象ユーザの音声および対象ユーザの生体情報のうちの少なくとも１つを認識する（図５／ＳＴＥＰ１１６Ａ）。

制御部１００は、対象ユーザの感情に基づいて、ユーザの反応の信頼度を評価する（図５／ＳＴＥＰ１１８Ａ）。例えば、制御部１００は、対象ユーザの感情が肯定的な感情である場合、感情の強度が高いほど、ユーザの反応の信頼度が高いと評価する。例えば、制御部１００は、対象ユーザの感情が肯定的な感情である場合のほうが、対象ユーザの感情が否定的な感情である場合よりもユーザの反応の信頼性が高いと評価する。例えば、制御部１００は、対象ユーザの感情が否定的な感情である場合、対象ユーザの感情の強度が低い（否定的な感情が弱い）ほど、ユーザの反応の信頼性が高いと評価する。

制御部１００は、対象ユーザの反応とその信頼度とに基づいて、対象ユーザの嗜好を推定する（図５／ＳＴＥＰ１２０Ａ）。

例えば、図５／ＳＴＥＰ１１４Ａで出力された質問が「海を好き？」であり、図５／Ｓ
ＴＥＰ１１６Ａでのユーザの反応がその質問を肯定するような内容であり、図５／ＳＴＥＰ１１８Ａでの信頼度が高い場合、制御部１００は、ユーザが海を好きな確度は高いと判断する。また、例えば、図５／ＳＴＥＰ１１４Ａで出力された質問が「海を好き？」であり、図５／ＳＴＥＰ１１６Ａでのユーザの反応がその質問を肯定するような内容であり、図５／ＳＴＥＰ１１８Ａでの信頼度が低い場合、制御部１００は、ユーザが海を好きな確度は低いと判断する。

また，例えば、図５／ＳＴＥＰ１１４Ａで出力された質問が「海を好き？」であり、図５／ＳＴＥＰ１１６Ａでのユーザの反応がその質問を否定するような内容であり、図５／ＳＴＥＰ１１８Ａでの信頼度が高い場合、制御部１００は、ユーザが海を嫌い確度は高いと判断する。また、例えば、図５／ＳＴＥＰ１１４Ａで出力された質問が「海を好き？」であり、図５／ＳＴＥＰ１１６Ａでのユーザの反応がその質問を否定するような内容であり、図５／ＳＴＥＰ１１８Ａでの信頼度が低い場合、制御部１００は、ユーザが海を嫌いな確度は低いと判断する。

制御部１００は、推定されたユーザの嗜好を示す情報を記憶部１３に記憶するとともに、サーバ３に送信する。サーバ３は、受信した推定されたユーザの嗜好を示す情報を対象ユーザを識別する情報とともに記憶する。

制御部１００は、推定されたユーザの嗜好に基づいて、出力する情報を決定し、表示部１５およびオーディオ部１７の一方または両方に出力する（図５／ＳＴＥＰ１２２Ａ）。

例えば、制御部１００は、ユーザが海を好きであるとの確度が高いと判断した場合には、海に関する情報（海に関するニュース、海に関する話題、海に関する音楽、所定距離以内の海の紹介）の出力頻度を所定の基準よりも高めてもよいし、出力内容を所定の基準よりもより詳細にしてもよいし、出力時間を所定の基準よりも長くしてもよいし、出力音量等を所定の基準よりも大きくしてもよい。

また、例えば、制御部１００は、ユーザが海を嫌いであるとの確度が高いと判断した場合には、海に関する情報（海に関するニュース、海に関する話題、海に関する音楽、所定距離以内の海の紹介）の出力頻度を所定の基準よりも低めてもよいし、出力内容をより所定の基準よりも簡素にしてもよいし、出力時間を所定の基準よりも短くしてもよいし、出力音量等を所定の基準よりも小さくしてもよい。

また、制御部１００は、ユーザの嗜好の確度が低い場合には、ユーザの嗜好の確度を高めるため、同種の情報を出力するようにしてもよい。

図５／ＳＴＥＰ１０６の判定結果が否定的である場合（図５／ＳＴＥＰ１０６・・ＮＯ）、制御部１００は、対象車両Ｘの仮想的な感情として、第２感情を決定し、第２感情に応じた表現を決定する（図５／ＳＴＥＰ１０８Ｂ、図５／ＳＴＥＰ１１０Ｂ）。制御部１００は、ユーザの感情と類似した感情となるように、対象車両Ｘの仮想的な感情を決定する。制御部１００は、さらに、安定的な走行の際には肯定的な感情になりやすくなり、急ブレーキ、急ハンドルがあった場合には否定的感情になりやすくなるなど、ユーザ感情に加えて対象車両Ｘの走行状態を加味して対象車両Ｘの仮想的な感情を決定してもよい。

例えば、制御部１００は、ユーザの感情を、定常状態の第１値および穏やかさの第２値で評価し、第１値および第２値をエージェント感情指標値として評価する。

そして、制御部１００は、エージェント感情指標値を元に図６または図７に示される感情マップに基づいて、対象車両Ｘの仮想的な感情を決定し、当該感情に対応する表現を決
定する。なお、図６および図７の感情マップは、定常状態の第１軸と、穏やかさの第２軸であらわされている。

例えば、エージェント感情指標値が図６の第１象限に含まれる場合、制御部１００は、対象車両Ｘの仮想的な感情を「好き」と決定し、エージェントの感情表現の基本表現として、好きの基本表情画像４１１を選択する。制御部１００は、画像に代えてまたは加えて、エージェントの感情表現の基本表現として、内容又は発声態様がエージェントの感情に対応するような音声メッセージ又は音楽を選択してもよい。

また、例えば、エージェント感情指標値が第１軸の値が第１閾値Ｔ１以上かつ及び第２軸の値が第２閾値Ｔ２以上である場合、制御部１００は、図７に示されるようなマップを用いて、対象車両Ｘの仮想的な感情を「愛しい」と決定し、エージェントの感情表現の応用表現として、「愛しい」の付加パーツ４２１を選択する。また、例えば、エージェント感情指標値が第１軸の値が第１閾値Ｔ１以上かつ及び第２軸の値がゼロ以上第２閾値Ｔ２未満である場合、制御部１００は、対象車両Ｘの仮想的な感情を「楽しい」と決定し、エージェントの感情表現の応用表現として、「楽しい」の付加パーツ４２２を選択する。また、例えば、エージェント感情指標値が第１軸の値が０以上第１閾値Ｔ１未満である場合、制御部１００は、エージェントの感情表現の応用表現としての付加パーツを選択しない。また、制御部１００は、第１軸又は第２軸とは異なる評価軸を基にして、付加パーツを選択してもよい。

制御部１００は、画像に代えてまたは加えて、エージェントの感情表現の付加パーツとして、内容又は発声態様がエージェントの感情に対応するような音声メッセージ又は音楽を選択してもよい。

制御部１００は、第２の感情に応じて、出力する情報の内容及び出力態様を選択する（図５／ＳＴＥＰ１１２Ｂ）。出力する情報の内容は、ニュース、豆知識、ユーザが走行している地域の紹介、有名な地点の紹介、音楽等のコンテンツ及びその説明等、様々な内容であってもよいが、ユーザの嗜好に関する質問が含まれないことが好ましい。また、出力される情報の情報量は、少ないことが好ましく、所定の閾値未満の情報量であることが好ましい。また、情報を出力する間隔は、比較的長いことが好ましく、所定の間隔以上の間隔をあけて情報が出力されることが好ましい。また、出力される情報の出力態様は、第２の感情を反映したものであることが好ましく、例えば、出力される音声のトーンが低いものであることが好ましい。

制御部１００は、選択された出力する情報の内容及び出力態様に従って、表示部１５及びオーディオ部１７の一方または両方に情報を出力する（図５／ＳＴＥＰ１１４Ｂ）。

（本実施形態の作用効果）
当該構成のエージェント装置１によれば、対象車両Ｘの仮想的な感情に応じて表示部１５またはオーディオ部１７の一方または両方に出力される情報の内容及び出力態様の一方または両方が決定される（図５／ＳＴＥＰ１１２Ａ又はＳＴＥＰ１１２Ｂ）。出力される情報の内容または出力態様に、対象車両Ｘの仮想的な感情に応じた傾向が反映されることとなる。種々の傾向の情報の内容または出力態様を認知したユーザに対して、あたかも対象車両Ｘが感情を有しているかのような印象を与えうる。ひいては、情報の内容及び出力態様の一方または両方が変更されたとしても、対象車両Ｘの感情が変わったことが原因だとユーザに印象を与えうることができ、ユーザに与えられる違和感を軽減または解消しうる。

また、対象車両Ｘの走行状態が所定の走行状態である期間が所定の期間以上継続したと
いう条件が充足される場合（図５／ＳＴＥＰ１０６・・ＹＥＳ）、対象車両Ｘの走行が安定しており、条件を満たさない場合と比べれば長期にわたって運転負荷が低い状態が継続しやすい。対象車両Ｘの走行が安定している場合には、ユーザの運転負荷が低いと推察される。運転負荷が低い場合、ユーザは出力される情報に注意を払いやすい。このようなユーザが情報に注意を払いやすい期間に、所定の感情に応じた傾向の情報の内容及び出力態様の一方または両方で情報が出力されることで（図５／ＳＴＥＰ１１４Ａ）、情報に注意を払っているときに情報の内容及び出力態様の一方または両方が頻繁に変化する場合よりも、ユーザに与えられる違和感を軽減または解消しながら、情報を適切に与えうる。

これにより、ユーザに与えられる違和感を軽減または解消しながら、ユーザの運転負荷に応じてユーザに対して適切に情報を与えうる。

当該構成のエージェント装置１によれば、条件が充足されている期間における表示部１５及びオーディオ部１７の一方または両方に出力される情報に対するユーザの反応に基づいて、ユーザの嗜好が推定される（図５／ＳＴＥＰ１２０Ａ）。前述したとおり、条件が充足する期間は、運転負荷が低いと推定される期間であるところ、運転負荷が低いときにはユーザが提供された情報に注意を払いやすいと推察される。したがって、運転負荷が低いときの反応は、ユーザが提供された情報に注意を払った上での反応であると推察されるから、ユーザの嗜好を信頼性高く示している蓋然性が高い。

したがって、当該構成のエージェント装置１によれば、信頼性の高い反応に基づいてユーザの嗜好が精度よく推定されうる。

当該構成のエージェント装置１によれば、車両の所定の感情に応じて出力される情報が前記ユーザの嗜好を推定するための質問を含むので、効率よくユーザの嗜好を推定するための信頼性の高い情報を収集しうる。

当該構成のエージェント装置１によれば、制御部１００により推定された前記ユーザの感情に応じて、ユーザの反応に対する信頼性を決定するように構成されている（図５／ＳＴＥＰ１１８Ａ）。

ここで、ユーザの機嫌が悪いときにはユーザが提供された情報にあまり注意を払わなかったり、逆にユーザの機嫌がよいときにはユーザが提供された情報に注意を払い、真摯に対応するなど、ユーザの反応の信頼性はユーザの感情に応じて変化すると推察される。

したがって、ユーザの感情に応じてユーザの反応に信頼度が付加されることにより、ユーザの嗜好を推定するにあたって基礎となる情報を適切に信頼度を評価することができる。

当該構成のエージェント装置１によれば、条件が充足される期間においては、対象車両Ｘの走行速度が一定の範囲で安定しているので、ユーザの運転負荷が低くなり、ユーザが出力部から出力される情報に注意を払いやすくなると推察される。この期間に車両の所定の感情に応じて出力部から出力される情報の内容及び出力態様の一方または両方が決定されることで（図５／ＳＴＥＰ１１２Ａ）、ユーザに与えられる違和感を軽減または解消しながら、ユーザの運転負荷に応じてユーザに対して適切に情報を与えうる。

当該構成のエージェント装置１によれば、条件が充足される期間においては、対象車両Ｘの加速度が一定の範囲で安定しているので、ユーザの運転負荷が低くなり、ユーザが出力部から出力される情報に注意を払いやすくなると推察される。この期間に車両の所定の感情に応じて出力部から出力される情報の内容及び出力態様の一方または両方が決定され
ることで（図５／ＳＴＥＰ１１２Ａ）、ユーザに与えられる違和感を軽減または解消しながら、ユーザの運転負荷に応じてユーザに対して適切に情報を与えうる。

１‥エージェント装置、２‥携帯端末装置、３‥サーバ、１１‥センサ部、１１１‥ＧＰＳセンサ、１１２‥車速センサ、１１３‥ジャイロセンサ、１２‥車両情報部、１３‥記憶部、１４‥無線部、１４１‥近接無線通信部、１４２‥無線通信網通信部、１５‥表示部、１６‥操作入力部、１７‥オーディオ部、１８‥ナビゲーション部、１９１‥撮像部（車内カメラ）、１９２‥音声入力部（マイク）、２１‥センサ部、２１１‥ＧＰＳセンサ、２１３‥ジャイロセンサ、２３‥記憶部、２３１‥データ記憶部、２３２‥アプリケーション記憶部、２４‥無線部、２４１‥近接無線通信部、２４２‥無線通信網通信部、２５‥表示部、２６‥操作入力部、２７‥音声出力部、２９１‥撮像部（カメラ）、２９２‥音声入力部（マイク）、Ｘ‥車両（移動体）。

Claims (5)

1. 所定の嗜好対象についての情報を出力する出力部と、
   前記所定の嗜好対象についての情報に対するユーザの反応を検知する入力部と、
   前記入力部により検知された前記所定の嗜好対象についての情報に対する前記ユーザの反応に基づいて、前記所定の嗜好対象についての前記ユーザの嗜好を推定する嗜好推定部と、
   前記ユーザの感情を推定するユーザ感情推定部と、を備え、
   前記嗜好推定部は、
   前記ユーザ感情推定部により推定された前記ユーザの感情に応じて、前記入力部により検知された前記所定の嗜好対象についての情報に対する前記ユーザの反応に対する信頼度を決定し、
   前記ユーザの反応が前記所定の嗜好対象についての情報に対して肯定的である場合は、前記信頼度が高いほど前記ユーザが前記所定の嗜好対象を好む確度を高く決定し、前記ユーザの反応が前記所定の嗜好対象についての情報に対して否定的である場合は、前記信頼度が高いほど前記ユーザが前記所定の嗜好対象を嫌う確度を高く決定し、
   前記所定の嗜好対象に対する前記ユーザの好む確度及び嫌う確度に基づいて、前記所定の嗜好対象に対する前記ユーザの嗜好を推定するように構成されている情報提供装置。
2. 請求項１記載の情報提供装置において、
   出力される情報は、前記ユーザの嗜好を推定するための質問を含む情報提供装置。
3. 請求項１又は２記載の情報提供装置において、
   前記ユーザの感情が肯定的な感情である場合、感情の強度が高いほど、ユーザの反応の信頼度が高いと評価する情報提供装置。
4. 請求項１〜３のいずれか１項に記載の情報提供装置において、
   前記ユーザの感情が否定的な感情である場合、感情の強度が高いほど、ユーザの反応の信頼度が低いと評価する情報提供装置。
5. 請求項１〜４のいずれか１項に記載の情報提供装置において、
   前記ユーザの反応が前記所定の嗜好対象についての情報に対して肯定的である場合及び否定的である場合のいずれの場合も、前記確度が低い場合には、出力した情報と同種の情報を再度出力し、再度出力した情報に対する前記ユーザの反応に基づいて、ユーザの嗜好を推定する情報提供装置。