JP2022135550A - 施設提案装置 - Google Patents

Abstract

【課題】煩雑な操作を行うことなく施設の推奨情報を提案することができる施設提案装置を提供すること。【解決手段】車載装置は、所定のタイミングで施設に関する関連情報を出力する関連情報出力処理部５３と、関連情報の出力に対する利用者の反応を検出する反応検出部５４と、反応検出部５４により検出された利用者の反応に基づいて、施設の推奨情報を作成する推奨情報作成部５５と、推奨情報を利用者に提案する推奨情報提案部５６とを備えている。【選択図】図２

Description

本発明は、利用者に利用施設を提案する施設提案装置に関する。

従来から、表示画面内に目的地または通過地点が入った場合、場所－香りの対応関係テーブルを参照し、その目的地または通過地点を示す場所ジャンルに対応して設定されている香り番号に該当する香りを放出させることにより、車両運転者が、表示画面内に入っている目的地または通過地点に対応する香りを嗅覚によって認識することができるようにした車載用案内装置が知られている（例えば、特許文献１参照。）。

特開２００１－３４９７３９号公報

ところで、上述した特許文献１に開示された車載用案内装置では、目的地等の場所に関連付けて香りを発生させているだけである。一方で、従来から利用者が指定したジャンルに属する施設を表示することが行われているが、上述した香りの発生を組み合わせた手法は今までなかった。また、予め利用者自身がジャンルを指定する場合にはそのための操作が必要になり、特に運転の合間に操作を行おうとすると、走行中は操作が制限されることもあり、操作が煩雑になるという問題があった。そのため、煩雑な操作を行うことなく、利用者の意思を反映して施設の推奨情報を得ることができる手法が望まれている。

本発明は、このような点に鑑みて創作されたものであり、その目的は、煩雑な操作を行うことなく施設の推奨情報を提案することができる施設提案装置を提供することにある。

上述した課題を解決するために、本発明の施設提案装置は、所定のタイミングで施設に関する関連情報を出力する関連情報出力手段と、関連情報の出力に対する利用者の反応を検出する反応検出手段と、反応検出手段により検出された利用者の反応に基づいて、施設の推奨情報を作成する推奨情報作成手段と、推奨情報を利用者に提案する推奨情報提案手段とを備えている。

施設の関連情報を出力したときの利用者の反応を検出して施設の推奨情報を作成しているため、利用者自身は煩雑な操作を行うことなく、施設の推奨情報を作成し、利用者に対して提案することが可能となる。

また、上述した関連情報は、施設に関連する香り、音、映像のいずれか一つあるいは２つ以上の組合わせであることが望ましい。特に、上述した反応検出手段による検出の対象となる利用者の反応は、利用者の快／不快の感情であり、推奨情報設定手段は、利用者が快の感情を示した関連情報に対応する施設の推奨情報を作成することが望ましい。施設を連想させる香り、音、映像を用いることにより、その時点における利用者の反応によって、利用者がその施設に対してどのような感情を抱くかを予想することができるため、利用者が欲する施設の推奨情報を提供することが可能となる。

また、利用者の顔を撮像するカメラをさらに備え、反応検出手段は、カメラによって撮像された利用者の表情に基づいて利用者の反応を検出することが望ましい。カメラで利用者の表情を撮像することにより、眼や口の周りの表情筋の動きに基づいて、利用者が関連情報の出力に対してどのように思っているかを知ることができる。

また、利用者の音声を集音するマイクロホンをさらに備え、反応検出手段は、マイクロホンで集音された利用者が発する音声に基づいて利用者の反応を検出することが望ましい。関連情報の出力時に利用者が口にした内容（音声）を集音することにより、利用者が関連情報の出力に対してどのように思っているかを知ることができる。

また、上述した関連情報出力手段は、タイミングをずらして複数の関連情報を出力し、推奨情報作成手段は、これら複数の関連情報のそれぞれに対して反応検出手段によって検出された利用者の反応に基づいて、施設の推奨情報を作成することが望ましい。特に、上述した関連情報出力手段は、タイミングをずらして複数の関連情報を出力し、推奨情報作成手段は、これら複数の関連情報のそれぞれに対して反応検出手段によって検出された利用者の反応の中で、利用者が感じる快の程度が最も大きい関連情報に対応する施設の推奨情報を作成することが望ましい。これにより、複数の施設について、利用者が推奨情報の作成を最も希望する施設を推測することが可能となる。

また、上述した所定のタイミングは、走行中の自車位置が、関連情報に対応する施設に所定のしきい値を超えて接近したときであることが望ましい。これにより、近くにある施設に関する推奨情報を、利用者が欲する場合に限って提案することが可能となる。

また、上述した所定のタイミングは、所定の時刻に達したときであることが望ましい。これにより、利用時間が限られる施設（例えば、昼食や夕食の時間帯）に関する推奨情報を、利用者が欲する場合に限って提案することが可能となる。

一実施形態の車載装置の構成を示す図である。 施設提案動作プログラムをＣＰＵによって実行することで動作する施設提案処理部の機能ブロックを示す図である。 所定のタイミングで施設に関する関連情報を出力し、そのときの利用者の反応をみてさらに施設の推奨情報を出力する動作手順を示す流れ図である。

以下、本発明の施設提案装置を適用した一実施形態の車載装置について、図面を参照しながら説明する。

図１は、一実施形態の車載装置の構成を示す図である。図１に示すように、本実施形態の車載装置は、ヘッドユニット１やスピーカ４、マイクロホン５、カメラ１００、香り発生装置１１０を含んでいる。

本実施形態の車載装置では、一般的なナビゲーション動作を行う動作と並行して、所定のタイミングで施設に関する関連情報を出力し、そのときの利用者（運転者）の反応を検出し、この反応が良好な場合にこの施設に対応する推奨情報を作成して出力する動作（施設提案動作）を行う。

ヘッドユニット１は、例えばダッシュボードの中央位置に設置されており、ナビゲーション処理部１０、操作部２０、入力制御部２６、表示処理部３０、表示装置３２、デジタル－アナログ変換器（Ｄ／Ａ）４０、アナログ／デジタル変換器（Ａ／Ｄ）４２、ＣＰＵ５０、メモリ６０、入出力インタフェース部（Ｉ／Ｏ ＩＦ）８０を備えている。

ナビゲーション処理部１０は、メモリ６０に記憶されている地図データを用いてヘッドユニット１が搭載された車両の走行を案内するナビゲーション動作を行う。このナビゲーション動作には、ＧＰＳ装置１２を用いた自車位置検出や、自車位置周辺の地図表示、目的地までの走行経路を計算する経路探索、計算した走行経路に沿って目的地までの走行を案内する経路誘導、利用者の操作に基づく施設検索などの各動作が含まれる。

操作部２０は、ヘッドユニット１に対する利用者による操作を受け付けるためのものであり、表示装置３２の周囲に配置された各種の操作キー、操作スイッチ、操作つまみ等を含んで構成されている。また、表示装置３２に各種の操作画面や入力画面が表示された時点で、これらの操作画面や入力画面の一部を利用者が指などで直接指し示すことにより、操作画面や入力画面の表示項目を選択することができるようになっており、このような操作画面や入力画面を用いた操作を可能とするために、指し示された指などの位置を検出するタッチパネルが操作部２０の一部として備わっている。なお、タッチパネルを用いる代わりに、リモートコントロールユニット等を用いて操作画面や入力画面の一部を利用者の指示に応じて選択するようにしてもよい。入力制御部２６は、操作部２０を監視しており、その操作内容を決定する。

表示処理部３０は、各種の操作画面や入力画面等を表示する映像信号を出力して表示装置３２にこれらの画面を表示するとともに、ナビゲーション処理部１０による処理内容や操作画面を表示したり、施設に関する関連情報や推奨情報を表示する。表示装置３２は、運転席と助手席の中央前方に設置されており、例えば液晶表示装置（ＬＣＤ）を用いて構成されている。

デジタル－アナログ変換器４０は、ナビゲーション処理部１０などの処理によって生成される音声データをアナログの音声信号に変換してスピーカ４から車室内に向けて出力する。なお、実際には、デジタル－アナログ変換器４０とスピーカ４の間には信号を増幅する増幅器が接続されているが、図１ではこの増幅器は省略されている。

アナログ－デジタル変換器４２は、マイクロホン５によって集音されて出力される利用者の発話音声（アナログの音声信号）をデジタルの発話データに変換する。

ＣＰＵ５０は、メモリ６０に格納された所定のプログラムを実行することにより、ヘッドユニット１の全体を制御するとともに、関連情報の出力や推奨情報の出力などの施設提案動作を行う。施設提案動作の具体的な内容については後述する。

メモリ６０は、ＣＰＵ５０の動作プログラムを格納するとともに、ＣＰＵ５０の動作に必要な各種データを格納する作業領域として用いられる。ＣＰＵ５０によって実行される動作プログラムには、ヘッドユニット１が施設提案動作を行うための施設提案動作プログラムが含まれている。メモリ６０は、例えば、ＲＯＭやＲＡＭ等の半導体メモリによって構成されており、これら以外にハードディスク装置などを含むようにしてもよい。

入出力インタフェース部８０は、各種の入出力機器との間で信号（データ）の入出力処理を行う。本実施形態では、信号の処理対象となる入出力機器として、カメラ１００と香り発生装置１１０などが接続されている。

カメラ１００は、主に車室内の利用者（運転者）を撮像するためのものであり、運転者の前方に設定されている。香り発生装置１１０は、主に利用者に向けて香りを発生させる。この香りは、最終的に施設の推奨情報の提案の有無を判定するためのものであって、利用者が利用を希望する施設を選択するために用いられる。例えば、昼食時あるいは夕食時に特定の料理の香りを発生させる場合などを想定している。具体的には、代表的な料理の香り成分を噴霧したり、複数の料理の香りを再現するために必要な複数種類の香り成分を適宜組み合わせて噴霧する場合などが考えられる。

図２は、施設提案動作プログラムをＣＰＵ５０によって実行することで動作する施設提案処理部の機能ブロックを示す図である。図２に示すように、施設提案処理部５０Ａは、嗜好情報収集部５１、出力タイミング判定部５２、関連情報出力処理部５３、反応検出部５４、推奨情報作成部５５、推奨情報提案部５６を含んで構成されている。

嗜好情報収集部５１は、利用者の施設利用に関する嗜好情報を収集する。例えば、昼食時、夕食時、それ以外の時間帯のそれぞれにおいて利用頻度が高い飲食店のジャンルやチェーン店名、あるいは、食事以外でよく利用する施設のジャンルなどの情報が嗜好情報として収集される。これらの施設やジャンルの特定は、例えば、ナビゲーション処理部１０を用いて行われる施設検索の情報を用いたり、実際に過去に利用したことがある施設の情報を用いたりすることが考えられる。

出力タイミング判定部５２は、提案対象として候補施設を連想すると思われる施設の関連情報の出力タイミングを判定する。具体的には、走行中の自車位置が候補施設に所定のしきい値を超えて接近したとき（例えば、１ｋｍ以内になったとき）や、所定の時刻に達したとき（例えば、午前１１時を過ぎたとき）、あるいはこれらを組み合わせる場合などが考えられる。

関連情報出力処理部５３は、出力タイミング判定部５２によって判定された出力タイミングにおいて、利用者の嗜好に合った施設の関連情報を出力する。この関連情報には、香り、音、映像のいずれか一つあるいは２つ以上の組み合わせが含まれる。例えば、利用者が昼食時にカレー専門店をよく利用する場合には、カレーの香辛料の香りを関連情報として出力したり、この香りの出力と並行してカレーの映像を関連情報として作成して表示装置３２に表示する場合が考えられる。同様に、利用者が夕食時に焼き肉店をよく利用する場合には、焼き肉を焼いているときに出る香りや音、焼き肉を焼いている映像などを関連情報として用いる場合が考えられる。

特定の香りの発生は、関連情報出力処理部５３から香り発生装置１１０に対して香りの出力を指示することにより行われる。また、特定の音の出力は、関連情報出力処理部５３によって生成した音データ（例えば、焼き肉を焼いているときの音データ等が予め作成され、メモリ６０に格納されているものとする）をデジタル－アナログ変換器４０を通してスピーカ４から出力することにより行われる。さらに、特定の映像の表示は、関連情報出力処理部５３によって生成した画像データ（例えば、焼き肉を焼いている様子を示す画像データ等が予め作成され、メモリ６０に格納されているものとする）を表示処理部３０を通して表示装置３２で表示することにより行われる。

反応検出部５４は、関連情報出力処理部５３によって関連情報が出力されたときに、この出力に対応する利用者の反応を検出する。利用者の反応として、利用者の快／不快の感情が検出される。この検出は、関連情報が出力された際の利用者の表情と利用者の発する音声の少なくとも一方に基づいて行われる。利用者の表情として、カメラ１００による撮像によって得られた利用者の顔画像、特に、口と眼の周囲の表情筋の動きを観察することにより、その時点における利用者の感情が快状態にあるのか不快状態にあるのかを判別することができる。また、利用者が発してマイクロホン５で集音される音声に、積極的に関連情報に対して同意を示す音声（例えば、「いいね」や「××が食べたい」など）が含まれている場合には、利用者が快状態にあると判別することができる。

推奨情報作成部５５は、反応検出部５４によって利用者の快状態が検出されたときに、この快状態の検出対象となった施設に関する推奨情報を作成する。例えば、カレーの香りや映像の出力に対して利用者の快状態を検出した場合を想定すると、自車位置周辺のカレー専門店を検索してその店舗の紹介を含む推奨情報を作成する。具体的には、この推奨情報には、店舗名や自車位置からの距離、駐車場の有無などの情報を示す画像データや音声データが含まれている。

推奨情報提案部５６は、推奨情報として画像データを用いて推奨情報を示す映像を表示装置３２に表示するとともに、推奨情報としての音声データを用いて推奨情報を示す音声をスピーカ４から出力する。

上述した関連情報出力処理部５３、香り発生装置１１０、表示処理部３０、表示装置３２、デジタル－アナログ変換器４０、スピーカ４が関連情報出力手段に、反応検出部５４、カメラ１００、マイクロホン５、アナログ－デジタル変換器４２が反応検出手段に、推奨情報作成部５５が推奨情報作成手段に、推奨情報提案部５６、表示処理部３０、表示装置３２、デジタル－アナログ変換器４０、スピーカ４が推奨情報提案手段にそれぞれ対応する。

本実施形態の車載装置はこのような構成を有しており、次に、その動作を説明する。

図３は、所定のタイミングで施設に関する関連情報を出力し、そのときの利用者の反応をみてさらに施設の推奨情報を出力する動作手順を示す流れ図である。なお、嗜好情報収集部５１による嗜好情報の収集動作は、この動作手順以前から並行して行われており、その内容が適宜更新されるものとする。

自車両の走行時に出力タイミング判定部５２は、関連情報の出力タイミングが到来したか否かを判定する（ステップ１００）。出力タイミングでない場合には否定判断が行われ、この判定が繰り返される。また、出力タイミングが到来するとステップ１００の判定において肯定判断が行われる。例えば、午前１１時を過ぎた場合などに肯定判断が行われる。

次に、関連情報出力処理部５３は、関連情報を作成する１つの施設を特定する（ステップ１０２）。例えば、利用者の嗜好情報を考慮して、その時点で利用者が最も利用したいであろう施設や、その時点における自車位置に近い施設であって利用者の嗜好にあった施設などが特定される。

次に、関連情報出力処理部５３は、特定した施設の関連情報を作成する（ステップ１０４）。特定した施設を連想することができる関連情報（香り、音、映像の中の一つあるいは組合わせ）が作成される。また、関連情報出力処理部５３は、この作成した関連情報を出力する（ステップ１０６）。

次に、反応検出部５４は、この出力された関連情報に対応する利用者の反応を検出する（ステップ１０８）。具体的には、利用者の表情や利用者が発する音声が検出される。また、反応検出部５４は、この検出した利用者の表情や音声に基づいて、利用者が快感情を有するか否かを判定する（ステップ１１０）。例えば、出力された関連情報が利用者によって好ましいものである場合には、利用者が満足した表情を示すことが多く、表情筋の動きを観察することにより利用者の快感情を知ることができる。また、出力された関連情報が利用者によって好ましいものである場合には、利用者は肯定的な言葉を発することもあり、この発した言葉（音声）からも利用者の快感情を知ることができる。利用者が快感情を有しているとはいえない場合にはステップ１１０の判定において否定判断が行われる。この場合には、ステップ１００に戻って関連情報の出力タイミング判定が繰り返される。

また、利用者が快感情を有していると考えられる場合にはステップ１１０の判定において肯定判断が行われる。次に、推奨情報作成部５５は、利用者の快感情の対象となった関連情報に対応する施設に関する推奨情報を作成する（ステップ１１２）。また、推奨情報提案部５６は、この作成された推奨情報を表示や音声を用いて利用者に提案する（ステップ１１４）。その後、ステップ１００に戻って関連情報の出力タイミング判定が繰り返される。

このように、本実施形態の車載装置では、施設の関連情報を出力したときの利用者の反応を検出して施設の推奨情報を作成しているため、利用者自身は煩雑な操作を行うことなく、施設の推奨情報を作成し、利用者に対して提案することが可能となる。

特に、施設を連想させる香り、音、映像を用いることにより、その時点における利用者の反応によって、利用者がその施設に対してどのような感情を抱くかを予想することができるため、利用者が欲する施設の推奨情報を提供することが可能となる。

また、カメラ１００で利用者の表情を撮像することにより、眼や口の周りの表情筋の動きに基づいて、利用者が関連情報の出力に対してどのように思っているかを知ることができる。

また、関連情報の出力時に利用者が口にした内容（音声）をマイクロホン５で集音することにより、利用者が関連情報の出力に対してどのように思っているかを知ることができる。

また、走行中の自車位置が、関連情報に対応する施設に所定のしきい値を超えて接近したときに関連情報を出力することにより、近くにある施設に関する推奨情報を、利用者が欲する場合に限って提案することが可能となる。あるいは、所定の時刻に達したときに関連情報を出力することにより、利用時間が限られる施設（例えば、昼食や夕食の時間帯）に関する推奨情報を、利用者が欲する場合に限って提案することが可能となる。

なお、本発明は上記実施形態に限定されるものではなく、本発明の要旨の範囲内において種々の変形実施が可能である。例えば、上述した実施形態では、反応検出部５４によって検出された利用者の感情として快と不快の２種類を判別したが、さらに多くの判別を行うようにしてもよい。例えば、快と不快をさらに以下に示すように細分化する場合が考えられる。また、細分化した場合には快の程度に応じて推奨情報の内容に差を設けることが望ましい。

＋４：極端に快（施設のアイコンを地図上に表示し、音声で知らせ、目的地設定を促す）
＋３：非常に快（施設のアイコンを地図上に表示し、音声でも知らせる）
＋２：快（施設のアイコンを地図上に表示）
＋１：やや快（施設検索時に選択しやすくする、例えば検索リストの上位に配置）
０：快でも不快でもない
－１：やや不快
－２：不快
－３：非常に不快
－４：極端に不快
また、上述した実施形態では、関連情報の出力対象の施設を１つ特定したが（図３のステップ１０２）、関連情報出力処理部５３は、複数の施設を特定し、タイミングをずらしてそれぞれの施設に対応する複数の関連情報を順番に出力し、推奨情報作成部５５は、これら複数の関連情報のそれぞれに対して反応検出部５４によって検出された利用者の反応に基づいて、それぞれの施設に対応する推奨情報を作成するようにしてもよい。このとき、推奨情報作成部５５は、これら複数の関連情報のそれぞれに対して反応検出部５４によって検出された利用者の反応の中で、利用者が感じる快の程度が最も大きい関連情報に対応する施設の推奨情報を作成する。これにより、複数の施設について、利用者が推奨情報の作成を最も希望する施設を推測することが可能となる。あるいは、複数の施設のそれぞれに対応する推奨情報を並行して、あるいは、順番に（例えば、快の程度が大きい順に出力するようにしてもよい。

また、上述した実施形態では、香り発生装置１１０によって発生する香りについては特に限定しなかったが、例えば、実際に施設を利用した際に香りセンサで収集したその施設特有の香りをデータ化し、その施設に対応する関連情報としての香りとして、このデータを用いてその施設特有の香りを再現するようにしてもよい。

上述したように、本発明によれば、施設の関連情報を出力したときの利用者の反応を検出して施設の推奨情報を作成しているため、利用者自身は煩雑な操作を行うことなく、施設の推奨情報を作成し、利用者に対して提案することが可能となる。

１ ヘッドユニット
４ スピーカ
５ マイクロホン
１０ ナビゲーション処理部
２０ 操作部
４０ デジタル－アナログ変換器（Ｄ／Ａ）
４２ アナログ－デジタル変換器（Ａ／Ｄ）
５０ ＣＰＵ
５０Ａ 施設提案処理部
５１ 嗜好情報収集部
５２ 出力タイミング判定部
５３ 関連情報出力処理部
５４ 反応検出部
５５ 推奨情報作成部
５６ 推奨情報提案部
１００ カメラ
１１０ 香り発生装置

Claims (9)

1. 所定のタイミングで施設に関する関連情報を出力する関連情報出力手段と、
   前記関連情報の出力に対する利用者の反応を検出する反応検出手段と、
   前記反応検出手段により検出された利用者の反応に基づいて、施設の推奨情報を作成する推奨情報作成手段と、
   前記推奨情報を利用者に提案する推奨情報提案手段と、
   を備えることを特徴とする施設提案装置。
2. 前記関連情報は、施設に関連する香り、音、映像のいずれか一つあるいは２つ以上の組合わせであることを特徴とする請求項１に記載の施設提案装置。
3. 前記反応検出手段による検出の対象となる利用者の反応は、利用者の快／不快の感情であり、
   推奨情報設定手段は、利用者が快の感情を示した関連情報に対応する施設の推奨情報を作成することを特徴とする請求項１または２に記載の施設提案装置。
4. 利用者の顔を撮像するカメラをさらに備え、
   前記反応検出手段は、前記カメラによって撮像された利用者の表情に基づいて利用者の反応を検出することを特徴とする請求項１～３のいずれか一項に記載の施設提案装置。
5. 利用者の音声を集音するマイクロホンをさらに備え、
   前記反応検出手段は、前記マイクロホンで集音された利用者が発する音声に基づいて利用者の反応を検出することを特徴とする請求項１～４のいずれか一項に記載の施設提案装置。
6. 前記関連情報出力手段は、タイミングをずらして複数の前記関連情報を出力し、
   前記推奨情報作成手段は、これら複数の前記関連情報のそれぞれに対して前記反応検出手段によって検出された利用者の反応に基づいて、施設の推奨情報を作成することを特徴とする請求項１～５のいずれか一項に記載の施設提案装置。
7. 前記関連情報出力手段は、タイミングをずらして複数の前記関連情報を出力し、
   前記推奨情報作成手段は、これら複数の前記関連情報のそれぞれに対して前記反応検出手段によって検出された利用者の反応の中で、利用者が感じる快の程度が最も大きい前記関連情報に対応する施設の推奨情報を作成することを特徴とする請求項３に記載の施設提案装置。
8. 前記所定のタイミングは、走行中の自車位置が、前記関連情報に対応する施設に所定のしきい値を超えて接近したときであることを特徴とする請求項１～７のいずれか一項に記載の施設提案装置。
9. 前記所定のタイミングは、所定の時刻に達したときであることを特徴とする請求項１～８のいずれか一項に記載の施設提案装置。

Images