JP6422477B2 - コンテンツ提供装置、コンテンツ提供方法およびコンテンツ提供システム - Google Patents

Description

本発明は、車内の乗員に楽曲などのコンテンツを提供するコンテンツ提供装置、コンテンツ提供方法およびコンテンツ提供システムに関する。

この種の装置として、従来、マイクを介して入力された乗員の音声から乗員の感情を表す感情情報を生成し、生成された感情情報に基づいてデータベースから楽曲を選択し、選択された楽曲を自動的に再生するようにした装置が知られている（例えば特許文献１参照）。

特開２００６−１５５１５７号公報

しかしながら、乗員の感情と乗員の要求するコンテンツとが良好に対応するとは限らず、上記特許文献１記載の装置のように、乗員の感情情報に基づいて楽曲を選択したのでは、自動選曲のサービスを乗員が不快に感じるおそれがある。

本発明の一態様であるコンテンツ提供装置は、乗員の生体情報を取得する生体情報取得部と、生体情報取得部により取得された生体情報に基づいて乗員感情を推定する感情推定部と、感情推定部で推定された乗員感情に基づいてコンテンツの取得を指令するコンテンツ指令部と、コンテンツ指令部で指令されたコンテンツを取得するコンテンツ取得部と、コンテンツ取得部で取得されたコンテンツを乗員に対し出力するコンテンツ出力部と、コンテンツの取得を手動で指令する手動指令部と、生体情報取得部により取得された生体情報に基づいて、手動指令部へ向かう乗員の視線の有無を判定する視線判定部と、を備え、コンテンツ指令部は、コンテンツ出力部により第１コンテンツが出力された後に感情推定部で推定された乗員感情が悪化し、かつ、視線判定部により手動指令部へ向かう乗員の視線があると判定されると、第１コンテンツから第２コンテンツへのコンテンツの変更を指令する。

本発明の他の態様であるコンテンツ提供方法は、生体情報取得部により、乗員の生体情報を取得し、感情推定部により、生体情報取得部により取得された生体情報に基づいて乗員の感情を推定し、コンテンツ指令部により、推定された乗員感情に基づいてコンテンツの取得を指令し、コンテンツ取得部により、指令されたコンテンツを取得し、コンテンツ出力部により、取得されたコンテンツを乗員に対し出力し、視線判定部により、生体情報取得部により取得された生体情報に基づいて、コンテンツの取得を手動で指令する手動指令部へ向かう乗員の視線の有無を判定することを含み、コンテンツを指令することは、乗員に向けて第１コンテンツを出力した後に乗員の感情を推定し、推定された乗員感情が悪化し、かつ、手動指令部へ向かう乗員の視線があると判定されると、第１コンテンツから第２コンテンツへのコンテンツの変更を指令することを含む。

本発明のさらなる他の態様であるコンテンツ提供システムは、上記のコンテンツ提供装置と、コンテンツ提供装置からの指令に応じてコンテンツ提供装置にコンテンツを配信するサーバ装置と、を備える。

本発明によれば、提供したコンテンツが乗員にとって不快なものであるとき、乗員感情に応じて他のコンテンツが提供されるので、乗員の不快感情を速やかに改善させることができる。

本発明の実施形態に係るコンテンツ提供システムの概略構成を示す図。 図１の車載装置（コンテンツ提供装置）の概略構成を示すブロック図。 図２の処理装置で実行される処理の一例を示すフローチャート。 本発明の実施形態に係るコンテンツ提供装置の動作の一例を示すタイミングチャート。 本発明の実施形態に係るコンテンツ提供装置の効果を説明する図。 図１の変形例を示す図。 図２の変形例を示す図。

以下、図１〜図７を参照して本発明の実施形態について説明する。図１は、本発明の実施形態に係るコンテンツ提供システム１００の概略構成を示す図である。このコンテンツ提供システム１００は、サーバ装置２が車載装置１に対して楽曲データを提供するように構成される。

図１に示すように、コンテンツ提供システム１００は、車両（例えば自動車）１０１に搭載された車載装置１と、車両１０１の外部のサーバ装置２とを有する。車載装置１とサーバ装置２とは、通信回線３を介して互いに通信可能に接続される。通信回線３は、例えば携帯電話網、インターネット網、無線ＬＡＮ等、あるいはそれらの組み合わせで構成される。なお、車両１０１に搭載されて通信回線３に接続される車載装置１は、単数複数のいずれであってもよい。

車載装置１は、本発明のコンテンツ提供装置の一例であり、サーバ装置２からコンテンツを受信して乗員に提供する機能を有する。車載装置１が受信するコンテンツは、例えば楽曲データを含む音楽コンテンツである。楽曲データは、サーバ装置２の楽曲データベース２ａに格納され、車載装置１は、楽曲データベース２ａから所望の楽曲データを取得する。楽曲データは、例えば車載装置１のコンテンツ処理速度に同期しながらデータ送信する、いわゆるストリーミング方式で送信される。なお、図示は省略するが、サーバ装置２は、制御部、記憶部、および通信部等を有し、楽曲データベース２ａは記憶部として構成される。

楽曲データは、ジャズやポップス、ロック等のテンポやリズムの異なる音楽ジャンル毎に分類して記憶される。これら音楽ジャンルは、例えば１９８０年代、２０００年代等の年代毎に細かく分類することもできる。楽曲データベース２ａには、音楽ジャンル毎に楽曲データが記憶される。同一の音楽ジャンルには複数の楽曲データ（複数の楽曲）が含まれる。音楽ジャンルは、車載装置１における放送局の受信チャンネルを切替えることにより切替えることができる。放送局には所定の音楽ジャンルの楽曲を随時提供するラジオ局が含まれる。楽曲データには、音楽コンテンツに関する各種情報（例えば曲のタイトル、アルバム名、アーティスト名等）も含まれる。

車載装置（コンテンツ提供装置）１は、具体的には、音響機器としての機能を有するナビゲーション装置あるいはオーディオ装置等により構成される。図２は、車載装置１の概略構成を示すブロック図である。図２に示すように、車載装置１は、処理装置１０と、処理装置１０にそれぞれ接続される操作部２１、カメラ２２、マイク２３、通信装置２４、スピーカ２５、および表示部２６とを有する。車載装置１をナビゲーション装置として構成する場合、車載装置１はナビゲーションユニットを有するが、図２ではその図示を省略する。

操作部２１は、乗員（運転者など）により操作される各種スイッチ、例えば車載装置１をオンオフするオンオフスイッチ、音量を変更する音量スイッチ、音楽ジャンル（チャンネル）を切替えるジャンル切替えスイッチ、同一の音楽ジャンル内で楽曲を変更する楽曲変更スイッチ等を含む。ジャンル切替えスイッチと楽曲変更スイッチの操作により乗員が手動で楽曲を選択することができる。なお、表示部２６の表示画面上にタッチパネルを設け、タッチパネルを操作部２１として構成することもできる。車載装置１は、乗員感情に応じて乗員に自動的に楽曲を提供する機能（楽曲提供サービス）を有するが、この楽曲提供サービスの開始および停止を操作部２１の操作により指令することもできる。車載装置１のオンと同時に楽曲提供サービスを開始してもよい。

カメラ２２は、ＣＣＤセンサやＣＭＯＳセンサ等の撮像素子を有し、乗員の顔を含む上半身を撮像する。すなわち、カメラ２２は、乗員の表情や姿勢を撮像する。カメラ２２からの画像信号は、乗員感情を推定するために用いることができる。

マイク２３は、乗員の発話した音声を取得する。マイク２３からの音声信号は、例えばＡ／Ｄ変換器を介し音声データとして処理装置１０に入力され、処理装置１０で音声認識される。マイク２３からの音声信号は、乗員感情を推定するために用いることができる。カメラ２２およびマイク２３は、乗員の表情等の画像および乗員の音声といった生体情報を取得するものであり、生体情報取得部２０を構成する。

通信装置２４は、通信回線３との間で通信を行うものであり、通信装置２４を介して処理装置１０が車両外部のサーバ装置２と通信することができる。通信装置２４は、乗員が携帯または車内に配置されたスマートフォン等の携帯端末との間で短距離無線通信を行うこともできる。

スピーカ２５は、処理装置１０からの指令により、サーバ装置２から取得した音楽コンテンツを出力する。なお、予め車載装置１の記憶部に記憶された音楽コンテンツをスピーカ２５から出力することもできる。スピーカ２５は、操作部２１やマイク２３を介して乗員から音声出力の要求があったとき、その要求に応答して音声を出力することもできる。乗員からの音声出力の要求がなくても、処理装置１０からの指令により自動的に音声を出力することもできる。

表示部２６は、例えば液晶ディスプレイにより構成される。表示部２６により、スピーカ２５から出力する音楽コンテンツに関する情報や各種設定情報等を表示する。

処理装置１０は、ＣＰＵ，ＲＯＭ，ＲＡＭその他の周辺回路を有する演算処理装置を含むコンピュータにより構成される。処理装置１０は、機能的構成として、感情推定部１１と、コンテンツ指令部１２と、視線判定部１３と、コンテンツ取得部１４と、コンテンツ出力部１５とを有する。

感情推定部１１は、カメラ２２により取得された画像信号に基づいて、乗員の表情（口角等）から乗員の感情（乗員感情）を推定する。具体的には、例えばPlutchikの感情の輪を用いて、予め感情を８つの基本感情（期待、喜び、受容、不安、驚き、悲しみ、嫌悪、怒り）と、隣り合う２つの感情の組み合わせによる応用感情とに分類し、これら各感情の特徴を表す画像とカメラ２２からの画像とを比較して、人間の感情パターンのいずれかに当てはめることにより、乗員感情を推定する。なお、人間の感情パターンにはPlutchikの感情の輪等の、様々な感情パターンを適用することが可能である。本実施形態においては、Plutchikの感情の輪を例に説明をおこなう。乗員感情は、カメラ２２からの画像信号だけでなく、マイク２３からの音声信号も考慮して推定する。すなわち、発話内容や乗員の発話した音声のアクセントや発音（韻律）等も考慮して、乗員感情を推定する。

感情推定部１１は、さらに感情の輪への当てはめに応じて乗員感情を数値化する。例えば喜びや楽しみなどの乗員にとって好ましい感情、すなわち快感情（正の感情）をプラスの値で、怒りや嫌悪などの乗員にとって好ましくない感情、すなわち不快感情（負の感情）をマイナスの値で表す。この場合、例えば感情が強いほど（感情の輪の内側に行くほど）、感情を表す値（絶対値）を大きくする。これにより、乗員感情（快感情、不快感情）の程度を求める。

コンテンツ指令部１２は、感情推定部１１で推定された乗員感情に応じて、乗員に提供すべき音楽コンテンツ（例えばジャズやポップスなどの音楽ジャンル）を指令する。例えば、乗員感情と音楽ジャンルとの関係を予め処理装置１０の記憶部に記憶しておき、その関係を用いて、乗員感情に応じた音楽ジャンルを自動的に指令する。乗員に提供した過去の楽曲配信のデータを保存しておき、そのデータから乗員の嗜好を特定し、乗員感情とともに乗員の嗜好を考慮して音楽ジャンルを指令することもできる。音楽ジャンルとともに音楽ジャンル内の楽曲を指令してもよい。

さらにコンテンツ指令部１２は、乗員に提供された音楽コンテンツが乗員にとって不快か否かを乗員感情から判定し、不快と判定されたときに音楽コンテンツの変更を指令する。この指令には、同一の音楽ジャンル内での楽曲の変更、音楽ジャンルの変更、および音楽コンテンツの配信停止（楽曲提供サービスの停止）が含まれる。コンテンツ指令部１２は、感情推定部１１により求められた音楽コンテンツの提供後の乗員の不快感情の程度を判定し、例えば不快感情の程度（絶対値）が第１所定値未満のときは、同一の音楽ジャンル内での楽曲の変更を指令する。不快感情の程度が第１所定値以上かつ第１所定値より大きい第２所定値未満のときは、音楽ジャンルの変更を指令する。不快感情の程度が第２所定値以上のときは、楽曲提供サービスの停止を指令する。

視線判定部１３は、カメラ２２からの画像信号に基づいて乗員の視線が所定方向（例えば操作部２１の方向）に向けられているか否かを判定する。この判定は、乗員感情に応じた音楽コンテンツが自動的に提供された後に行う。音楽コンテンツの提供後に乗員の視線が操作部２１に向けられると、乗員が手動で音楽コンテンツを変更する意思を有すると推定される。したがって、視線判定部１３は、乗員が音楽コンテンツの変更の意思を有するか否かを判定する。視線判定部１３で、操作部２１に向かう乗員の視線ありと判定されると、コンテンツ指令部１２は音楽コンテンツの変更を指令する。本判定は、人間が自身の意思に反する感触や違和感を感じたときに、その対象物に対して無意識に視線を向ける傾向を利用している。そのため、本実施の形態では操作部２１の方向で例示したが、そのほかにも、車内に擬人的なエージェントが搭載されている場合はエージェントの方向であっても良いし、指向性のあるスピーカが搭載されている場合はスピーカの方向であっても良い。

コンテンツ取得部１４は、コンテンツ指令部１２で指令された音楽コンテンツの楽曲データを、通信装置２４を介してサーバ装置２から取得する。すなわち、指令された音楽ジャンルに含まれる楽曲データを、サーバ装置２から取得する。音楽コンテンツの変更が指令されたときは、コンテンツ取得部１４は、その変更指令に応じて同一の音楽ジャンルの他の楽曲データ、または異なる音楽ジャンルの楽曲データをサーバ装置２から取得する。楽曲提供サービスの停止が指令されたときは、コンテンツ取得部１４は、音楽コンテンツの取得を停止する。

コンテンツ出力部１５は、コンテンツ取得部１４で取得した楽曲データに応じた音楽コンテンツをスピーカ２５から出力する。コンテンツ指令部１２から楽曲提供サービスの停止が指令されたときは、コンテンツ出力部１５は音楽コンテンツの出力を停止する。

図３は、予め記憶されたプログラムに従い処理装置１０で実行される処理の一例を示すフローチャートである。このフローチャートに示す処理は、例えば操作部２１の操作によって楽曲提供サービスの開始が指令されると開始される。

まず、ステップＳ１で、感情推定部１１での処理により、カメラ２２とマイク２３とからの信号に基づいて乗員感情を推定する。次いで、ステップＳ２で、コンテンツ指令部１２での処理により、ステップＳ１で推定された乗員感情に応じた音楽コンテンツ（音楽ジャンル）を指令する。次いで、ステップＳ３で、コンテンツ取得部１４での処理により、ステップＳ２で指令された音楽コンテンツの楽曲データを、通信装置２４を介してサーバ装置２から取得する。

次いで、ステップＳ４で、コンテンツ出力部１５での処理により、ステップＳ３で取得した楽曲データに応じた音楽コンテンツをスピーカ２５から出力する。これにより乗員感情に応じた音楽コンテンツが乗員に対し自動的に提供される。次いで、ステップＳ５で、所定時間Δｔ１待機する。所定時間Δｔ１は、音楽コンテンツを提供してから乗員感情が変化するまでに要する時間（例えば数秒程度）に設定される。

次いで、ステップＳ６で、感情推定部１１での処理により、カメラ２２とマイク２３とからの信号に基づいて乗員感情を再び推定する。推定された乗員感情が不快なものであるときには、その不快感情の程度を同時に求める。次いで、ステップＳ７で、ステップＳ６で推定された感情が不快感情であるか否かを判定する。ステップＳ７で否定されると、提供した音楽コンテンツは乗員に満足感を与えるものであり、音楽コンテンツを変更する必要がないとして、音楽コンテンツの変更に係る処理を終了する。

一方、ステップＳ７で肯定されるとステップＳ８に進み、視線判定部１３での処理により、カメラ２２からの画像信号に基づいて乗員の視線が所定方向（操作部２１の方向）に向けられているか否かを判定する。ステップＳ８で否定されると、ステップＳ７で乗員感情が不快と判定されたのは、誤った音楽コンテンツの提供が原因ではなく別の理由であると判定し、音楽コンテンツを変更せずに処理を終了する。一方、ステップＳ８で肯定されると、音楽コンテンツの提供により乗員感情が不快になったと判定し、ステップＳ９に進む。

ステップＳ９では、コンテンツ指令部１２での処理により、ステップＳ６で推定された乗員感情に応じて音楽コンテンツの変更を指令する。具体的には、ステップＳ６で求められた乗員の不快感情の程度が第１所定値未満のときは、同一の音楽ジャンル内の他の音楽コンテンツへの変更を指令する。例えば、提供される音楽コンテンツに順番（曲順）が付されているときは、次の順番の音楽コンテンツへの変更を指令する。あるいはランダムに他の音楽コンテンツへの変更を指令する。不快感情の程度が第１所定値以上かつ第１所定値より大きい第２所定値未満のときは、音楽ジャンルの変更を指令する。この場合、例えば乗員感情や乗員の嗜好等を考慮してどの音楽ジャンルを指令するかを決定する。不快感情の程度が第２所定値以上のときは、楽曲提供サービスの停止を指令する。

次いで、ステップＳ１０で、コンテンツ取得部１４およびコンテンツ出力部１５において、ステップＳ９の音楽コンテンツの指令に応じた処理を行い、音楽コンテンツの出力を制御する。すなわち、ステップＳ９で同一の音楽ジャンル内での音楽コンテンツの変更が指令されると、サーバ装置２から同一の音楽ジャンルの別の楽曲データを取得し、楽曲データに対応した音楽コンテンツをスピーカ２５から出力する。ステップＳ９で音楽ジャンルの変更が指令されると、サーバ装置２から他の音楽ジャンルの楽曲データを取得し、楽曲データに対応した音楽コンテンツをスピーカ２５から出力する。ステップＳ９で、楽曲提供サービスの停止が指令されると、スピーカ２５からの音楽コンテンツの出力を停止する。次いで、ステップＳ５に戻り、不快感情が改善されるまで上述したのと同様の処理を繰り返す。

本実施形態に係るコンテンツ提供装置（車載装置１）の動作をより具体的に説明する。図４は、本実施形態に係るコンテンツ提供装置の動作の一例を示すタイミングチャートであり、時間経過に伴う乗員感情αの変化を示す。なお、図４では、快感情をプラスで、不快感情をマイナスで表す。

図４の時点ｔ１で、乗員が楽曲提供サービスの開始を指令すると（点Ｐ１）、処理装置１０は、乗員の表情等から乗員感情αを即座に推定し、乗員感情αに応じた音楽コンテンツ（第１コンテンツ）をサーバ装置２から自動的に取得して、スピーカ２５から出力する（ステップＳ１〜ステップＳ４）。したがって、乗員が操作部２１を操作して音楽コンテンツ（放送局のチャンネル等）を指令しなくても、乗員感情αに応じた音楽コンテンツを乗員に対し自動的に提供することができる。

その後、音楽コンテンツを提供してから所定時間Δｔ１が経過すると（時点ｔ２）、処理装置１０は乗員感情αを再び判定する（ステップＳ７）。このとき、図４の点Ｐ２に示すように乗員に不快感情が生じており、かつ、乗員の視線が操作部２１に向かっていると判定すると、不快感情の程度Δα１に応じて乗員に提供すべき音楽コンテンツ（第２コンテンツ）を決定し、第１コンテンツから第２コンテンツへの音楽コンテンツの変更を指令する（ステップＳ９）。なお、時点ｔ１からの乗員感情αの悪化の程度Δα２に応じて、第２コンテンツを決定してもよい。

これにより乗員の不快感情の程度Δα１が第１所定値未満のときは、同一の音楽ジャンルの別の音楽コンテンツ（第２コンテンツ）が提供され、Δα１が第１所定値以上かつ第２所定値未満のときは、異なる音楽ジャンルの音楽コンテンツ（第２コンテンツ）が提供される（ステップＳ１０）。その結果、例えば図４の点Ｐ３に示すように、時点ｔ３で乗員感情αが快感情に改善され、乗員に対し最適な自動楽曲サービスを提供することが可能となる。以降、乗員感情αを推定しながら、同様に音楽コンテンツを提供し続ける。

一方、例えば図４の点Ｐ４に示すように、音楽コンテンツを変更したにも拘らず乗員感情αが改善されない場合（乗員感情αがプラスとならない場合）、第２コンテンツから他の音楽コンテンツ（第３コンテンツ）への変更を再び指令する。この場合、例えば不快感情の程度に応じて、または初期時点ｔ１からの乗員感情αの悪化の程度あるいは直前時点ｔ２からの乗員感情αの悪化の程度に応じて、第３コンテンツを決定する。

処理装置１０は、乗員の不快感情が生じたときに、音楽コンテンツを変更するだけでなく、音楽コンテンツの提供を停止する場合がある（ステップＳ１０）。例えば時点２において不快感情の程度が第２所定値以上になると、音楽コンテンツの提供を停止する。なお、静かな楽曲を提供したときに乗員感情αが改善したが、乗員感情がいまだにプラスにならないとき、乗員がさらなる静けさを望んでいると判断し、音楽コンテンツの提供を停止するようにしてもよい。

本実施形態によれば以下のような作用効果を奏することができる。
（１）コンテンツ提供装置の一例である車載装置１は、乗員の表情画像や音声等の生体情報を取得する生体情報取得部２０と、生体情報取得部２０により取得された生体情報に基づいて乗員感情を推定する感情推定部１１と、感情推定部１１で推定された乗員感情に基づいて音楽コンテンツの取得を指令するコンテンツ指令部１２と、コンテンツ指令部１２で指令された音楽コンテンツを取得するコンテンツ取得部１４と、コンテンツ取得部１４で取得された音楽コンテンツを乗員に対し出力するコンテンツ出力部１５とを備える（図２）。コンテンツ指令部１２は、コンテンツ出力部１５により第１コンテンツが出力された後に感情推定部１１で推定された乗員感情に応じて、第１コンテンツから第２コンテンツへの音楽コンテンツの変更を指令する（ステップＳ９）。

これにより、乗員感情に基づいて提供した音楽コンテンツ（第１コンテンツ）が乗員にとって好ましいものではなく、乗員が不快感情を生じた場合に、その不快感情に応じて他の音楽コンテンツ（第２コンテンツ）への変更が自動的に指令される。このため、乗員が操作部２１を手動操作してコンテンツを指令しなくても、乗員感情を容易かつ速やかに改善させることができる。すなわち、本実施形態に係るコンテンツ提供装置によれば、例えば図５に示すように、時点ｔ１（点Ｐ１）で乗員感情に基づいて音楽コンテンツを提供した後に、時間経過に伴い乗員感情αが徐々に悪化するとき、時点ｔ２で乗員感情の程度がα１のときに音楽コンテンツの変更を指令する（点Ｐ２）。このため、乗員感情αをそれ以上悪化させずに、乗員感情αを速やかに改善させることができる。これに対し、例えば不快感情が生じた後に乗員が手動あるいは音声等により音楽コンテンツの変更を指令する場合、時点ｔ２よりも後の時点ｔ４で音楽コンテンツの変更が指令される。その結果、乗員の不快感情の程度はα１よりも大きいα２となり（点Ｐ５）、乗員の不快感が強まる。

（２）コンテンツ指令部１２は、コンテンツ出力部１５により第１コンテンツが出力された後に感情推定部１１で推定された乗員感情が悪化しているとき、第１コンテンツから第２コンテンツへの音楽コンテンツの変更を指令する（ステップＳ６→ステップＳ９）。これにより、乗員感情を改善する必要があるときに音楽コンテンツの変更が指令され、適切なタイミングで音楽コンテンツの変更を指令することができる。

（３）車載装置１は、音楽コンテンツの取得を手動で指令する操作部２１と、カメラ２２からの信号に基づいて操作部２１へ向かう乗員の視線の有無を判定する視線判定部１３とをさらに備える（図２）。コンテンツ指令部１２は、コンテンツ出力部１５により第１コンテンツが出力された後に感情推定部１１で推定された乗員感情が悪化し、かつ、視線判定部１３により操作部２１へ向かう乗員の視線があると判定されると、第１コンテンツから第２コンテンツへの音楽コンテンツの変更を指令する（ステップＳ７→ステップＳ８→ステップＳ９）。これにより音楽コンテンツを自動的に提供したことにより乗員に不快感情が生じたのか、それとも別の理由により乗員に不快感情が生じたのかを判断することができ、音楽コンテンツを不必要に変更することを防止できる。

（４）コンテンツ指令部１２は、コンテンツ出力部１５により第１コンテンツが出力されてから所定時間Δｔ１後に感情推定部１１で推定された乗員感情の変化に応じて、第１コンテンツから第２コンテンツへの音楽コンテンツの変更を指令する。これにより音楽コンテンツを提供したことによる乗員感情の変化を正確に把握することができ、乗員感情に応じて最適に音楽コンテンツを変更することができる。

（５）コンテンツ指令部１２は、さらにコンテンツ出力部１５により第１コンテンツが出力された後に感情推定部１１で推定された乗員感情に応じて音楽コンテンツの取得停止を指令可能であり、コンテンツ出力部１５は、コンテンツ指令部１２によりコンテンツの取得停止が指令されると、乗員に対する音楽コンテンツの出力を停止する（ステップＳ１０）。これにより、例えば静かな環境の下で運転に集中したいなどの乗員感情に適応することができる。

（６）コンテンツ指令部１２により指令されるコンテンツは音楽コンテンツであり、コンテンツ指令部１２は、コンテンツ出力部１５により第１コンテンツが出力された後に感情推定部１１で推定された乗員感情に応じて、第１コンテンツと同一ジャンルの第２コンテンツ、あるいは第１コンテンツと異なるジャンルの第２コンテンツの取得を指令する（ステップＳ９）。このように乗員感情に応じて音楽コンテンツのジャンルを変更するか否かを決定するので、乗員感情を良好に改善することができる。

（７）本実施形態に係るコンテンツ提供方法は、生体情報取得部２０により乗員の生体情報を取得し、取得された生体情報に基づいて乗員の感情を推定し（ステップＳ１）、推定された乗員感情に基づいてコンテンツを指令し（ステップＳ２）、指令されたコンテンツを取得し（ステップＳ３）、取得されたコンテンツを乗員に対し出力することを含む（ステップＳ４）。さらに、コンテンツを指令することは、乗員に向けて第１コンテンツを出力した後に乗員の感情を推定し（ステップＳ６）、推定された乗員感情に応じて、第１コンテンツから第２コンテンツへのコンテンツの変更を指令することを含む（ステップＳ９）。この構成により、乗員に自動選曲サービスを行って乗員が不快感情を生じたとしても、その不快感情を速やかに改善させることができる。

（８）本実施形態に係るコンテンツ提供システム１００は、上記の車載装置１と、車載装置１からの指令に応じて車載装置１に音楽コンテンツを配信するサーバ装置２とを備える（図１）。この構成により、サーバ装置２から配信される音楽コンテンツのうち、乗員感情に応じた最適なものを乗員に提供することができ、乗員の快適性が高まる。

上記実施形態は種々の形態に変形することができる。以下、変形例について説明する。図６は、図１の変形例を示す図である。図６では、車載装置１と、携帯端末５と、サーバ装置２とによりコンテンツ提供システム１００Ａが構成される。携帯端末５は、スマートフォンや、タブレット端末等、乗員が持ち運び可能な装置であり、車載装置１と通信可能な通信部と、通信回線３を介してサーバ装置２と通信可能な通信部とを有する。この構成によれば、車載装置１が携帯端末５および通信回線３を介してサーバ装置２と通信可能となる。なお、車載装置１ではなく、携帯端末５によりコンテンツ提供装置を構成することもできる。すなわち、携帯端末５に上述した車載装置１の機能を持たせるようにしてもよい。

図７は、図２の変形例を示す図である。図７では、車載装置１Ａの処理装置１０に記憶部１６が接続される。記憶部１６は、楽曲データベース１６ａを有する。楽曲データベース１６ａには、図１の楽曲データベース２ａに記憶されたのと同様の楽曲データが記憶される。この構成によれば、コンテンツ指令部１２により指令された音楽コンテンツに対応する楽曲データを、サーバ装置２からではなく記憶部１６から取得することができ、サーバ装置２との通信を省略することができる。なお、この場合、楽曲データベース１６ａに記憶される楽曲データを、必要に応じて更新するようにしてもよい。

上記実施形態では、カメラ２２とマイク２３とを含む生体情報取得部２０により乗員の生体情報を取得するようにしたが、生体情報取得部の構成はこれに限らない。例えば、ウェアラブル端末を乗員に装着して乗員の脈拍、血圧、体温、血中酸素濃度等の生体情報を取得するようにしてもよい。サーモグラフィにより乗員の体温（例えば顔面温度）を生体情報として取得するようにしてもよい。上記実施形態では、Plutchikの感情の輪への当てはめにより感情推定部１１が乗員感情を推定するようにしたが、他の分類された感情のパターンに当てはめて乗員感情を推定するようにしてよく、感情推定部の構成は上述したものに限らない。

上記実施形態では、感情推定部１１で推定された乗員感情に基づいてコンテンツ指令部１２が音楽コンテンツの取得を指令するようにしたが、音楽コンテンツに限らず、各種の音声サービスを提供する音声コンテンツ、動画や静止画等の映像コンテンツ等、他のコンテンツの取得を指令するようにしてもよく、コンテンツ指令部の構成は上述したものに限らない。上記実施形態では、コンテンツ取得部１４がサーバ装置２からコンテンツを取得するようにしたが、車両１０１に搭載された記憶部１６（図７）からコンテンツを取得するようにしてもよく、コンテンツ取得部の構成は上述したものに限らない。上記実施形態では、コンテンツ取得部１４で取得されたコンテンツをコンテンツ出力部１５がスピーカ２５から出力するようにしたが、例えば表示部２６から出力するようにしてもよく、コンテンツ出力部の構成は上述したものに限らない。

上記実施形態では、コンテンツ出力部１５により第１コンテンツが出力された後の感情推定部１１で推定された乗員感情に応じて、取得するコンテンツの第１コンテンツから第２コンテンツへの変更を指令するようにした。すなわち、同一の音楽ジャンル内での音楽コンテンツの変更または音楽ジャンルの切替えを指令するようにしたが、不快感情が推定されたときに音楽ジャンルの切替えのみを行うようにしてもよい。コンテンツの変更指令に加えて他の指令、例えばスピーカ音量の増減等を指令してもよい。音楽コンテンツの出力を停止する代わりに、スピーカ音量を減少させるようにしてもよい。

上記実施形態では、操作部２１の操作によりコンテンツの取得を手動で指令可能としたが、手動指令部としての操作部の構成はいかなるものでもよい。例えばステアリングハンドルに設けられるスイッチにより手動指令部を構成することもできる。上記実施形態では、カメラ２２により取得された乗員の視線に基づいて視線判定部１３が操作部２１へ向かう乗員の視線の有無を判定するようにしたが、手動指令部へ向かう乗員の視線の有無を判定する視線判定部の構成はこれに限らない。視線判定部を省略することもできる。上記実施形態では、第１コンテンツが出力されてから所定時間Δｔ１後の乗員感情に応じて第２コンテンツの変更指令を行うようにしたが、所定時間を待たずに乗員感情に応じてコンテンツの変更を指令するようにしてもよい。

以上の説明はあくまで一例であり、本発明の特徴を損なわない限り、上述した実施形態および変形例により本発明が限定されるものではない。上記実施形態と変形例の１つまたは複数を任意に組み合わせることも可能であり、変形例同士を組み合わせることも可能である。

１，１Ａ 車載装置、２ サーバ装置、１０ 処理装置、１１ 感情推定部、１２ コンテンツ指令部、１３ 視線判定部、１４ コンテンツ取得部、１５ コンテンツ出力部、２０ 生体情報取得部、２１ 操作部、２２ カメラ、２３ マイク、２５ スピーカ、１００，１００Ａ コンテンツ提供システム

Claims (6)

1. 乗員の生体情報を取得する生体情報取得部と、
   前記生体情報取得部により取得された生体情報に基づいて乗員感情を推定する感情推定部と、
   前記感情推定部で推定された乗員感情に基づいてコンテンツの取得を指令するコンテンツ指令部と、
   前記コンテンツ指令部で指令されたコンテンツを取得するコンテンツ取得部と、
   前記コンテンツ取得部で取得されたコンテンツを乗員に対し出力するコンテンツ出力部と、
   コンテンツの取得を手動で指令する手動指令部と、
   前記生体情報取得部により取得された生体情報に基づいて、前記手動指令部へ向かう乗員の視線の有無を判定する視線判定部と、を備え、
   前記コンテンツ指令部は、前記コンテンツ出力部により第１コンテンツが出力された後に前記感情推定部で推定された乗員感情が悪化し、かつ、前記視線判定部により前記手動指令部へ向かう乗員の視線があると判定されると、前記第１コンテンツから第２コンテンツへのコンテンツの変更を指令することを特徴とするコンテンツ提供装置。
2. 請求項１に記載のコンテンツ提供装置において、
   前記コンテンツ指令部は、前記コンテンツ出力部により前記第１コンテンツが出力されてから所定時間後に前記感情推定部で推定された乗員感情の変化に応じて、前記第１コンテンツから前記第２コンテンツへのコンテンツの変更を指令することを特徴とするコンテンツ提供装置。
3. 請求項１または２に記載のコンテンツ提供装置において、
   前記コンテンツ指令部は、さらに前記コンテンツ出力部により前記第１コンテンツが出力された後に前記感情推定部で推定された乗員感情に応じてコンテンツの取得停止を指令可能であり、
   前記コンテンツ出力部は、前記コンテンツ指令部によりコンテンツの取得停止が指令されると、乗員に対するコンテンツの出力を停止することを特徴とするコンテンツ提供装置。
4. 請求項１〜３のいずれか１項に記載のコンテンツ提供装置において、
   前記コンテンツ指令部により指令されるコンテンツは音楽コンテンツであり、
   前記コンテンツ指令部は、前記コンテンツ出力部により第１コンテンツが出力された後に前記感情推定部で推定された乗員感情に応じて、前記第１コンテンツと同一ジャンルの第２コンテンツ、あるいは前記第１コンテンツと異なるジャンルの第２コンテンツの取得を指令することを特徴とするコンテンツ提供装置。
5. 生体情報取得部により、乗員の生体情報を取得し、
   感情推定部により、前記生体情報取得部により取得された生体情報に基づいて乗員の感情を推定し、
   コンテンツ指令部により、推定された乗員感情に基づいてコンテンツの取得を指令し、
   コンテンツ取得部により、指令されたコンテンツを取得し、
   コンテンツ出力部により、取得されたコンテンツを乗員に対し出力し、
   視線判定部により、前記生体情報取得部により取得された生体情報に基づいて、コンテンツの取得を手動で指令する手動指令部へ向かう乗員の視線の有無を判定することを含み、
   前記コンテンツを指令することは、乗員に向けて第１コンテンツを出力した後に乗員の感情を推定し、推定された乗員感情が悪化し、かつ、前記手動指令部へ向かう乗員の視線があると判定されると、前記第１コンテンツから第２コンテンツへのコンテンツの変更を指令することを含むことを特徴とするコンテンツ提供方法。
6. 請求項１〜４のいずれか１項に記載のコンテンツ提供装置と、
   前記コンテンツ提供装置からの指令に応じて前記コンテンツ提供装置にコンテンツを配信するサーバ装置と、を備えることを特徴とするコンテンツ提供システム。

Images