JP2023184289A - 情報処理方法及びコンピュータプログラム - Google Patents

Abstract

【課題】搭乗者に適したコンテンツを移動体内で出力することが期待できる情報処理方法及びコンピュータプログラムを提供する。
【解決手段】本実施の形態に係る情報処理方法は、情報処理装置が、移動体の搭乗者に関する搭乗者情報、及び、前記移動体内の音声情報を取得し、取得した前記搭乗者情報及び前記音声情報を基に、前記移動体内に出力する第１コンテンツを決定し、決定した前記第１コンテンツを前記移動体内で出力し、出力した前記第１コンテンツに対する前記搭乗者の反応を取得し、取得した前記反応を基に、商品又はサービスの提供に関する第２コンテンツを出力する。また前記情報処理装置が、前記移動体内で出力された前記第２コンテンツに対する前記搭乗者の反応を取得し、取得した前記反応を基に、前記第２コンテンツに係る商品又はサービスの購入、予約又は提供地に関する情報を出力してもよい。
【選択図】図２

Description

本発明は、移動体内におけるコンテンツ出力に関する情報処理方法及びコンピュータプログラムに関する。

特許文献１においては、車両において経路案内のためのコンテンツを前景に重畳表示する表示制御装置が提案されている。この表示制御装置は、経路案内に用いられる経路情報に、車両の右左折を案内する右左折地点と、この右左折地点の次に案内を実施する連続地点との連続を示す連続情報が含まれるか否かを判定する。表示制御装置は、走行中の接続道路に対する車両の向きを推定し、車両の向きについて、連続地点を案内する案内コンテンツを表示可能な向きとなったか否かを判定する。表示制御装置は、経路情報に連続情報が含まれると判定された場合に、右左折地点を案内する右左折コンテンツを表示後、車両の向きが案内コンテンツを表示可能な向きとなったことを条件に、案内コンテンツの表示を開始する。

特開２０２１－１７９４４５号公報

近年、自動車等の移動体の高機能化が進められ、移動体内で映像又は音楽等の様々なコンテンツを出力することが可能となっている。移動体内において出力することが可能なコンテンツには、例えば特許文献１に記載の表示制御装置が表示するコンテンツのように、移動体の経路案内のためのコンテンツのみでなく、移動体の搭乗者に対する娯楽目的等の様々な情報提供を目的としたコンテンツが含まれ得る。

本発明は、斯かる事情に鑑みてなされたものであって、その目的とするところは、搭乗者に適したコンテンツを移動体内で出力することが期待できる情報処理方法及びコンピュータプログラムを提供することにある。

一実施形態に係る情報処理方法は、情報処理装置が、移動体の搭乗者に関する搭乗者情報、及び、前記移動体内の音声情報を取得し、取得した前記搭乗者情報及び前記音声情報を基に、前記移動体内に出力する第１コンテンツを決定し、決定した前記第１コンテンツを前記移動体内で出力し、出力した前記第１コンテンツに対する前記搭乗者の反応を取得し、取得した前記反応を基に、商品又はサービスの提供に関する第２コンテンツを出力する。

一実施形態による場合は、搭乗者に適したコンテンツを移動体内で出力することが期待できる。

本実施の形態に係る情報処理システムの概要を説明するための模式図である。 本実施の形態に係るサーバ装置の構成を示すブロック図である。 グループテーブルの一例を示す模式図である。 ユーザＤＢの一例を示す模式図である。 第１コンテンツＤＢの一例を示す模式図である。 第２コンテンツＤＢの一例を示す模式図である。 生成コンテンツＤＢの一例を示す模式図である。 本実施の形態に係る車載装置の構成を示すブロック図である。 本実施の形態に係るサーバ装置が行う処理の手順を示すフローチャートである。 本実施の形態に係るサーバ装置が行う処理の手順を示すフローチャートである。 サーバ装置によるキーワード変更の処理を説明するための模式図である。 サーバ装置によるキーワード変更の処理を説明するための模式図である。 本実施の形態に係る車載装置が行う処理の手順を示すフローチャートである。 本実施の形態に係る車載装置によるコンテンツ出力の一例を示す模式図である。

本発明の実施形態に係る情報処理システムの具体例を、以下に図面を参照しつつ説明する。なお、本発明はこれらの例示に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。

＜システム概要＞
図１は、本実施の形態に係る情報処理システムの概要を説明するための模式図である。本実施の形態に係る情報処理システムは、コンテンツを配信するサーバ装置１と、車両２に搭載された車載装置３とを備えて構成されている。本実施の形態に係る情報処理システムは、サーバ装置１が生成した映像及び音声等の種々のコンテンツを車両２の車載装置３へ送信し、このコンテンツを受信した車載装置３が車両２内でコンテンツの出力、例えば映像の表示及び音声の出力等を行うシステムである。なお本図においては１つの車両２及び車載装置３が図示されているが、サーバ装置１は複数の車両２及び車載装置３に対してコンテンツを配信することができる。

本実施形態においてサーバ装置１が提供するコンテンツは、ＡＲ（Augmented Reality、拡張現実）、映像、音声（音楽）、光（照明光）、振動、芳香又は空調（風）等の種々のコンテンツであってよく、これらの複数を組み合わせて構成されたコンテンツであってよい。また本実施形態のコンテンツは、映画、ドラマ、アニメもしくは音楽ライブ等のエンターテインメントコンテンツ、又は、商品もしくはサービスを宣伝するための広告コンテンツ等、どのようなコンテンツであってよい。

本実施の形態に係るサーバ装置１は、本サービスの提供会社等が管理運営する装置であり、例えば汎用的なコンピュータに本サービスを実現するソフトウェアがインストールされて構成される。サーバ装置１は、例えば携帯電話通信網、無線ＬＡＮ（Local Area Network）及びインターネット等のネットワークを介して、一又は複数の車両２の車載装置３との通信を行い、車載装置３へコンテンツを配信する。

本実施の形態に係る車両２は、例えば自動車又はバス等の移動体であり、搭乗者の運転により走行の制御がなされる車両であってもよく、コンピュータ等による自動運転により走行の制御がなされる車両であってもよい。なお移動体は車両に限らず、船舶又は航空機等であってもよい。本実施の形態に係る車載装置３は、例えば車両２に搭載されたＥＣＵ（Electronic Control Unit）又はカーナビゲーション装置等の情報処理装置を用いて構成されている。なお車載装置３は、車両２に対して固定して搭載される装置に限らず、例えば搭乗者が所持するスマートフォン又はタブレット型端末装置等のような可搬型の情報処理装置を用いて構成されていてもよい。車載装置３は、ネットワークを介して車両２の外部に存在するサーバ装置１との間で通信を行うことが可能である。

本実施の形態に係る情報処理システムでは、車両２の車載装置３は、サーバ装置１が配信する種々のコンテンツを出力する機能、例えば映像を表示するディスプレイ又は音声を出力するスピーカ等を備えている。また車載装置３は、コンテンツを出力するための機能として、例えば芳香を発生させる機能、振動を発生させる機能、車両２内の照明機器を制御する機能、又は、車両２の空調機器を制御する機能等の種々の機能を備えていてもよい。

また本実施の形態に係る車載装置３は、車両２内の情報を取得する機能、例えば車両２内の会話の音声を取得するマイク又は車両２の搭乗者を撮影するカメラ等を備えている。車載装置３は、例えばカメラにて撮影した搭乗者の画像を基に、搭乗者の名前又はＩＤ等の識別情報、搭乗者の搭乗位置及び車両２の搭乗者数等を判断し、これらの情報を搭乗者情報としてサーバ装置１へ送信する。搭乗者の識別には、例えば既存の顔認証技術が用いられ得る。

また車載装置３は、車両２内の会話に係る音声をマイクにて取得し、取得した音声を既存の音声認識の技術により文字情報へ変換し、変換した文字情報を会話情報としてサーバ装置１へ送信する。なお車載装置３は、音声から変換した文字情報から更にキーワードを抽出し、抽出したキーワードを会話情報としてサーバ装置１へ送信してもよい。また車載装置３は、マイクにて取得した音声を会話情報としてサーバ装置１へ送信してもよく、この場合にはサーバ装置１が音声認識の処理を行ってよい。また本実施の形態において車載装置３が取得する音声の対象には、搭乗者が会話等にて発する音声のみでなく、車両２に搭載されたラジオ又はテレビ等の装置が出力する会話等の音声、即ち車両２のスピーカから出力される音声を含む。

また車載装置３は、例えば出力したコンテンツに対する搭乗者の反応を判断し、各搭乗者の反応を反応情報としてサーバ装置１へ送信する。車載装置３は、例えばコンテンツを出力した際の搭乗者の表情をカメラにて撮影し、撮影した画像を基に搭乗者の喜怒哀楽等の感情を分析し、分析結果を反応情報としてサーバ装置１へ送信する。なお車載装置３は、例えば搭乗者の心拍数、血圧、体温又は呼吸等のバイタル情報を取得し、取得したバイタル情報に基づいて搭乗者の感情を分析してもよい。また車載装置３は、取得した搭乗者の表情の画像又はバイタル情報等を反応情報としてサーバ装置１へ送信してもよく、この場合にはサーバ装置１がこれらの情報に基づいて搭乗者の反応を判断してもよい。

本実施の形態に係るサーバ装置１は、複数のコンテンツ（第１コンテンツ）を格納したデータベースを備えており、搭乗者の属性又は嗜好、車両２の位置又は車両２内の会話等に基づいて、データベースから第１コンテンツを選択して車両２の車載装置３へ送信する。またサーバ装置１は、車載装置３へ送信した第１コンテンツに対する搭乗者の反応情報を車載装置３から受信し、受信した反応情報に基づいて次のコンテンツをデータベースから選択して車載装置３へ送信する。サーバ装置１は、コンテンツの送信及び選択を繰り返し行い、搭乗者が関心を持つコンテンツ又は情報等の種別を判断する。

また本実施の形態に係るサーバ装置１は、一又は複数の企業等が提供する商品又はサービスに関するコンテンツ（第２コンテンツ）、例えば商品又はサービスの広告コンテンツを格納したデータベースを備えている。車両２の搭乗者が関心を持つコンテンツ等の種別を判断したサーバ装置１は、この種別に応じた商品又はサービスの提供に関する第２コンテンツをデータベースから選択して車載装置３へ送信する。これにより車両２では商品又はサービスの提供に関する第２コンテンツが車載装置３により出力される。車載装置３は、例えば搭乗者が行う所定の操作を受け付けることにより、出力した第２コンテンツに係る商品又はサービスの購入又は予約等の指示を搭乗者から受け付け、受け付けた指示をサーバ装置１へ送信する。サーバ装置１は、搭乗者の指示に応じて、商品又はサービスを提供する企業等が管理運営する外部のシステムに車載装置３をアクセスさせ、外部システム及び車載装置３の間で商品又はサービスの購入又は予約等の処理を行わせる。

このように本実施の形態に係る情報処理システムは、サーバ装置１が第１コンテンツを車載装置３へ送信して搭乗者の反応情報を取得することで、搭乗者が関心をもつコンテンツ等の種類を判断し、搭乗者の関心に適した広告等の第２コンテンツを車両２内で出力することができる。

また情報処理システムは、例えば車両２の最終目的地もしくは途中経過地等の情報、移動中の日時、天候もしくは季節等の情報、又は、車両２の移動目的に関する情報等の様々な情報を取得してよい。情報処理システムは、取得したこれらの情報と上記の搭乗者の反応情報とを組み合わせて、出力する第２コンテンツを決定してよい。

＜装置構成＞
図２は、本実施の形態に係るサーバ装置１の構成を示すブロック図である。本実施の形態に係るサーバ装置１は、処理部１１、記憶部（ストレージ）１２及び通信部（トランシーバ）１３等を備えて構成されている。なお本実施の形態においては、１つのサーバ装置にて処理が行われるものとして説明を行うが、複数のサーバ装置が分散して処理を行ってもよい。

処理部１１は、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro-Processing Unit）、ＧＰＵ（Graphics Processing Unit）又は量子プロセッサ等の演算処理装置、ＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）等を用いて構成されている。処理部１１は、記憶部１２に記憶されたサーバプログラム１２ａを読み出して実行することにより、データベースからコンテンツを選択して車載装置３へ送信する処理、及び、車載装置３からの反応情報を基に搭乗者が関心を持つコンテンツの種類を判断する処理等の種々の処理を行う。

記憶部１２は、例えばハードディスク等の大容量の記憶装置を用いて構成されている。記憶部１２は、処理部１１が実行する各種のプログラム、及び、処理部１１の処理に必要な各種のデータを記憶する。本実施の形態において記憶部１２は、処理部１１が実行するサーバプログラム１２ａを記憶する。また記憶部１２は、処理に必要なデータを記憶するグループテーブル１２ｂ、ユーザＤＢ（データベース）１２ｃ、第１コンテンツＤＢ１２ｄ、第２コンテンツＤＢ１２ｅ及び生成コンテンツＤＢ１２ｆ等が設けられている。

通信部１３は、携帯電話通信網、無線ＬＡＮ（Local Area Network）及びインターネット等を含むネットワークＮを介して、種々の装置との間で通信を行う。本実施の形態において通信部１３は、ネットワークＮを介して、車両２に搭載された車載装置３との間で通信を行う。通信部１３は、処理部１１から与えられたデータを他の装置へ送信すると共に、他の装置から受信したデータを処理部１１へ与える。

なお記憶部１２は、サーバ装置１に接続された外部記憶装置であってよい。またサーバ装置１は、複数のコンピュータを含んで構成されるマルチコンピュータであってよく、ソフトウェアによって仮想的に構築された仮想マシンであってもよい。またサーバ装置１は、上記の構成に限定されず、例えば可搬型の記憶媒体に記憶された情報を読み取る読取部、操作入力を受け付ける入力部、又は、画像を表示する表示部等を含んでもよい。

本実施の形態においてサーバプログラム（コンピュータプログラム、プログラム製品）１２ａは、メモリカード又は光ディスク等の記録媒体９９に記録された態様で提供され、サーバ装置１は記録媒体９９からサーバプログラム１２ａを読み出して記憶部１２に記憶する。ただし、サーバプログラム１２ａは、例えばサーバ装置１の製造段階において記憶部１２に書き込まれてもよい。また例えばサーバプログラム１２ａは、遠隔の他のサーバ装置等が配信するものをサーバ装置１が通信にて取得してもよい。例えばサーバプログラム１２ａは、記録媒体９９に記録されたものを書込装置が読み出してサーバ装置１の記憶部１２に書き込んでもよい。サーバプログラム１２ａは、ネットワークを介した配信の態様で提供されてもよく、記録媒体９９に記録された態様で提供されてもよい。

図３は、グループテーブル１２ｂの一例を示す模式図である。グループテーブル１２ｂは、車両２内に複数の搭乗者が存在する場合に、これら複数の搭乗者を１つのグループとして扱うための情報を記憶したテーブルである。本実施の形態に係るグループテーブル１２ｂは、例えば「グループ名」、「搭乗者」及び「条件情報」等の情報を対応付けて記憶する。なお本例のグループテーブル１２ｂは、ユーザＡに関する情報を抜き出して示したものである。サーバ装置１は、例えばグループのリーダーとなるユーザ毎に、車両２の所有者として登録されたユーザ毎に又は車両２毎に、図示のグループテーブル１２ｂと同様の情報を記憶している。本実施の形態においては、グループに関する情報の登録をユーザが予め行い、登録された情報をサーバ装置１がグループテーブル１２ｂとして保持するものとする。

グループテーブル１２ｂの「グループ名」は、「家族」、「親戚」及び「友人」等のグループを識別するための名称であり、例えばグループのリーダーとなるユーザが登録の際に名付けた名称である。ただしグループ名はサーバ装置１により決定されてもよく、この場合にグループ名はユーザが認識できる文字列ではなく、例えば数字及び文字を適宜に並べた文字列であってよい。

グループテーブル１２ｂの「搭乗者１」、「搭乗者２」、「搭乗者３」、「搭乗者４」…は、グループに含まれる一又は複数のユーザのユーザ名又はＩＤ等の情報である。本例では、「家族」のグループにユーザＡ～Ｃの３人のユーザが含まれ、「親戚」のグループにユーザＡ～Ｄの４人のユーザが含まれ、「友人」のグループにユーザＡ及びＥの２人のユーザが含まれている。本実施の形態においてサーバ装置１は、車両２に搭乗した複数の搭乗者が、グループテーブル１２ｂに登録された複数の搭乗者と一致した場合に、このグループが車両２に搭乗していると判断する。サーバ装置１は、例えば本例においてユーザＡ及びＢの２人のみが車両２に搭乗している場合、又は、ユーザＡ，Ｂ，Ｃ，Ｄ，Ｅの５人が登場している場合等には、「家族」、「親戚」又は「友人」のグループが搭乗しているとは判断しない。ただしサーバ装置１は、車両２の搭乗者の組み合わせが近いものをグループテーブル１２ｂから適宜に選択してもよい。

グループテーブル１２ｂの「条件情報」は、対応付けられたグループに対してサーバ装置１が提供するコンテンツに関する条件であり、ユーザが登録の際に適宜に設定した条件である。「条件情報」には、例えば「子供向けコンテンツ」、「禁止コンテンツ」及び「ユーザＥを優先」等の条件が設定され得る。「子供向けコンテンツ」は子供向けのコンテンツを優先して出力する設定であり、「条件情報」には優先すべきコンテンツの種類が条件として設定され得る。「禁止コンテンツ」は、出力を禁止するコンテンツの種類等の情報である。「ユーザＥを優先」は、複数の搭乗者のうちの誰の関心を優先してコンテンツを出力するかの設定であり、ユーザ名の他に例えば車両２の運転席、助手席又は後部座席等の搭乗位置に基づいて優先する搭乗者が設定されてもよい。

図４は、ユーザＤＢ１２ｃの一例を示す模式図である。ユーザＤＢ１２ｃは、車両２に搭乗した搭乗者（ユーザ）に対して出力したコンテンツ及び当該コンテンツに対するユーザの反応等の情報を記憶するデータベースである。本実施の形態に係るユーザＤＢ１２ｃは、例えば「コンテンツ」、「関心度合」、「日時」、「キーワード」、「グループ」及び「目的地」等の情報を対応付けて記憶する。なお本例のユーザＤＢ１２ｃは、ユーザＡに関する情報を抜き出して示したものである。サーバ装置１は、車両２に搭乗する各搭乗者（ユーザ）について、図示のユーザＤＢ１２ｃと同様の情報を記憶している。

ユーザＤＢ１２ｃの「コンテンツ」は、車両２において車載装置３がユーザＡに対して出力したコンテンツの名称又はＩＤ等の識別情報であり、本例では「焚火」、「星空」及び「焼き芋」等のコンテンツ名を記憶している。「関心度合」は、車両２においてコンテンツを出力した際のユーザの反応を判定した結果を、例えば０から５までの範囲の数値で示したものであり、数値が大きいほどコンテンツに対して大きな関心をユーザが有していることを示している。「日時」は、車両２においてコンテンツを出力した年月日及び時刻の情報である。

ユーザＤＢ１２ｃの「キーワード」は、出力したコンテンツの選択に寄与したキーワードの文字列情報である。本実施の形態においては、コンテンツに対して一又は複数のタグ（文字列情報）が関連付けられており、サーバ装置１は、車両２内の会話等の音声から抽出したキーワードとコンテンツに関連付けられたタグとに基づいて出力するコンテンツを選択している。「キーワード」には、車両２内の音声から抽出されたキーワードであり、且つ、出力したコンテンツに関連付けられたタグに一致するキーワードが記憶される。本図では、「キャンプ」、「焚火」、「星空」及び「料理」等のキーワードが例示されている。

ユーザＤＢ１２ｃの「グループ」は、コンテンツを出力した際に車両２に搭乗していたユーザＡを含む複数の搭乗者がいずれのグループに該当するかを示す情報である。「グループ」の情報は、図３に示したグループテーブル１２ｂに基づいて決定される。本図ではユーザＡを含む「家族」のグループが車両２に搭乗していたことが示されている。「目的地」は、コンテンツを出力した際に車両２のカーナビゲーションシステムに設定された目的地の情報である。本図では、「目的地」として「ショッピングモール」が例示されている。

図５は、第１コンテンツＤＢ１２ｄの一例を示す模式図である。第１コンテンツＤＢ１２ｄは、車両２の車載装置３が出力する第１コンテンツ又はこの第１コンテンツを生成するためのコンテンツ素材を、一又は複数のタグに対応付けて記憶するデータベースである。第１コンテンツＤＢ１２ｄには、「ファイル名」、「種類」及び「タグ」等の情報が対応付けて記憶されている。

第１コンテンツＤＢ１２ｄの「ファイル名」は、第１コンテンツのデータに対して付されたファイル名であり、本図では「焚火.obj」、「星空.obj」及び「焼き芋.obj」等のファイル名が例示されている。サーバ装置１は、この「ファイル名」を基に第１コンテンツのデータを第１コンテンツＤＢ１２ｄから読み出して車載装置３へ送信する。第１コンテンツＤＢ１２ｄの「種類」は、第１コンテンツの種類を示す情報であり、例えば「アニメーションＡＲ」及び「静止ＡＲ」等のコンテンツの種類が設定され得る。コンテンツの種類には、例えば静止画像、動画像、音楽、振動又は芳香等の種々のものが含まれ得る。

第１コンテンツＤＢ１２ｄの「タグ」は、第１コンテンツに対し予め設定された文字列情報である。第１コンテンツに対するタグは、例えば本情報処理システムの設計者又は管理者等により予め決定される。１つの第１コンテンツに対して複数のタグが設定され得る。本図では、「キャンプ」、「焚火」、［チルアウト」、「星空」、「芋」及び「料理」等のタグが例示されている。サーバ装置１は、車両２内の会話等の音声から抽出したキーワードと、第１コンテンツＤＢ１２ｄに記憶された複数のタグとを比較し、キーワードに一致するタグを有する第１コンテンツを選択して車載装置３へ送信する。またサーバ装置１は、１つのキーワードに対して複数の第１コンテンツを選択し、選択した第１コンテンツを組み合わせて１つの第１コンテンツを生成し、生成した第１コンテンツを車載装置３へ送信してもよい。例えばサーバ装置１は、アニメーション付きのＡＲのコンテンツと、音楽のコンテンツと、芳香のコンテンツとを組み合わせて１つの第１コンテンツとすることができる。

図６は、第２コンテンツＤＢ１２ｅの一例を示す模式図である。第２コンテンツＤＢ１２ｅは、商品又はサービスの提供に関する第２コンテンツ、いわゆる広告等のコンテンツを、一又は複数のタグに対応付けて記憶するデータベースである。第２コンテンツＤＢ１２ｅは、第１コンテンツＤＢ１２ｄと同様の構成であり、「ファイル名」、「種類」、「タグ」及び「提供者」等の情報が対応付けて記憶されている。

第２コンテンツＤＢ１２ｅの「ファイル名」は、第２コンテンツのデータに対して付されたファイル名であり、本図では「キャンプ場.png」、「焚火台.mp4」及び「芋.png」等のファイル名が例示されている。サーバ装置１は、この「ファイル名」を基に第２コンテンツのデータを第２コンテンツＤＢ１２ｅから読み出して車載装置３へ送信する。「種類」は、第２コンテンツの種類を示す情報であり、例えば「キャンプ場の紹介画像」、「焚火台の紹介動画」及び「チラシの情報」等のコンテンツの種類が設定され得る。コンテンツの種類には、例えば静止画像、動画像、音楽、振動又は芳香等の種々のものが含まれ得る。

第２コンテンツＤＢ１２ｅの「タグ」は、第２コンテンツに対し予め設定された文字列情報である。第２コンテンツに対するタグは、例えば本情報処理システムの設計者又は管理者等により予め決定される。１つの第２コンテンツに対して複数のタグが設定され得る。本図では、「キャンプ」、「焚火」及び「料理」等のタグが例示されている。サーバ装置１は、第１コンテンツＤＢ１２ｄの第１コンテンツの出力により得られた車両２の搭乗者の反応を基に、この搭乗者が関心を有するコンテンツのタグを判定し、このタグに対応付けられた第２コンテンツを第２コンテンツＤＢ１２ｅから選択して車載装置３へ送信する。

第２コンテンツＤＢ１２ｅの「提供者」は、第２コンテンツに係る商品又はサービスを提供する企業等に関する情報である。本図では、「Ａ社」、「Ｂ社」及び｛Ｃ社」等の企業名が記されているが、実際には企業名のみではなく、例えば提供者が運営するＷｅｂページにアクセスするためのＵＲＬ（Uniform Resource Locator）、提供者に対して購入もしくは予約等を行うためのメールアドレスもしくは電話番号、又は、提供者の店舗の位置情報等の種々の情報が第２コンテンツＤＢ１２ｅに「提供者」の情報として設定され得る。

図７は、生成コンテンツＤＢ１２ｆの一例を示す模式図である。生成コンテンツＤＢ１２ｆは、ユーザに対して出力した複数のコンテンツを関連するキーワード及び出力順序等の情報と共に一纏めにしたデータを生成コンテンツとして記憶するデータベースである。サーバ装置１は、生成コンテンツＤＢ１２ｆに記憶された生成コンテンツを、生成元となる車両２とは異なる一又は複数の車両２の車載装置３へ送信することができ、これにより複数の車両２で生成コンテンツを共有することができる。車載装置３は、サーバ装置１から受信した生成コンテンツに基づいて、生成コンテンツに含まれる複数のコンテンツを出力することができ、これにより他の車両２で出力されたコンテンツを再現することができる。なおサーバ装置１は、例えばユーザＤＢ１２ｃに記憶された情報を基に生成コンテンツを生成し、生成コンテンツＤＢ１２ｆに情報を記憶する。

生成コンテンツＤＢ１２ｆは、「ＩＤ」、複数の「キーワード」及び「コンテンツ」の組、「起点」、「性別」、「年代」、「職業」、「日時」、「位置」並びに「目的地」等の情報を生成コンテンツとして対応付けて記憶する。「ＩＤ」は、生成コンテンツに対して一意に付される識別情報であり、本図では「１９２０２２」の６桁の数値が例示されている。

生成コンテンツＤＢ１２ｆの「キーワード」及び「コンテンツ」の組は、対象となる車両２にて取得したキーワードと、このキーワードに応じて出力したコンテンツとを示している。また生成コンテンツＤＢ１２ｆは、複数組（本例ではＮ組）の「キーワード」及び「コンテンツ」を、コンテンツを出力した順序で記憶している。本図において生成コンテンツＤＢ１２ｆは、１組目の「キーワード１」及び「コンテンツ１」として「焚火」及び「焚火.obj」の情報を記憶し、２組目の「キーワード２」及び「コンテンツ２」として「星空」及び「星空.obj」の情報を記憶し、…、Ｎ組目の「キーワードＮ」及び「コンテンツＮ」として「焼き芋」及び「芋.png」の情報を記憶している。即ち本図に示された生成コンテンツには、「焚火.obj」、「星空.obj」、…、「芋.png」のＮ個のコンテンツが含まれている。本実施の形態において生成コンテンツに含まれるＮ個のコンテンツは、１個目からＮ－１個目までは第１コンテンツＤＢ１２ｄに記憶された第１コンテンツであり、Ｎ個目（最後）は第２コンテンツＤＢ１２ｅに記憶された第２コンテンツである。

生成コンテンツＤＢ１２ｆの「起点」から「目的地」までの各項目には、生成コンテンツに関連する種々の情報が記憶されている。「起点」は、最初のコンテンツ（本例では「コンテンツ１」の「焚火.obj」）の選択要因となったキーワード（本例では「キーワード１」の「焚火」）の抽出元が何であるかを示す情報である。本例において「起点」は「音声」とされ、キーワードが車両２内の会話又はラジオ等の音声から抽出されたものであることが示されている。「起点」には、音声の他に例えば車両２の現在位置、車両２の周辺環境又は車両２の目的地等の種々の情報源が採用され得る。また本例では「音声」としたが、例えば「ラジオの音声」又は「ユーザＡの音声」等のように、音声の発生源についてより詳細な情報を「起点」として記憶してもよい。

生成コンテンツＤＢ１２ｆの「性別」は、生成コンテンツに含まれる各コンテンツを選択する際に用いられたユーザの反応について、このユーザが男性又は女性のいずれであったかを示す情報である。「年代」及び「職業」も同様であり、このユーザの年代がどのくらいであったか、及び、職業が何であったかを示す情報である。本例では、「性別」が「男性」であり、「年代」が「４０代」であり、「職業」が「アーティスト」であることが示されている。なおこれらの情報は、本情報処理システムを利用するユーザが予め登録した情報である。サーバ装置１は、これらのユーザの情報を記憶しており、生成コンテンツを生成する際に記憶した情報を取得して生成コンテンツＤＢ１２ｆに記憶する。

生成コンテンツＤＢ１２ｆの「日時」は、最初のコンテンツを車両２にて出力した時点の年月日及び時刻の情報である。「位置」は、最初のコンテンツを車両２にて出力した際に、車両２が走行していた位置であり、ＧＰＳ（Global Positioning System）により測定された緯度及び経度の情報である。「目的地」は、最初のコンテンツを車両２にて出力した際に、車両２に搭載されていたカーナビゲーションシステムに登録された目的地であり、目的地の緯度及び経度の情報である。

また本実施の形態に係るサーバ装置１には、記憶部１２に記憶されたサーバプログラム１２ａを処理部１１が読み出して実行することにより、グループ判定部１１ａ、キーワード抽出部１１ｂ、関心判定部１１ｃ、第１コンテンツ送信処理部１１ｄ、第２コンテンツ送信処理部１１ｅ、実行支援処理部１１ｆ及びコンテンツ共有処理部１１ｇ等が、ソフトウェア的な機能部として処理部１１に実現される。なお本図においては、処理部１１の機能部として、車両２にて出力するコンテンツに関連する処理を行う機能部を図示し、これ以外の処理に関する機能部は図示を省略している。

グループ判定部１１ａは、車両２の車載装置３から取得した搭乗者に関する情報と、記憶部１２のグループテーブル１２ｂに記憶された情報とに基づいて、車両２に搭乗した一又は複数の搭乗者の組み合わせが登録済みのいずれのグループに該当するかを判定する処理を行う。本実施の形態に係る情報処理システムでは、例えば車載装置３が車両２の搭乗者をカメラで撮影して顔認証を行うことにより搭乗者を特定し、搭乗者の名前又はＩＤ等の識別情報をサーバ装置１へ送信する。サーバ装置１のグループ判定部１１ａは、車載装置３から送信される搭乗者の識別情報を基にグループテーブル１２ｂを参照し、車両２の一又は複数の搭乗者の組み合わせが、グループテーブル１２ｂに登録された搭乗者の組み合わせと一致するグループを特定する。

キーワード抽出部１１ｂは、車両２内にてなされた搭乗者の会話又はラジオから出力された会話等の音声を基に、これらの音声に含まれるキーワードを抽出する処理を行う。本実施の形態に係る情報処理システムでは、例えば車載装置３がマイクにて車両２内の音声を取得し、音声認識の処理を行って音声を文字情報（テキスト情報）に変換し、変換したテキスト情報をサーバ装置１へ送信する。サーバ装置１のキーワード抽出部１１ｂは、車載装置３から送信される会話音声の文字情報を取得し、取得した文字情報から一又は複数のキーワードを抽出する。キーワード抽出部１１ｂは、例えば会話音声の文字情報から名詞を抽出し、所定時間の会話において名詞の登場回数をカウントし、登場回数が閾値を超える名詞又は登場回数を順位付けして上位となった名詞等をキーワードとすることができる。なおキーワード抽出部１１ｂによるキーワードの抽出方法は、どのような方法が採用されてもよい。また、車載装置３が会話の音声をサーバ装置１へ送信し、サーバ装置１が音声認識の処理を行ってもよい。また、キーワードの抽出を車載装置３が行ってもよく、この場合にはキーワード抽出部１１ｂは車載装置３に備えられてよい。

関心判定部１１ｃは、車両２内にて車載装置３が出力したコンテンツに対する搭乗者の関心度合を判定する処理を行う。本実施の形態に係る情報処理システムでは、例えば車載装置３がコンテンツを出力した際にカメラにて搭乗者の顔を撮影し、撮影した顔画像を基に搭乗者の喜怒哀楽等の感情を分析し、分析結果を反応情報としてサーバ装置１へ送信する。なお車載装置３は、例えば人の顔の画像から感情を推定するよう機械学習がなされた学習済みの学習モデルを用いて、搭乗者の感情を分析することができる。学習モデルは、例えば顔画像を入力として受け付けて、喜怒哀楽の４種類の感情のいずれであるかを分類する分類モデルとして機械学習がなされ、喜怒哀楽の４種類の感情に対応付けられた４つの値（尤度又は確信度等）を出力する。車載装置３は、学習モデルが出力するこの４つの値を反応情報としてサーバ装置１へ送信することができる。例えばサーバ装置１の関心判定部１１ｃは、車載装置３から受信したこれらの反応情報に基づいて、喜怒哀楽の４種類の感情のうち、喜及び楽の感情に対応する数値の最大値を、コンテンツに対する関心度合とすることができる。なお、この関心度合の算出方法は、一例であってこれに限るものではなく、関心判定部１１ｃはどのような方法で関心度合を算出してもよい。関心判定部１１ｃは、車両２に複数の搭乗者が存在する場合には、搭乗者毎に関心度合を算出する。コンテンツに対する搭乗者の関心度合を算出した関心判定部１１ｃは、出力したコンテンツ及びその関心度合等の情報をユーザＤＢ１２ｃに記憶する。また更に、関心判定部１１ｃは、算出した関心度合の数値と予め定められた２つの閾値とを比較することにより、搭乗者の関心が「高」、「中」又は「低」の３段階のいずれであるかを判定することができる。

第１コンテンツ送信処理部１１ｄは、グループ判定部１１ａが判定したグループ、キーワード抽出部１１ｂが抽出したキーワード、及び、関心判定部１１ｃが判定した搭乗者の関心度合等の情報に基づいて、第１コンテンツＤＢ１２ｄに記憶された第１コンテンツを選択して車載装置３へ送信する処理を行う。例えば第１コンテンツ送信処理部１１ｄは、キーワード抽出部１１ｂが抽出した一又は複数のキーワードを基に第１コンテンツＤＢ１２ｄを参照し、当該キーワードに該当するタグが設定された第１コンテンツを探索する。このときに第１コンテンツ送信処理部１１ｄは、グループ判定部１１ａが判定したグループを基にグループテーブル１２ｂを参照し、当該グループに対応付けられた条件情報を取得し、取得した条件情報を満たす第１コンテンツを探索する。第１コンテンツ送信処理部１１ｄは、キーワードに該当する第１コンテンツが複数存在する場合、適宜の基準で（例えばランダムに）第１コンテンツを選択し、選択した第１コンテンツを車載装置３へ送信する。

また第１コンテンツ送信処理部１１ｄは、キーワードに基づいて送信した第１コンテンツに対する搭乗者の関心度合を関心判定部１１ｃが判定した結果に基づいて、送信した第１コンテンツに対する関心が低い場合には、新たな会話から抽出したキーワードに基づく第１コンテンツの送信を行う。送信した第１コンテンツに対する関心が中程度である場合、第１コンテンツ送信処理部１１ｄは、送信した第１コンテンツに付されたタグに関連する一又は複数のタグを選択し、選択したタグに基づいて第１コンテンツＤＢ１２ｄから別の第１コンテンツを選択して車載装置３へ送信する。なおサーバ装置１は、複数のタグを関連付けたタグ関連情報を予め記憶しており、この情報を用いて一のタグに関連する一又は複数のタグを選択することができる。また送信した第１コンテンツに対する関心が高い場合、第１コンテンツ送信処理部１１ｄは、第２コンテンツ送信処理部１１ｅへその旨を通知し、第２コンテンツ送信処理部１１ｅによる第２コンテンツの送信を実施させる。

なお本実施の形態においては、車両２には複数の搭乗者が存在する可能性があり、また車両２内でラジオ又はテレビ等の音声が出力されている可能性がある。このような場合、車載装置３からサーバ装置１へ送信される会話のテキスト情報には、複数の搭乗者及びラジオ等の会話が混在する可能性がある。本実施の形態においては、車載装置３が会話の音声をテキスト化する際に、各会話が搭乗者のものであるか又はラジオ等のものであるかを判断すると共に、いずれの搭乗者のものであるかを判断し、各会話のテキスト情報に発話者が誰であるかを示す情報を付したものを会話情報としてサーバ装置１へ送信するものとする。ただし、車載装置３はこのような発話者の判断を行わずに会話のテキスト情報をサーバ装置１へ送信し、サーバ装置１が会話のテキスト情報の内容等に基づいて発話者を特定してもよい。

第１コンテンツ送信処理部１１ｄは、キーワード抽出部１１ｂが抽出した複数のキーワードについて、搭乗者の会話から抽出したキーワードと、ラジオ等の音声から抽出したキーワードとが含まれている場合、搭乗者のキーワードとラジオ等のキーワードとで一致するキーワードが存在するか否かを判定する。例えば第１コンテンツ送信処理部１１ｄは、一致するキーワードが存在する場合、このキーワードに基づいて車載装置３へ送信する第１コンテンツを決定する。一致するキーワードが存在しない場合、第１コンテンツ送信処理部１１ｄは、搭乗者の会話から抽出したキーワードを優先して第１コンテンツを決定する。搭乗者が会話していない場合など、搭乗者の会話から抽出したキーワードが存在しない場合、第１コンテンツ送信処理部１１ｄは、ラジオ等の音声から抽出したキーワードに基づいて第１コンテンツを決定する。

また第１コンテンツ送信処理部１１ｄは、車両２内に複数の搭乗者が存在する場合に、いずれの搭乗者の会話から抽出したキーワードを優先して第１コンテンツを決定するかを、各搭乗者の属性情報又は各搭乗者の乗車位置等の情報に基づいて決定する。第１コンテンツ送信処理部１１ｄは、各搭乗者の性別及び年齢等の属性情報が与えられている場合に、例えば最年少又は最年長等の搭乗者の会話から抽出したキーワードを優先してもよい。また第１コンテンツ送信処理部１１ｄは、例えば車両２の助手席又は後部座席等の搭乗者の会話から抽出したキーワードを優先してもよい。このような複数の搭乗者に関する優先順位は、例えば車両２の搭乗者又は所有者等により予め設定可能であってよい。

また第１コンテンツ送信処理部１１ｄは、複数の搭乗者が存在する場合及びラジオ等の音声が混在する場合であっても、これらを区別することなくキーワードを決定し、このキーワードに基づいて第１コンテンツを決定してもよい。第１コンテンツ送信処理部１１ｄは、例えば発話者が誰であるかを区別せずに、一定時間に最も多く発せられたキーワードを採用することができる。また第１コンテンツ送信処理部１１ｄは、例えば一定時間に発せられた複数のキーワードの中からランダムに１つのキーワードを選択してもよい。

また第１コンテンツ送信処理部１１ｄは、ラジオ等の音声の有無に関わらず、一又は複数の搭乗者の発話に係る音声から抽出されるキーワードに基づいて第１コンテンツを決定してもよい。即ち第１コンテンツ送信処理部１１ｄは、ラジオ等の音声が出力されている場合であっても、ラジオ等の音声から抽出されるキーワードは用いずに、又は、ラジオ等の音声からのキーワードの抽出を行わずに、搭乗者の発話に係る音声から抽出されるキーワードのみに基づいて第１コンテンツを決定してもよい。

第２コンテンツ送信処理部１１ｅは、第１コンテンツ送信処理部１１ｄが送信した第１コンテンツに対する関心判定部１１ｃが判定した搭乗者の関心等の情報に基づいて、第２コンテンツＤＢ１２ｅに記憶された商品又はサービスの提供に関する第２コンテンツを選択して車載装置３へ送信する処理を行う。例えば第２コンテンツ送信処理部１１ｅは、第１コンテンツ送信処理部１１ｄが送信した第１コンテンツに対する搭乗者の関心が高い場合、この第１コンテンツに付されたタグを取得し、取得したタグを基に第２コンテンツＤＢ１２ｅを参照し、当該タグと同じタグが付された第２コンテンツを第２コンテンツＤＢ１２ｅから探索する。第２コンテンツ送信処理部１１ｅは、該当する第２コンテンツが複数存在する場合、適宜の基準で（例えばランダムに）第２コンテンツを選択し、選択した第二コンテンツを車載装置３へ送信する。

また第２コンテンツ送信処理部１１ｅは、送信した第２コンテンツに対する搭乗者の関心度合が低い場合、第１コンテンツ送信処理部１１ｄへその旨を通知し、関連する別のタグに基づく第１コンテンツの選択及び送信を実施させる。送信した第２コンテンツに対する搭乗者の関心度合が中程度の場合、第２コンテンツ送信処理部１１ｅは、送信した第２コンテンツに付されたタグに関連する一又は複数のタグを選択し、選択したタグに基づいて第２コンテンツＤＢ１２ｅから別の第２コンテンツを選択して車載装置３へ送信する。送信した第２コンテンツに対する搭乗者の関心度合が高い場合、第２コンテンツ送信処理部１１ｅは、実行支援処理部１１ｆへその旨を通知し、実行支援処理部１１ｆによる商品又はサービス等の購入又は予約等の実行支援を実施させる。

実行支援処理部１１ｆは、第２コンテンツ送信処理部１１ｅが送信した第２コンテンツに対する搭乗者の関心度合が高い場合に、当該第２コンテンツに係る商品又はサービスに対する搭乗者の購入又は予約等の実行を支援するための処理を行う。実行支援処理部１１ｆは、搭乗者の関心度合が高かった第２コンテンツに対応する提供者の情報を第２コンテンツＤＢ１２ｅから取得し、取得した情報を基に例えば提供者が運営する外部のＷｅｂページへのアクセスを車載装置３に行わせる。また実行支援処理部１１ｆは、例えば提供者の電話番号を車載装置３へ送信して、車載装置３に提供者へ電話をかけさせてもよく、また例えば提供者の店舗の位置（提供地）に関する情報を車載装置３へ送信して、車両２のカーナビゲーションシステムにこの店舗を目的地として設定させてもよい。実行支援処理部１１ｆによる実行支援は、どのような方法で行われてもよい。また実行支援処理部１１ｆは、実行支援を行う前に、車両２の搭乗者に対して実行支援の要否を問い合わせてもよい。

コンテンツ共有処理部１１ｇは、車両２に対して第１コンテンツ送信処理部１１ｄが送信した一又は複数の第１コンテンツ、及び、第２コンテンツ送信処理部１１ｅが送信した一又は複数の第２コンテンツを一纏めにしたものを生成コンテンツとし、これらのコンテンツを出力した車両２とは異なる車両２に生成コンテンツを送信することで、複数の車両２の間で生成コンテンツを共有させる処理を行う。本実施の形態に係る情報処理システムでは、車両２の搭乗者毎に、出力したコンテンツの履歴等の情報がユーザＤＢ１２ｃに記憶される。コンテンツ共有処理部１１ｇは、ユーザＤＢ１２ｃに記憶された情報を基に、適宜の１人のユーザに対して出力されたコンテンツの履歴を探索することにより、このユーザに対して出力されたコンテンツ及びその出力順序等の情報を得ることができる。コンテンツ共有処理部１１ｇは、特定のユーザに対して出力したコンテンツ及びその出力順序等の情報を生成コンテンツとし、生成コンテンツに関する情報を生成コンテンツＤＢ１２ｆに登録する。

またコンテンツ共有処理部１１ｇは、例えば生成コンテンツＤＢ１２ｆに記憶された複数の生成コンテンツの一覧情報を車載装置３へ送信し、この一覧情報に基づく車載装置３からの特定の生成コンテンツの取得要求を受け付ける。コンテンツ共有処理部１１ｇは、車載装置３から要求された生成コンテンツを生成コンテンツＤＢ１２ｆから読み出して要求元の車載装置３へ送信する。これにより車載装置３は、特定の搭乗者が他の車両２内で体験したコンテンツを自身の車両２内で出力して搭乗者に体験させることができる。

図８は、本実施の形態に係る車載装置３の構成を示すブロック図である。本実施の形態に係る車載装置３は、処理部３１、記憶部（ストレージ）３２、通信部（トランシーバ）３３、表示部（ディスプレイ）３４、操作部３５、カメラ３６、マイク３７、スピーカ３８及び測位部３９等を備えて構成されている。車載装置３は、車両２の適所に搭載されている。なお本実施の形態においては、車載装置３が１つの装置として車両２に搭載されるものとするが、これに限るものではなく、複数の装置の協働により車載装置３が実現されてもよい。また車載装置３は、通信部３３、表示部３４、操作部３５、カメラ３６、マイク３７、スピーカ３８及び測位部３９等のデバイスを直接的に備えていなくてよく、これらのデバイスが少なくとも車両２に搭載され、車載装置３がこれらのデバイスを利用可能であればよい。

処理部３１は、ＣＰＵ又はＭＰＵ等の演算処理装置、ＲＯＭ及び等を用いて構成されている。処理部３１は、記憶部３２に記憶されたプログラム３２ａを読み出して実行することにより、車両２内の音声を取得する処理、サーバ装置１から送信されるコンテンツを受信して出力する処理、及び、出力したコンテンツに対する搭乗者の反応を取得する処理等の種々の処理を行う。

記憶部３２は、例えばフラッシュメモリ等の不揮発性のメモリ素子又はハードディスク等の記憶装置等を用いて構成されている。記憶部３２は、処理部３１が実行する各種のプログラム、及び、処理部３１の処理に必要な各種のデータを記憶する。本実施の形態において記憶部３２は、処理部３１が実行するプログラム３２ａを記憶している。本実施の形態においてプログラム３２ａは遠隔のサーバ装置等により配信され、これを車載装置３が通信にて取得し、記憶部３２に記憶する。ただしプログラム３２ａは、例えば車載装置３の製造段階において記憶部３２に書き込まれてもよい。例えばプログラム３２ａは、メモリカード又は光ディスク等の記録媒体９９に記録されたプログラム３２ａを車載装置３が読み出して記憶部３２に記憶してもよい。例えばプログラム３２ａは、記録媒体９９に記録されたものを書込装置が読み出して車載装置３の記憶部３２に書き込んでもよい。プログラム３２ａは、ネットワークを介した配信の態様で提供されてもよく、記録媒体９９に記録された態様で提供されてもよい。

通信部３３は、携帯電話通信網、無線ＬＡＮ及びインターネット等を含むネットワークＮを介して、種々の装置との間で通信を行う。本実施の形態において通信部３３は、ネットワークＮを介して、サーバ装置１との間で通信を行う。通信部３３は、処理部３１から与えられたデータを他の装置へ送信すると共に、他の装置から受信したデータを処理部３１へ与える。

表示部３４は、液晶ディスプレイ、有機ＥＬ（Electro Luminescence）ディスプレイ、ヘッドアップディスプレイ、プロジェクタ又は透過型ディスプレイ等の装置を用いて構成され得る。本実施の形態において表示部３４は、車両２の窓のガラスに映像を投影することで種々の情報を表示するものとするが、これに限るものではなく、表示部３４はどのような態様で映像を表示するものであってもよい。車載装置３は、表示部３４を利用して、サーバ装置１から送信される映像のコンテンツを出力（表示）することができる。

操作部３５は、ユーザの操作を受け付け、受け付けた操作を処理部３１へ通知する。例えば操作部３５は、機械式のボタン又は表示部３４の表面に設けられたタッチパネル等の入力デバイスによりユーザの操作を受け付ける。また操作部３５は、ユーザの発話に基づく入力を受け付ける構成、いわゆる音声入力によりユーザの操作を受け付ける構成であってよい。

カメラ３６は、ＣＣＤ（Charge Coupled Device）イメージセンサ又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等の撮像素子を用いて構成されている。カメラ３６は、車両２の搭乗者の顔を撮影可能なように、車両２内の適宜の場所に設置される。なお車両２には、複数の搭乗者の撮影を行うべく、複数のカメラ３６が設置されてよい。カメラ３６は、撮影した画像を処理部３１へ与える。

マイク３７は、周囲の音声を取得する装置であり、取得した音声のデータを処理部３１へ与える。本実施の形態においてマイク３７は、車両２内の音声、例えば搭乗者の会話に係る音声、又は、スピーカ３８から出力されるラジオ等の音声を取得する。マイク３７は、これらの音声を取得することが可能な車両２内の適宜の場所に設置される。

スピーカ３８は、処理部３１の制御に応じて音声を出力する装置であり、車両２内の一又は複数の場所に設置される。車載装置３は、スピーカ３８を利用して、サーバ装置１から送信される音声のコンテンツを出力することができる。またスピーカ３８は、車両２に搭載されたオーディオ装置、カーナビゲーションシステム及びテレビジョン装置等の装置と兼用のものであってよい。この場合にスピーカ３８は、例えばラジオ放送又はテレビ放送等の音声を出力することができ、音楽又は効果音等を出力することができる。

測位部３９は、車両２の位置を測定し、測定結果として例えば経度及び緯度等の情報を処理部３１へ与える。測位部３９は、例えばＧＰＳ（Global Positioning System）の人工衛星から送信される電波を受信し、受信した電波に基づいて位置を測定する。また測位部３９は、ＧＰＳのみでなく、例えばジャイロセンサ又は加速度センサ等のセンサを利用して位置を測定してもよい。測位部３９は車両２に搭載されたカーナビゲーションシステムと共用のものであってよく、車載装置３は、測位部を有するカーナビゲーションシステムから車両２の位置情報を取得してもよい。

また本実施の形態に係る車載装置３は、記憶部３２に記憶されたプログラム３２ａを処理部３１が読み出して実行することにより、搭乗者認証部３１ａ、音声認識処理部３１ｂ、コンテンツ出力部３１ｃ及び反応取得部３１ｄ等がソフトウェア的な機能部として処理部３１に実現される。

搭乗者認証部３１ａは、例えばカメラ３６にて車両２の搭乗者の顔の撮影を行い、撮影画像に基づいて顔認証処理を行うことにより、搭乗者を認証する処理を行う。搭乗者認証部３１ａは、車両２の搭乗者が予め登録された正規の搭乗者であるか否か、及び、搭乗者が予め登録された複数の搭乗者の誰であるか等を判定する。搭乗者認証部３１ａは、車両２の搭乗者全員について認証を行い、各搭乗者の名前又はＩＤ等の情報をサーバ装置１へ送信する。顔認証処理は既存の技術であるため、詳細な説明は省略する。なお搭乗者認証部３１ａによる搭乗者の認証は、顔認証処理によるものに限らない。搭乗者認証部３１ａは、例えば指紋認証又は静脈認証等の生体認証により搭乗者の認証を行ってもよく、また例えば搭乗者が所持するスマートフォン等の端末装置との間で無線通信による情報交換を行うことで搭乗者を認証してもよく、また例えば搭乗者からＩＤ及びパスワード等の入力を受け付けて搭乗者を認証してもよく、これら以外のどのような方法で搭乗者を認証してもよい。

音声認識処理部３１ｂは、マイク３７にて取得した車両２内の音声について音声認識処理を行い、当該音声を文字情報（テキスト情報）に変換する処理を行う。本実施の形態において音声認識処理部３１ｂが処理対象とする音声には、車両２の搭乗者の会話の音声、又は、スピーカ３８から出力されたラジオ放送もしくはテレビ放送等の会話の音声が含まれ得る。音声認識処理部３１ｂは、これらの会話の音声を音声認識処理により文字情報へ変換したものを、会話情報としてサーバ装置１へ送信する。音声認識処理は既存の技術であるため、詳細な説明は省略する。

コンテンツ出力部３１ｃは、サーバ装置１が送信する種々のコンテンツ（第１コンテンツ又は第２コンテンツ）を受信し、受信したコンテンツを表示部３４又はスピーカ３８等を用いて出力する処理を行う。コンテンツ出力部３１ｃは、例えば受信したコンテンツが映像である場合、表示部３４にこの映像を表示（出力）し、また例えばコンテンツが音声又は音楽等である場合、スピーカ３８からこの音声又は音楽等を出力する。なおコンテンツは映像又は音声等に限らず、照明光、振動、芳香又は空調等の種々のコンテンツであってよい。コンテンツ出力部３１ｃは、例えば車両２内の照明機器を制御して照明光のコンテンツを出力してもよく、例えば車両２の座席等に搭載された振動装置を制御して振動のコンテンツを出力してもよく、例えば車両２に搭載された芳香発生装置を制御して方向のコンテンツを出力してもよく、例えば車両２の空調機器を制御して空調のコンテンツを出力してもよい。またコンテンツは、これらの複数のものが混在したコンテンツであってよい。

反応取得部３１ｄは、コンテンツ出力部３１ｃが出力したコンテンツに対する搭乗者の反応を取得する処理を行う。反応取得部３１ｄは、コンテンツ出力部３１ｃがコンテンツを出力した際にカメラ３６にて搭乗者を撮影し、撮影した搭乗者の顔の画像に基づく感情の推定を行う。顔の画像に基づく感情の推定には、予め機械学習がなされた学習モデルが用いられる。学習モデルは、顔画像を入力として受け付けて、例えば喜怒哀楽の４種類の感情を分類する分類モデルとして機械学習がなされる。反応取得部３１ｄは、カメラ３６が撮影した搭乗者の顔の画像を学習モデルへ入力し、学習モデルが出力する例えば喜怒哀楽の４種類の感情に対応付けられた４つの値（尤度又は確信度等）を取得し、これらの値を反応情報としてサーバ装置１へ送信する。なお反応取得部３１ｄは、感情を推定する学習モデルを用いるのではなく、例えば搭乗者の心拍数、血圧、体温又は呼吸等のバイタル情報を取得し、取得したバイタル情報に基づいて搭乗者の感情を分析してもよい。

＜コンテンツ出力処理＞
図９及び図１０は、本実施の形態に係るサーバ装置１が行う処理の手順を示すフローチャートである。本実施の形態に係るサーバ装置１の処理部１１のグループ判定部１１ａは、通信部１３にて車両２の車載装置３との通信を行い、車載装置３から車両２の搭乗者のユーザ名又はユーザＩＤ等の搭乗者情報を取得する（ステップＳ１）。グループ判定部１１ａは、ステップＳ１にて取得した搭乗者情報を基に、記憶部１２のグループテーブル１２ｂを参照して、車両２に搭乗する搭乗者のグループを判定する（ステップＳ２）。

処理部１１のキーワード抽出部１１ｂは、通信部１３にて車両２の車載装置３との通信を行い、車載装置３から車両２の搭乗者の会話の音声をテキスト化した会話情報を取得する（ステップＳ３）。キーワード抽出部１１ｂは、ステップＳ３にて取得した会話情報からキーワードを抽出する（ステップＳ４）。このときにキーワード抽出部１１ｂは、例えば会話情報から名詞を抽出し、名詞の登場頻度などに基づいて又はランダム等の方法で１つの名詞を選択し、選択した名詞をキーワードとすることができる。またこのときにキーワード抽出部１１ｂは、会話情報と共に例えば車両２の位置情報又はカーナビゲーションシステムの目的情報等の種々の情報を車載装置３から取得してよく、これらの情報を基にキーワードを決定してもよい。例えばキーワード抽出部１１ｂは、位置情報に基づいて車両２の周辺に存在する施設等の名称をキーワードとしてもよく、目的地として設定された施設等の名称をキーワードとしてもよい。

処理部１１の第１コンテンツ送信処理部１１ｄは、ステップＳ４にて抽出したキーワードを基に第１コンテンツＤＢ１２ｄを参照し、このキーワードがタグとして付された一又は複数の第１コンテンツを選択する（ステップＳ５）。なおこのときに第１コンテンツ送信処理部１１ｄは、第１コンテンツＤＢ１２ｄから複数の第１コンテンツを選択して組み合わせることにより、新たな第１コンテンツを生成してもよい。また第１コンテンツ送信処理部１１ｄは、第１コンテンツを選択する際に、ステップＳ２にて判定した搭乗者のグループについて設定された条件を満たすように選択を行う。第１コンテンツ送信処理部１１ｄは、ステップＳ５にて選択した第１コンテンツを車両２の車載装置３へ送信する（ステップＳ６）。

処理部１１の関心判定部１１ｃは、通信部１３にて車両２の車載装置３との通信を行い、ステップＳ６にて送信した第１コンテンツを車両２内で出力した車載装置３から、この第１コンテンツに対する搭乗者の反応に関する反応情報を取得する（ステップＳ７）。関心判定部１１ｃは、ステップＳ７にて取得した反応情報を基に、車両２の各搭乗者について関心度合を判定する（ステップＳ８）。本実施の形態において車載装置３は、人の顔等を撮影した画像を基に感情を推定する学習モデルを用い、車両２の各搭乗者について喜怒哀楽等の複数の感情のいずれであるかについての推定結果、例えば各感情の確信度等の値を反応情報に含めてサーバ装置１へ送信する。関心判定部１１ｃは、各搭乗者の特定の感情（例えば喜又は楽）に関する推定値を反応情報から取得し、これを関心度合とすることができる。関心判定部１１ｃは、ステップＳ８にて判定した各搭乗者の関心度合と、車両２にて出力した第１コンテンツに関する情報等とを、ユーザＤＢ１２ｃに記憶する（ステップＳ９）。

次いで、関心判定部１１ｃは、ステップＳ８にて判定した関心度合と所定の２つの閾値とを比較することにより、搭乗者の関心度合が「高」、「中」、「低」のいずれであるかを判定する。なお車両２に複数の搭乗者が存在する場合、関心判定部１１ｃは、複数の搭乗者のいずれか１人について関心度合を判定してもよく、又は、複数の搭乗者の関心度合の平均値等を基に判定を行ってもよい。複数の搭乗者からいずれか１人を関心判定部１１ｃが選択する場合、例えば車両２の座席に対して予め優先度を設定しておき、この優先度に従って１人の搭乗者を選択することができる。優先度は、車両２の所有者又は搭乗者等のユーザが予め設定可能であってよい。また関心判定部１１ｃは、例えば搭乗者の年齢又は性別等の属性情報を基に１人の搭乗者を選択してもよく、例えばランダムに搭乗者を選択してもよく、例えば最も関心度合が高い又は低い搭乗者を選択してもよく、これら以外の方法で搭乗者を選択してもよい。

関心判定部１１ｃは、搭乗者の関心度合が「低」であるか否かを判定する（ステップＳ１０）。搭乗者の関心度合が「低」である場合（Ｓ１０：ＹＥＳ）、処理部１１は、ステップＳ３へ処理を戻し、新たなキーワードの抽出を行って別の第１コンテンツを出力する。搭乗者の関心度合が「低」ではない場合（Ｓ１０：ＮＯ）、関心判定部１１ｃは、搭乗者の関心度合が「中」であるか否かを判定する（ステップＳ１１）。搭乗者の関心度合が「中」である場合（Ｓ１１：ＹＥＳ）、処理部１１は、ステップＳ４にて抽出したキーワードから別のキーワードへの変更を行い（ステップＳ１２）、ステップＳ５へ処理を戻して別の第１コンテンツを出力する。

搭乗者の関心度合が「中」ではない、即ち「高」である場合（Ｓ１１：ＮＯ）、処理部１１の第２コンテンツ送信処理部１１ｅは、関心度合が高かった第１コンテンツの選択に寄与したキーワードを基に第２コンテンツＤＢ１２ｅを参照し、このキーワードがタグとして付された第２コンテンツを選択する（ステップＳ１３）。第２コンテンツ送信処理部１１ｅは、ステップＳ１３にて選択した第２コンテンツを車両２の車載装置３へ送信する（ステップＳ１４）。

関心判定部１１ｃは、通信部１３にて車両２の車載装置３との通信を行い、ステップＳ１４にて送信した第２コンテンツを車両２内で出力した車載装置３から、この第２コンテンツに対する搭乗者の反応に関する反応情報を取得する（ステップＳ１５）。関心判定部１１ｃは、ステップＳ１５にて取得した反応情報を基に、車両２の各搭乗者について関心度合を判定する（ステップＳ１６）。関心判定部１１ｃは、ステップＳ１６にて判定した各搭乗者の関心度合と、車両２にて出力した第２コンテンツに関する情報等とを、ユーザＤＢ１２ｃに記憶する（ステップＳ１７）。

次いで、関心判定部１１ｃは、ステップＳ１６にて判定した搭乗者の関心度合が「高」、「中」、「低」のいずれであるかを判定する。なお車両２に複数の搭乗者が存在する場合、関心判定部１１ｃは、適宜の方法で１人の搭乗者を選択し、選択した搭乗者について関心度合を判定すればよい。関心判定部１１ｃは、搭乗者の関心度合が「低」であるか否かを判定する（ステップＳ１８）。搭乗者の関心度合が「低」である場合（Ｓ１８：ＹＥＳ）、処理部１１は、コンテンツの選択に用いるキーワードを別のキーワードに変更し（ステップＳ１９）、ステップＳ５へ処理を戻して別の第１コンテンツを出力する。搭乗者の関心度合が「低」ではない場合（Ｓ１８：ＮＯ）、関心判定部１１ｃは、搭乗者の関心度合が「中」であるか否かを判定する（ステップＳ２０）。搭乗者の関心度合が「中」である場合（Ｓ２０：ＹＥＳ）、処理部１１は、コンテンツの選択に用いるキーワードを別のキーワードに変更し（ステップＳ２１）、ステップＳ１３へ処理を戻して別の第２コンテンツを出力する。

搭乗者の関心度合が「中」ではない、即ち「高」である場合（Ｓ２０：ＮＯ）、処理部１１の実行支援処理部１１ｆは、出力した第２コンテンツに関する商品又はサービス等の購入又は予約等の実行を支援する処理を行う（ステップＳ２２）。処理部１１のコンテンツ共有処理部１１ｇは、ステップＳ９及びＳ１７にてユーザＤＢ１２ｃに記憶された情報を基に、車両２の搭乗者に対して出力したコンテンツ及びその出力順序等の情報を含む生成コンテンツを生成し（ステップＳ２３）、生成コンテンツＤＢ１２ｆに記憶して、処理を終了する。

図１１及び図１２は、サーバ装置１によるキーワード変更の処理を説明するための模式図である。このキーワード変更の処理は、図９及び図１０に示したフローチャートのステップＳ１２、Ｓ１９及びＳ２１にて行われる処理である。本実施の形態に係るサーバ装置１は、キーワードとなり得る複数の単語について、関連する単語同士を紐付けた情報（以下、関連情報という）を予め記憶している。図１１及び図１２には関連情報の一部を模式的に図示している。図１１に示す例では、「キャンプ」に関連するキーワードとして「焚火」、「テント」、「キャンプ料理」及び「星空」等のキーワードが紐付けられている。同様に、「焚火」には「キャンプ」及び「焼き芋」等が紐付けられ、「焼き芋」には「焚火」、「料理」及び「秋の料理」等が紐付けられ、「料理」には「焼き芋」、「秋の料理」及び「キャンプ料理」等が紐付けられている。図１２に示す例では、「焼き芋」に関連するキーワードとして「さつま芋」、「炭火」、「焚火」、「秋の料理」及び「料理」等のキーワードが紐付けられている。同様に、「さつま芋」には「焼き芋」及び「秋野菜」等が紐付けられ、「秋の料理」には「焼き芋」及び「料理」等が紐付けられている。

本実施の形態に係るサーバ装置１は、例えばステップＳ４にて会話情報から抽出したキーワードを主キーワードとしてコンテンツ（第１コンテンツ又は第２コンテンツ）を選択する。そしてサーバ装置１は、キーワードを変更する必要が生じた場合、図１１及び図１２に示した関連情報を参照し、主キーワードに紐づけられた一又は複数のキーワードの中から適宜に１つのキーワードを選択して副キーワードとし、主キーワード及び副キーワードを新たなキーワードとしてコンテンツを選択する。サーバ装置１は、キーワードを更に変更する必要が生じた場合、副キーワードに紐付けられたキーワードを更に副キーワードとし、主キーワード及び２つの副キーワードを新たなキーワードとしてコンテンツを選択する。

例えば図１１に示す例において、サーバ装置１が会話情報から「キャンプ」をキーワードとして抽出し、これを主キーワードとしてコンテンツを選択したものとする。キーワードを変更する必要が生じた場合、サーバ装置１は、主キーワードの「キャンプ」に紐付けられた複数のキーワードの中から、例えばランダムに「焚火」を選択して副キーワードとし、「キャンプ」及び「焚火」の２つの組み合わせを新たなキーワードとしてコンテンツを選択する。更にキーワードを変更する必要が生じた場合、サーバ装置１は、前回に追加した副キーワードの「焚火」に紐付けられた複数のキーワードの中から例えば「焼き芋」を選択して副キーワードとし、「キャンプ」、「焚火」及び「焼き芋」の３つの組み合わせを新たなキーワードとしてコンテンツを選択する。

このように、本実施の形態に係るサーバ装置１は、キーワードの関連情報を基に主キーワードから開始して複数の副キーワードを追加していくことで、キーワードの変更を行う。各コンテンツには複数のタグが設定されており、サーバ装置１は、例えばキーワードが「キャンプ」のみである場合には「キャンプ」のタグが付された複数のコンテンツの中から適宜に１つのコンテンツを選択し、例えばキーワードが「キャンプ」、「焚火」及び「焼き芋」の３つの組み合わせである場合にはこれら３つのキーワードがタグとして付されたコンテンツの中から１つのコンテンツを選択する。

また、本実施の形態に係るサーバ装置１は、副キーワードを追加してキーワードを変更していく過程において搭乗者の関心度合の変化を調べ、副キーワードの追加により関心度合が閾値を超えて増加した場合に、主キーワードを変更する。サーバ装置１は、関心度合が増加した際に追加した副キーワードを新たな主キーワードとし、以前の主キーワード及び副キーワードを破棄して、新たな主キーワードを基にコンテンツの選択及びキーワードの変更を行う。

例えば図１１に示す例において、サーバ装置１が「キャンプ」を主キーワードとし、「焚火」を副キーワードとしており、更に「焼き芋」を副キーワードとして追加した際に、搭乗者の関心度合が閾値を超えて増加したものとする。この場合にサーバ装置１は、「焼き芋」を新たな主キーワードとし、「キャンプ」及び「焚火」のキーワードを破棄する。図１２には、「焼き芋」を主キーワードとした例が示されている。サーバ装置１は、「焼き芋」を主キーワードとして、例えば「さつま芋」、「秋野菜」等を副キーワードとして追加していくことで、キーワードを変更することができる。

なお本例では、サーバ装置１が１つのキーワードを基に関連するキーワードを決定する際に、元のキーワードに対して直接的に紐付けられた複数のキーワード（１つ先のキーワード）から関連するキーワードを決定しているが、これに限るものではない。サーバ装置１は、例えば元のキーワードに対して２つ先のキーワード又は３つ先のキーワード等から関連するキーワードを決定してよい。サーバ装置１が元のキーワードからどの程度の範囲までを関連するキーワードの対象とするかは、例えば車両２の搭乗者により予め設定されてもよく、また例えばこれまでの履歴に基づいて搭乗者の傾向を判断し、搭乗者の傾向に応じて変化させてもよく、また例えば搭乗者の関心度に応じて変化させてもよく、これら以外の条件で変化させてもよい。

図１３は、本実施の形態に係る車載装置３が行う処理の手順を示すフローチャートである。本実施の形態に係る車載装置３の処理部３１の搭乗者認証部３１ａは、例えばカメラ３６にて撮影した搭乗者の顔画像に基づく顔認証を行うことにより、車両２に搭乗している搭乗者が誰であるかを認証する搭乗者認証処理を行う（ステップＳ４１）。搭乗者認証部３１ａは、ステップＳ４１の処理により認証した一又は複数の搭乗者の名前又はＩＤ等の情報を含む搭乗者情報を、通信部３３の通信により、サーバ装置１へ送信する（ステップＳ４２）。

処理部３１の音声認識処理部３１ｂは、マイク３７にて車両２内の音声、例えば搭乗者の会話又はラジオの音声等を取得する（ステップＳ４３）。音声認識処理部３１ｂは、ステップＳ４３にて取得した音声に対して音声認識処理を行い（ステップＳ４４）、音声をテキスト情報に変換する。音声認識処理部３１ｂは、音声認識処理により生成したテキスト情報を車両２の会話情報としてサーバ装置１へ送信する（ステップＳ４５）。

処理部３１のコンテンツ出力部３１ｃは、サーバ装置１からコンテンツ（第１コンテンツ、第２コンテンツ又は生成コンテンツ）を受信したか否かを判定する（ステップＳ４６）。コンテンツを受信していない場合（Ｓ４６：ＮＯ）、処理部３１はステップＳ４３へ処理を戻す。コンテンツを受信した場合（Ｓ４６：ＹＥＳ）、コンテンツ出力部３１ｃは、受信した音声を出力する（ステップＳ４７）。このときにコンテンツ出力部３１ｃは、コンテンツが映像であれば表示部３４に表示し、音声であればスピーカ３８から出力することで、コンテンツを出力することができる。なおコンテンツ出力部３１ｃが出力するコンテンツは、映像又は音声に限らず、種々のコンテンツであってよい。

処理部３１の反応取得部３１ｄは、コンテンツの出力中にカメラ３６にて搭乗者の撮影を行う（ステップＳ４８）。反応取得部３１ｄは、ステップＳ４８にて撮影した搭乗者の画像を基に、例えば予め機械学習がなされた学習モデルを用いて、搭乗者の感情を推定する処理を行う（ステップＳ４９）。反応取得部３１ｄは、撮影画像に基づく感情推定の結果を反応情報としてサーバ装置１へ送信し（ステップＳ５０）、ステップＳ４３へ処理を戻す。

図１４は、本実施の形態に係る車載装置３によるコンテンツ出力の一例を示す模式図である。図示の例において車載装置３は、サーバ装置１から星空の映像をコンテンツとして受信し、受信した映像を車両２の天井部分に表示している。例えば、車両２の天井部分に車載装置３の表示部３４が設けられているか、又は、車両２の天井部分に車載装置３が映像を投影して表示することで、車載装置３による天井部分での映像出力が実現され得る。

また本実施の形態において車載装置３は、映像コンテンツを表示する際に、映像コンテンツと共にこのコンテンツが選択された理由となるキーワードを表示する。本例では、車載装置３が星空の映像のコンテンツを表示すると共に、この映像の隅に「キーワード：星空」の文字列を表示している。サーバ装置１は、車載装置３に対してコンテンツ（第１コンテンツ又は第２コンテンツ）を送信する際に、このコンテンツを選択した要因となるキーワードを車載装置３へ送信する。車載装置３は、コンテンツと共にキーワードを受信し、コンテンツを出力すると共にキーワードを出力する。このようなキーワードの出力を行うことによって、車両２の搭乗者は、車両２内で出力されたコンテンツがどのような理由で出力されているかを把握することができ、コンテンツが出力されたことに対して搭乗者が持ち得る違和感を解消することが期待できる。

なお、コンテンツの選択に複数のキーワードが関与している場合、サーバ装置１は、複数のキーワードの中のいずれか１つ（例えば主キーワード）のみを車載装置３へ送信してもよく、複数のキーワードを送信してもよい。車載装置３は、複数のキーワードの中のいずれか１つのみをコンテンツと共に出力してもよく、複数のキーワードを出力してもよい。

＜まとめ＞
以上の構成の本実施の形態に係る情報処理システムでは、車両（移動体）２の搭乗者に関する搭乗者情報及び車両２内の音声情報をサーバ装置１が取得し、取得した搭乗者情報及び音声情報を基に車両２内で出力する第１コンテンツを決定する。サーバ装置１は、第１コンテンツを車載装置３へ送信することにより車両２内で第１コンテンツを出力し、出力した第１コンテンツに対する搭乗者の反応を車載装置３から取得し、取得した反応を基に、商品又はサービスの提供に関する第２コンテンツを車載装置３へ送信して出力させる。これにより情報処理システムは、搭乗者の会話又はラジオの音声等の内容に応じた第１コンテンツを車両２内で出力することができ、搭乗者の反応に応じた第２コンテンツを出力することができるため、搭乗者に適したコンテンツを車両２内で出力することが期待できる。

また本実施の形態に係る情報処理システムでは、車両２内で出力された第２コンテンツに対する搭乗者の反応を車載装置３からサーバ装置１が取得し、取得した反応を基に第２コンテンツに係る商品又はサービスの購入、予約又は提供地に関する情報をサーバ装置１が車載装置３へ送信する。これにより情報処理システムは、商品又はサービスの提供に関する第２コンテンツに対する搭乗者の反応に応じて、適切な商品又はサービスの購入もしくは予約等の支援又は提供地の案内等を行うことが期待できる。

また本実施の形態に係る情報処理システムでは、車載装置３から取得した音声情報からサーバ装置１がキーワードを抽出し、第１コンテンツ及びキーワードタグが対応付けて記憶された第１コンテンツＤＢ１２ｄから、音声情報から抽出したキーワードに応じたキーワードタグが付された第１コンテンツを車両２内に出力する第１コンテンツと決定する。これにより情報処理システムは、車両２内の音声に基づく適切な第１コンテンツを出力することが期待できる。

また本実施の形態に係る情報処理システムでは、音声情報から抽出したキーワードと、複数のキーワードの関連を記憶した関連情報とを基に、サーバ装置１が第１コンテンツＤＢ１２ｄから第１コンテンツを選択する。これにより情報処理システムは、車両２内の音声情報から抽出したキーワードのみでなく、このキーワードに関連する別のキーワードに基づいて第１コンテンツを選択することができるため、搭乗者に適した様々な第１コンテンツを車両２内で出力することが期待できる。

また本実施の形態に係る情報処理システムでは、サーバ装置１がキーワードを基に第１コンテンツを決定して車載装置３に出力させ、第１コンテンツに対する搭乗者の反応を車載装置３から取得し、取得した反応が所定条件を満たす（例えば関心度合が高い）場合に第２コンテンツを車載装置３に出力させ、所定条件を満たさない場合にキーワード及び関連情報に基づいて決定した別のキーワードに対応付けられた別の第１コンテンツを車載装置３に出力させる。これにより情報処理システムは、キーワードを変更して第１コンテンツの選択及び出力を繰り返し、搭乗者の反応に応じて第２コンテンツを出力することが期待できる。

また本実施の形態に係る情報処理システムでは、キーワード及び関連情報に基づいて別のキーワードを決定する条件、例えば図１１及び図１２に例示した関連情報においてあるキーワードからどの程度先の関連までを別のキーワードの候補とするかの条件についての設定をサーバ装置１が車両２の搭乗者等から受け付ける。これにより情報処理システムは、搭乗者等に適した条件でキーワードを決定し、キーワードに応じたコンテンツの出力を行うことが期待できる。

また本実施の形態に係る情報処理システムでは、車両２に搭載されたスピーカ３８が出力するラジオ等の音声をテキスト化した第１の会話情報と、車両２の搭乗者の発話の音声をテキスト化した第２の会話情報とをサーバ装置１が取得し、第１の会話情報から抽出したキーワード及び第２の会話情報から抽出したキーワードが一致する場合、このキーワードに基づいて車載装置３へ送信する第１コンテンツを決定する。また両キーワードが一致しない場合、サーバ装置１は、搭乗者の第２の会話情報から抽出したキーワードに基づいて第１コンテンツを決定する。これにより情報処理システムでは、車両２の搭乗者の会話を優先して第１コンテンツの出力を行うことができ、より搭乗者に適したコンテンツの出力を行うことが期待できる。

また本実施の形態に係る情報処理システムでは、車両２に搭載されたスピーカ３８が出力するラジオ又はテレビ等の音声をテキスト化した会話情報をサーバ装置１が取得し、取得した会話情報から抽出したキーワードを基に第１コンテンツを決定して車載装置３へ送信し、車載装置３に第１コンテンツを出力させる。これにより本実施の形態に係る情報処理システムは、車両２内で出力されているラジオ等の音声に適したコンテンツを車両２内で出力することができる。

なお本実施の形態においては、車両２に搭載された車載装置３と、車両２の外部に設けられたサーバ装置１との協働により車両２内でのコンテンツの出力を実現しているが、これに限るものではなく、例えば本実施の形態においてサーバ装置１が行っている処理を車載装置３が行い、車載装置３のみでコンテンツの出力を実現してもよい。また本実施の形態においてサーバ装置１が行うと説明した処理の一部は車載装置３にて行ってもよく、車載装置３にて行うと説明した処理の一部はサーバ装置１が行ってもよい。

今回開示された実施形態はすべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は、上記した意味ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。

１ サーバ装置（情報処理装置、コンピュータ）
２ 車両
３ 車載装置（情報処理装置、コンピュータ）
１１ 処理部
１１ａ グループ判定部
１１ｂ キーワード抽出部
１１ｃ 関心判定部
１１ｄ 第１コンテンツ送信処理部
１１ｅ 第２コンテンツ送信処理部
１１ｆ 実行支援処理部
１１ｇ コンテンツ共有処理部
１２ 記憶部
１２ａ サーバプログラム（コンピュータプログラム）
１２ｂ グループテーブル
１２ｃ ユーザＤＢ
１２ｄ 第１コンテンツＤＢ
１２ｅ 第２コンテンツＤＢ
１２ｆ 生成コンテンツＤＢ
１３ 通信部
３１ 処理部
３１ａ 搭乗者認証部
３１ｂ 音声認識処理部
３１ｃ コンテンツ出力部
３１ｄ 反応取得部
３２ 記憶部
３２ａ プログラム（コンピュータプログラム）
３３ 通信部
３４ 表示部
３５ 操作部
３６ カメラ
３７ マイク
３８ スピーカ
３９ 測位部
９８，９９ 記録媒体
Ｎ ネットワーク

Claims (12)

1. 情報処理装置が、
   移動体の搭乗者に関する搭乗者情報、及び、前記移動体内の音声情報を取得し、
   取得した前記搭乗者情報及び前記音声情報を基に、前記移動体内に出力する第１コンテンツを決定し、
   決定した前記第１コンテンツを前記移動体内で出力し、
   出力した前記第１コンテンツに対する前記搭乗者の反応を取得し、
   取得した前記反応を基に、商品又はサービスの提供に関する第２コンテンツを出力する、
   情報処理方法。
2. 前記情報処理装置が、
   前記移動体内で出力された前記第２コンテンツに対する前記搭乗者の反応を取得し、
   取得した前記反応を基に、前記第２コンテンツに係る商品又はサービスの購入、予約又は提供地に関する情報を出力する、
   請求項１に記載の情報処理方法。
3. 前記情報処理装置が、
   取得した前記音声情報からキーワードを抽出し、
   前記第１コンテンツ及びキーワードタグが対応付けて記憶されたデータベースから、前記キーワードに応じたキーワードタグが対応付けられた第１コンテンツを、前記移動体内に出力する第１コンテンツと決定する、
   請求項１に記載の情報処理方法。
4. 前記情報処理装置が、
   前記キーワードと複数のキーワードタグの関連を記憶した関連情報とを基に、前記データベースから前記移動体内に出力する複数の第１コンテンツを決定する、
   請求項３に記載の情報処理方法。
5. 前記情報処理装置が、
   前記キーワードを基に第１コンテンツを決定し、
   前記第１コンテンツに対する前記搭乗者の反応を取得し、
   前記反応が所定条件を満たす場合に、前記第２コンテンツを出力し、
   前記反応が前記所定条件を満たさない場合に、前記キーワード及び前記関連情報に基づいて決定した別のキーワードに対応付けられた別の第１コンテンツを出力する、
   請求項４に記載の情報処理方法。
6. 前記情報処理装置が、前記キーワード及び前記関連情報に基づいて別のキーワードを決定する条件に関する設定を受け付ける、
   請求項５に記載の情報処理方法。
7. 前記情報処理装置が、
   前記移動体に搭載された音声出力装置が出力する音声に係る第１の音声情報、及び、前記移動体に搭乗する搭乗者の発話に係る第２の音声情報を取得し、
   前記第１の音声情報から抽出したキーワード及び前記第２の音声情報から抽出したキーワードが一致する場合、当該キーワードに基づいて前記第１コンテンツを決定し、
   前記第１の音声情報から抽出したキーワード及び前記第２の音声情報から抽出したキーワードが一致しない場合、前記第２の音声情報から抽出したキーワードに基づいて前記第１コンテンツを決定する、
   請求項３に記載の情報処理方法。
8. 前記情報処理装置が、
   前記第１コンテンツに対する前記搭乗者の反応が所定条件を満たす場合に、前記第２コンテンツを出力し、
   前記反応が前記所定条件を満たさない場合に、更に取得した前記音声情報を基に決定した別の第１コンテンツを出力する、
   請求項１に記載の情報処理方法。
9. 前記情報処理装置が、
   前記移動体に搭乗する複数の搭乗者について反応をそれぞれ取得し、
   取得した一又は複数の搭乗者の反応に基づいて、前記第１コンテンツ及び第２コンテンツを出力する、
   請求項８に記載の情報処理方法。
10. 前記情報処理装置が、
    取得した各搭乗者の反応又は各搭乗者の搭乗者情報に基づいて、前記複数の搭乗者の中から対象者を選択し、
    選択した前記対象者の発話に係る音声情報又は前記対象者の反応に基づいて、前記第１コンテンツ及び第２コンテンツを出力する、
    請求項９に記載の情報処理方法。
11. 前記情報処理装置が、
    前記移動体内に出力した前記第１コンテンツ及び前記第２コンテンツの履歴情報を記憶し、
    記憶した前記履歴情報に基づいて、前記移動体とは異なる別の移動体内に前記第１コンテンツ及び第２コンテンツを出力する、
    請求項１に記載の情報処理方法。
12. コンピュータに、
    移動体の搭乗者に関する搭乗者情報、及び、前記移動体内の音声情報を取得し、
    取得した前記搭乗者情報及び前記音声情報を基に、前記移動体内に出力する第１コンテンツを決定し、
    決定した前記第１コンテンツを前記移動体内で出力し、
    出力した前記第１コンテンツに対する前記搭乗者の反応を取得し、
    取得した前記反応を基に、商品又はサービスの提供に関する第２コンテンツを出力する
    処理を実行させる、コンピュータプログラム。

Images