JP7234930B2 - 情報処理装置、情報処理方法及び情報処理システム - Google Patents

Description

本開示は、情報処理装置、情報処理方法及び情報処理システムに関する。

催し物に参加した出席者を撮影してその結果を解析し、催し物に対する評価を行う装置が提案されている（例えば、下記特許文献１を参照のこと）。

特開２００４－２７２５２９号公報

このような分野では、催し物が行われている最中に出席者を撮影等する必要があるが、出席者の撮影等が勝手に行われてしまうことは個人情報の保護の観点から望ましくない。

そこで、本開示は、所定の提示情報に対するユーザの反応を示す反応情報を、当該ユーザが許諾した場合に利用する情報処理装置等を提供することを目的の一つとする。

本開示は、例えば、
提示情報に対するユーザの反応を示す反応情報を取得する反応情報取得部と、
反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成する反応情報利用部と、
を有し、
反応情報取得部は、センサ部から出力されるセンサ情報に基づき反応情報を推定する反応情報推定部を有する
情報処理装置である。

本開示は、例えば、
反応情報取得部が、提示情報に対するユーザの反応を示す反応情報を取得し、
反応情報利用部が、反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成し、
反応情報推定部が、センサ部から出力されるセンサ情報に基づき反応情報を推定する
情報処理方法である。

本開示は、例えば、
提示情報に対するユーザの反応を示す反応情報を取得する反応情報取得部と、
反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成する反応情報利用部と、
を有し、
反応情報取得部は、センサ部から出力されるセンサ情報に基づき反応情報を推定する反応情報推定部を有する
情報処理システムである。

本開示の少なくとも実施形態によれば、ユーザが許諾した場合に当該ユーザの反応情報が利用される情報処理装置等を提供することができる。なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれの効果であっても良い。また、例示された効果により本開示の内容が限定して解釈されるものではない。

図１は、一実施形態に係る情報処理システムの構成例を示すブロック図である。 図２は、一実施形態に係る情報処理システムにおける処理の流れを示すフローチャートである。 図３は、一実施形態に係る予約処理の流れを示すフローチャートである。 図４は、一実施形態に係る予約処理における画面の例を示す図である。 図５は、一実施形態に係る予約処理における画面の例を示す図である。 図６は、一実施形態に係る予約処理における画面の例を示す図である。 図７は、一実施形態に係る予約処理における画面の例を示す図である。 図８は、一実施形態に係る予約処理における画面の例を示す図である。 図９は、一実施形態に係る予約処理における画面の例を示す図である。 図１０Ａ及び図１０Ｂは、一実施形態に係るカメラモジュールの配置例を説明するための図である。 図１１は、一実施形態に係るカメラモジュールの他の配置例を説明するための図である。 図１２Ａ及び図１２Ｂは、一実施形態に係るカメラモジュールの設定例を説明するための図である。 図１３は、一実施形態に係る生体センサの配置例を説明するための図である。 図１４Ａ～図１４Ｃは、一実施形態に係る感情推定部による感情推定方法の複数の例を説明するための図である。 図１５は、感情情報の一例を示す図である。 図１６は、映画の視聴後に行われる処理の流れを示すフローチャートである。 図１７は、一実施形態に係るサービス情報を生成する処理を説明するための図である。 図１８Ａ～図１８Ｃは、サービス情報の複数の例を説明するための図である。 図１９は、サービス情報の他の例を説明するための図である。 図２０Ａ及び図２０Ｂは、サービス情報の他の例を説明するための図である。 図２１は、変形例を説明するための図である。

以下、本開示の実施形態等について図面を参照しながら説明する。なお、説明は以下の順序で行う。
＜１．一実施形態＞
１．情報処理システム
１－１．用語に関する説明
１－２．システムの構成例
１－３．予約端末の構成例
１－４．サーバの構成例
１－５．反応情報取得装置の構成例
１－６．情報処理システムにおける処理の概要
２．予約処理
２－１．予約処理の流れ
２－２．予約処理における画面例
３．映画視聴時における感情情報の取得
３－１．センサ部の配置例
３－２．感情推定部の動作
４．サービス情報の生成
４－１．映画視聴後の処理の流れ
４－２．サービス情報生成部の動作例
４－３．サービス情報の具体例
５．反応情報の利用の許諾がない場合の処理
＜２．変形例＞
なお、以下に説明する実施形態等は本開示の好適な具体例であり、本開示の内容がこれらの実施形態等に限定されるものではない。

＜１．一実施形態＞
［１．情報処理システム］
（１－１．用語に関する説明）
始めに、本実施形態で使用される主な用語について説明する。
「提示情報」とは、ユーザに提示され、ユーザにより視聴、鑑賞、観戦等される情報をいう。本実施形態では、提示情報としてコンテンツより具体的には映画を例にして説明する。
「センサ情報」とは、カメラモジュールや生体センサ等のセンサ装置によって得られる情報（データ）をいう。
「反応情報」とは、提示情報に対するユーザの反応を示す情報をいい、具体的には、センサ情報を解析することにより得られる情報をいう。本実施形態では、反応情報として感情に対応する情報を用いている。したがって、「反応情報」を「感情情報」と称する場合もある。但し、「反応情報」は、感情だけでなく反応の有無やユーザの状態変化を含み、「感情情報」より広い概念である。
「許諾情報」とは、「反応情報」の利用に関する許諾の有無を示す情報をいう。
「サービス情報」とは、「反応情報」の利用を許諾したユーザに提示される情報をいう。

（１－２．システムの構成例）
図１は、本実施形態に係る情報処理システム（情報処理システム１００）の構成例を示している。情報処理システム１００は、例えば、予約端末１と、情報処理装置の一例であるサーバ２と、反応情報取得装置３とを有している。例えば、予約端末１及びサーバ２により予約システムが構成されている。

（１－３．予約端末の構成例）
続いて、各装置の概略的な構成例について説明する。始めに、予約端末１の構成例について説明する。予約端末１は、公共の場や店舗に設置される端末であっても良いし、ユーザＵが有するパーソナルコンピュータやスマートフォン、タブレットコンピュータ等であっても良い。本実施形態では、予約端末１が、ユーザＵが有するスマートフォンを例にして説明する。

表示装置の一例である予約端末１は、例えば、表示制御部の一例である予約端末制御部１１と、表示部１２と、通信部１３とを有している。予約端末制御部１１は、例えばＣＰＵ（Central Processing Unit）により構成されており、予約端末１の各部を制御する。表示部１２は、ＬＣＤ(Liquid Crystal Display)や有機ＥＬ(Electro Luminescence)パネル等により構成されている。本実施形態に係る表示部１２は、表示部１２に対する操作入力を受付可能なタッチスクリーンとして構成されている。通信部１３は、インターネット等を介してサーバ２等と通信を行うものである。なお、予約端末１が、上述した構成の他に公知の構成を有していても良い。

（１－４．サーバの構成例）
サーバ２は、例えば、サーバ制御部２１と、予約情報管理部２２と、反応情報利用部の一例であるサービス情報生成部２３と、通信部２４とを有している。サーバ制御部２１は、例えばＣＰＵにより構成されており、サーバ２の各部を制御する。

予約情報管理部２２は、予約端末１に入力された情報に基づく予約情報を管理する記憶部等である。予約情報管理部２２は、例えば、ユーザＵのＩＤと、ユーザＵの属性情報と、当該ユーザＵが予約した座席を示す座席情報と、許諾情報とを対応付けて管理する。ユーザＵの属性情報とは、ユーザＵの属性を示す情報であり、例えば、当該ユーザＵの性別、国籍、居住地域、人種、年齢等である。なお、ユーザＵの属性情報は、座席の予約時に入力されたものでも良いし、予約前に予め登録されたものでも良い。

本実施形態に係る反応情報は、映画に対する当該ユーザＵの反応を示す情報であり、より具体的には、映画の鑑賞時におけるユーザＵの感情である。感情は、喜怒哀楽などの他、眠気、共感、リラックス、興奮、集中などの精神状態を含む概念である。感情は、センサ情報として直接検出されるものに限らず、当該センサ情報に基づき推定されるものであっても良い。例えば、複数の感情をマッピングしたモデルとして、ラッセルの感情円環モデルが知られている。ラッセルの感情円環モデルでは、快状態と覚醒状態の２つの指標に基づき、多様な感情を推定している。このような感情推定モデルに従って感情が区分されても良い。

サービス情報生成部２３は、反応情報の利用を許諾したユーザＵに提供されるサービス情報を生成する。サービス情報は、ユーザＵの反応情報に基づいて生成される。サービス情報の詳細については後述する。反応情報の利用を許諾したユーザＵは、例えば映画の視聴中や視聴後にサービス情報を得ることができる。通信部２４は、インターネット等を介して予約端末１や反応情報取得装置３等と通信を行うものである。

（１－５．反応情報取得装置の構成例）
反応情報取得装置３は、制御部３１と、センサ部３２と、感情推定部３３と、通信部３４とを有している。例えば、センサ部３２と感情推定部３３とにより反応情報推定部が構成される。制御部３１は、例えばＣＰＵにより構成されており、反応情報取得装置３の各部を制御する。センサ部３２は、例えば映画の視聴時におけるユーザＵの状態（反応）を計測するセンサである。本実施形態に係るセンサ部３２は、例えば、カメラモジュール３２Ａと、生体センサ３２Ｂとを有しているが、カメラモジュール３２Ａのみに基づく構成や、生体センサ３２Ｂのみに基づく構成であっても良い。カメラモジュール３２Ａは、映画を鑑賞するユーザＵを撮影する装置であり、レンズ３２１と、ＣＣＤ（Charge Coupled Device）、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）等からなるイメージセンサ３２２と、画像処理部３２３と、カメラモジュール３２Ａ全体を制御するカメラ制御部３２４とを含む構成を有している。生体センサ３２Ｂは、ユーザＵの生体情報を測定するセンサである。ユーザＵの生体情報としては、ユーザＵの体温、心拍、脈拍、血圧、発汗、脳波、体の動き等が挙げられる。

感情推定部３３は、センサ部３２により測定されたセンサ情報に基づいて、ユーザＵの感情を推定（解析）する。通信部３４は、インターネット等を介してサーバ２等と通信を行うものである。

（１－６．情報処理システムにおける処理の概要）
情報処理システム１００で行われる処理について、図２に示すフローチャートを参照して概略的に説明する。ステップＳＴ１では、ユーザが予約端末１を利用して映画の予約を行う予約処理が行われる。ユーザＵは、視聴対象の映画を指定すると共に視聴位置である座席を指定する。ユーザＵは、さらに、反応情報の利用を許諾するか否かを示す許諾情報の入力を行う。反応情報の利用とは、例えば、反応情報が新規顧客の開拓や映画の嗜好傾向の把握、映画の関連商品販売等のマーケティング情報として利用されることをいう。予約端末１を介して入力された予約情報が、通信によりサーバ２に送信される。サーバ２は、予約端末１から送信された予約情報を管理する。そして、処理がステップＳＴ２に進む。

ステップＳＴ２では、ユーザＵが予約した映画を映画館で視聴する。映画の視聴時におけるユーザＵの反応が映画館に設置された反応情報取得装置３によって推定される。そして、推定結果が反応情報取得装置３からサーバ２に送信される。そして、処理がステップＳＴ３に進む。

ステップＳＴ３では、ユーザＵが反応情報の利用を許諾したか否かが判断される。この判断処理において、ユーザＵが反応情報の利用を許諾していない場合には、処理が終了する。一方、ユーザＵが反応情報の利用を許諾している場合には、処理がステップＳＴ４に進む。

ステップＳＴ４では、サーバ２が座席情報及び許諾情報を参照し、反応情報の利用を許諾したユーザＵに対するサービス情報を生成する。このサービス情報がユーザＵに提示される。そして、処理が終了する。

［２．予約処理］
（２－１．予約処理の流れ）
次に、各処理の具体的な内容について説明する。図３は、本実施形態に係る予約処理の流れを示すフローチャートである。ステップＳＴ１１では、予約端末１の表示部１２にログイン画面が表示される。そして、処理がステップＳＴ１２に進む。ステップＳＴ１２では、映画及び上映時間の指定がなされる。そして、処理がステップＳＴ１３に進む。ステップＳＴ１３では、座席の選択がなされる。そして、処理がステップＳＴ１４に進む。ステップＳＴ１４では、反応情報の利用を許諾することにより想定されるユーザへの影響が表示され、特にユーザが得られる利点（メリット）が表示される。そして、処理がステップＳＴ１５に進む。ステップＳＴ１５では、許諾の有無が確認される。そして、処理がステップＳＴ１６に進む。ステップＳＴ１６では、映画の予約が完了する。

（２－２．予約処理における画面例）
各処理の具体例について説明する。ここでは、予約処理における画面例について説明する。以下に説明する画面例は、予約端末制御部１１の制御に応じて表示部１２に表示される。

ユーザＵは、予約端末１を使用して専用サイトまたは特定のアプリケーションを利用して予約ページに接続する。図４は、ステップＳＴ１１において予約端末１の表示部１２に表示されるログイン画面４１の一例を示している。ログイン画面４１では、例えば、会員用の入力項目４１Ａと、非会員用の入力項目４１Ｂとが表示される。会員用の入力項目４１Ａは、会員番号を入力するための表示４１０Ａと、パスワードを入力するための表示４１０Ｂとを含む。なお、本実施形態では、会員の場合には予め当該会員の属性情報が登録されており、会員でログインした場合には、非会員に要求される属性情報の入力を省略することができる。ユーザＵは、ログイン画面４１に必要な入力をした後、「次へ」との表示４１０Ｃを選択する。

ログイン画面４１において非会員すなわちログインしないで購入が選択された場合には、例えば、図５に示す購入者情報入力画面４２が表示される。図５に例示する購入者情報入力画面４２では、映画の購入に必要な情報を入力するための名前、電話番号、メールアドレス等の連絡先、支払い方法等を入力するための欄が表示される。さらに、購入者情報入力画面４２では、ユーザＵの属性情報（例えば、性別や年齢）を入力するための欄が表示される。

図６は、ステップＳＴ１２における映画を指定するための映画選択画面４３の一例を示している。映画選択画面４３では、例えば、映画館名（例えば、東京映画館ＡＢ）、映画名（映画ＡＡＡ）、上映日（５月１日（月））、複数の上映開始時間、上映時間、予約可能の有無等を含む情報が表示される。映画選択画面４３を使用してユーザＵは予約可能な映画を選択する。

図７は、ステップＳＴ１３における座席選択の処理の際に表示部１２に表示される座席選択画面４４の一例を示している。座席選択画面４４では、例えば、座席の配置、予約可能な空席の位置及び選択済の座席等を含む座席表示４４Ａが表示される。ユーザＵは、座席表示４４Ａを参照して希望する座席を選択し予約する。なお、ログインしたユーザＵによって、より具体的には当該ユーザＵに対応する１のアカウントに対応して複数の座席が予約されても良い。複数の座席が予約された場合には、当該座席を利用する複数のユーザＵ間に所定の関係が存在するものと推定されても良い。例えば、１のアカウントで２座席が予約された場合には、それぞれの座席を利用するユーザＵは、恋人、夫婦または友人であると推定され、１のアカウントで３座席以上が予約された場合には、それぞれの座席を利用するユーザＵは、家族または友人であると推定されても良い。なお、１のアカウントで２以上の座席を予約する場合には、アカウントを有するユーザＵだけでなく、当該予約に関する他のユーザＵの属性情報の入力を求めることもできる。

図８は、ステップＳＴ１３の処理の際に表示部１２に表示される画面の一例（画面４５）を示している。画面４５では、サービス情報として、映画の視聴後に性格診断、具体的には、視聴タイプ診断、視聴中感情マップ、相性チェック等が提供できる旨の表示４５Ａが表示される。表示４５Ａの中から所望のサービス情報をユーザＵが選択する。なお、相性チェックは、１アカウントで複数の座席が予約された場合に選択可能とされても良い。

画面４５では、サービス情報を生成するために、映画の視聴時にユーザＵの感情推定が行われることにより感情情報が取得され、感情情報がマーケティング情報に活用され得る旨の表示４５Ｂが表示される。より具体的に、ユーザＵが撮影されたり、生体情報の測定がなされたりすることが表示されても良い。また、画面４５では、目的外使用を行わない旨の説明や、統計処理によりユーザＵとは紐づかない形での情報利用がされる旨の説明等の免責事項に関する表示や、ユーザＵの同意がない場合には、感情推定が行われず、サービス情報が提示されない旨の表示を含む表示４５Ｃが表示される。

ユーザＵの中には、映画の視聴時に撮影されたり、生体情報を取得されることに心理的な抵抗感を感じるユーザＵも存在し得る。そこで、ユーザＵに対して、サービス情報の提示に加え、感情情報の利用の許諾を促す表示（インセンティブに関する表示）が表示されることが好ましい。本実施形態に係る画面４５では、例えば、感情情報の利用を許諾した場合に、サービス情報の提示の他に１００のポイントが付加される表示４５Ｄが表示される。

もちろん、映画の視聴時における感情推定は、ユーザＵに強制されるものではない。サービス情報の提示を希望しない場合には、同意しない旨の表示４５Ｅに含まれるチェックボックスをチェックすれば良い。また、この他に、サービス情報の提示に関するサービスを受ける場合にも、ユーザＵ個人を具体的に特定する個人情報を取らない旨が表示されても良い。

また、サービス情報に関する画面４５は、図９に示すように、映画に関するクイズ等の試遊画面でも良い。図９に示す画面例４６では、映画の中で一番盛り上がるシーンを予測するクイズが表示される。クイズの答えは、映画の視聴中における複数のユーザＵの感情情報に基づいて決定され、その結果が感情情報の利用を許諾したユーザＵに対して、映画の視聴後にフィードバックされる。図８や図９に示す画面例は、時系列に又は同時に表示されても良い。また、映画に関するクイズではなく、映画に対する事前の期待の入力を促す内容等が表示されても良い。映画視聴前に試遊画面を設けることで、ユーザＵに対して感情情報の利用の許諾を促す効果を期待できるとともに、映画視聴中の感情推定に基づく反応を映画視聴後に提示するにあたり、視聴前の期待値との比較等を提示でき、よりユーザＵの興味を引くことができる。さらに、視聴前の期待や予測等と、実際の感情推定の結果との比較情報は、前述のマーケティングの観点でも有用な情報となる。

予約端末１を使用して入力された予約情報が、通信部１３から送信される。そして予約情報がサーバ２の通信部２４により受信され、サーバ２の予約情報管理部２２により管理される。

［３．映画視聴時における感情情報の取得］
（３－１．センサ部の配置例）
予約処理の後に、ユーザＵは実際に映画を視聴する。図１０Ａ及び図１０Ｂは、センサ部３２のカメラモジュール３２Ａの配置例を示している。カメラモジュール３２Ａは、映画館における所定の劇場５１内に配置される。例えば、図１０Ａに示すように、カメラモジュール３２Ａは、劇場５１の前方（スクリーン側）から観客席５２側に向けて配置される。図１０Ｂに示すように、観客席５２を複数のエリア（例えば、２エリア）に分担して、エリア毎にカメラモジュール３２Ａが配置されていても良い。これによりカメラモジュール１台の撮影対象となるユーザ毎の解像度を担保することができる。また、複数台のカメラモジュール３２Ａが異なる角度から共通するエリアを撮影するようにしても良い。これによりユーザに動きがあった場合でも、正確に表情等の認識を行うことができる。１エリアについて複数のカメラモジュール３２Ａがアレイ状に近接して配置されたものが使用されても良い。カメラモジュール３２Ａにより得られた画像に基づいて、撮影範囲に存在するユーザＵが撮影され、ユーザＵの顔認識等がなされる。

カメラモジュール３２Ａは、図１１に示すように座席毎に設けられても良い。図１１では、全座席のうちの座席５２Ａ及びその前方の座席５２Ｂが示されている。一般に、映画館の座席は、後方側の座席５２Ａの高さが高くなるように設けられている。座席５２Ｂの背もたれ付近にカメラモジュール３２Ａが設けられ、当該カメラモジュール３２Ａにより座席５２ＡのユーザＵが撮影されるようにしても良い。なお、カメラモジュール３２Ａは座席毎に複数台設けられていても良い。カメラモジュール３２Ａを座席毎に設けることで、より正確にユーザの表情等を検出することができる。

カメラモジュール３２Ａの設定値は、固定でも良いし、映画の進行に同期して可変とされても良い。カメラモジュール３２Ａの設定値を可変とする場合の一例として、例えば、図１２に示すようにして、映画の明度に応じて設定値を変更することができる。設定値としては、例えばダイナミックレンジを挙げられる。図１２Ａは、映画の進行に伴って変化する明度を模式的に示した図であり、横軸は時間を示し縦軸は明度を示している。図１２Ｂは、図１２Ａに時間的に対応する図であり、明度の変化に伴って変更されるダイナミックレンジを示している。例えば、明度が閾値ＴＨを上回った場合にカメラ制御部３２４の制御に応じてダイナミックレンジを拡大する処理が行われる。これにより、映画のシーンによって明度が変化しても、正確にユーザＵの表情等を検出できる。なお、カメラモジュール３２Ａは、センサ等によりリアルタイムに明度の変化を検出しても良いし、撮影画像に基づいて明度の変化を検出しても良いし、映画のテスト再生等の機会で予め測定され、記憶された明度の変化を読み出すようにしても良い。

設定値は、ダイナミックレンジに限定されることはなく、イメージセンサ３２２の感度、イメージセンサ３２２のフレームレート、シャッタースピード、解像度、又はこれらの組み合わせ等でも良い。明度以外の変化としては、例えばユーザの動きが考えられ、ユーザの動きが検出された場合に、設定値としてシャッタースピードを変化させることができる。また、映画の再生中、カメラモジュール３２Ａが常に撮影を行う必要は無く、設定された期間のみ撮影を行うようにしても良い。また、撮影はカラーではなく単色でも良いし、赤外線を検出するものであっても良い。

生体センサ３２Ｂは、ユーザＵの体温、心拍、脈拍、血圧、発汗、脳波、体の動き等を検出するものである。図１３に示すように、生体センサ３２Ｂは、例えば、映画館で貸与される３Ｄ用の眼鏡５３Ａに内蔵されている。生体センサ３２Ｂに搭載されるセンサとしては、例えば体温、脈拍、発汗、脳波、体動等の検出が好適である。生体センサ３２Ｂは、座席５３Ｂに内蔵されたものであり、例えば圧力センサ、体温センサ、脈波センサ、心拍センサ、脳波センサ、及びこれらを組み合わせたものであっても良い。また、生体センサ３２Ｂは、反応情報の利用を許諾したユーザＵに対して貸与される機器であっても良い。図１１に示したカメラモジュール３２Ａのように、生体センサ３２Ｂは、前方の座席に設けられたもの（例えば、サーモグラフィや、電波の反射を利用したセンサ）であっても良い。また、近年、ユーザＵが有するリストバンドやスマートフォン等の機器、シャツ等の衣服の中にはユーザＵの生体情報を測定する機能を有するものがある。反応情報取得装置３がそのような機器からユーザＵの生体情報を近距離無線通信等により取得するようにしても良い。ユーザが常用している他の感情推定サービスのログが使用されても良い。この場合、ユーザＵに対して、ユーザＵが有する機器と反応情報取得装置３との接続を促す指示を提示しても良いし、ユーザＵが有する機器と、反応情報取得装置３を構成する座席等との近接に応じて近距離無線通信を確立し、近距離無線通信を介してユーザＵの生体情報を自動的に取得するようにしても良い。

（３－２．感情推定部の動作）
カメラモジュール３２Ａ及び生体センサ３２Ｂにより得られたセンサ情報が感情推定部３３に供給される。感情推定部３３は、センサ情報に基づいてユーザの感情を推定する。センサ情報に基づいて感情を推定する方法は、公知の方法を適用することができる。例えば、感情推定部３３は、センサ情報に含まれる、撮影されたユーザの顔の特徴点や姿勢から当該ユーザＵの感情を推定する。より具体的には、感情推定部３３は、センサ情報に基づく顔認識と、認識された顔の表情解析を行い、その結果から、感情推定に必要な要素値を求める。例えば笑顔の程度を示す笑顔度を求め、その絶対値をある感情（例えば「喜び」）の程度と推定することや、笑顔度が所定の閾値を超えた場合に、ユーザがある「喜び」の状態にあると判定してもよい。あるいは、複数の要素感情の割合や、複数の要素感情における支配的な要素感情を特定することによって、最終的な感情を推定してもよい。あるいは、要素感情によらず、機械学習等を用いて認識された顔の表情から直接任意の感情を推定してもよい。ここで感情を推定する際に、センサ情報に含まれる生体情報を参照することにより、より的確に感情を推定することができる。あるいは、カメラモジュール３２Ａによる撮影を行わず、生体センサ３２Ｂの情報のみに基づいて感情推定を行うこともできる。

図１４Ａ～図１４Ｃは、感情推定部３３による感情推定の結果の例を示している。例えば、図１４Ａに示すように、ある感情（例えば、驚き）に対応する推定値の変化が感情推定の結果とされる。なお、図１４Ａ～図１４Ｃでは驚きを例に説明するが、同様にして、他の感情の変化も推定される。感情推定の結果は所定のフレームレート毎に、リアルタイムに推定することができ、例えば図１４Ａに示すような曲線として、その感情の度合いの強さが導出される。感情推定の結果の提示方法は、感情の度合いの変化に限定されることはない。例えば、図１４Ｂに示すように、驚きの感情に対応する推定値が、基準値ＳＴＡ（図１４Ａ参照）を上回った期間について、驚きの状態にあると提示されても良い。このように提示することで、驚きの状態にあるか否かの２値で感情推定結果を参照することができる。また、図１４Ｃに示すように、シーン毎に驚きの感情に対応する推定値の平均値が感情推定の結果とされても良い。このように提示することで、シーン毎にユーザＵの感情を評価することができる。このとき、図１４Ａに示す基準値ＳＴＡは、シーン毎に異なるようにしても良い。

ある感情に対応する推定値は、映画のあるシーンに対する全ユーザの平均に対する相対値であってもよい。比較対象となる平均値は、例えば、映画において一般的に特定の感情を想起しやすくなるとされる特定シーン（基準シーン）に対応して得られる値である。基準シーンは推定対象となる感情毎にそれぞれ設けられていても良い。例えば、「喜び」については、多くのユーザＵが喜びの感情を抱きやすいと判断された所定のシーンを基準シーンとし、「悲しみ」については、多くのユーザＵが悲しみの感情を抱きやすいと判断された所定のシーンを基準シーンとすることができる。また、ある感情に対応する推定値は、シーン毎ではなく単位時間内における平均値や単位時間内における変動値でも良い。

なお、ユーザＵの姿勢、格好等によっては、センサ情報に基づく感情推定が適切に行えない場合もあり得る。例えば、カメラモジュール３２ＡによりユーザＵの顔が撮影される場合に、帽子やサングラス等によりユーザの顔が隠れている場合には、感情推定部３３による感情推定を適切に行うことができない。このような場合には、感情推定ができなかったことを示すメタデータが、対応するシーンに対応付けて記憶される。あるいは、感情推定の精度を示すメタデータが記憶されていてもよい。

感情推定部３３による感情推定の結果、感情情報が得られる。図１５は、感情情報の例の一部を示している。感情情報は、例えば、映画（コンテンツの種別）、シーン、座席情報、所定の感情に対応する推定値が対応付けられたデータである。図１５に示す具体例では、映画を特定する情報としてＡＡ３が記述され、シーン番号１，２，３が記述され、座席情報として００３５が記述され、驚きの感情に対応する推定値（例えば、８２．２）が記述され、悲しみの感情に対応する推定値（例えば、２０．５）が記述されている。感情推定部３３は、感情情報を通信部３４に供給する。通信部３４は、供給された感情情報をサーバ２に供給する。

なお、時系列に得られた反応情報が、シーンとは異なるタイムスタンプに対応付けられても良い。また、時系列に得られた反応情報が、映画の時間情報ではなく、他のメタデータ（例えばチャプタや、映画制作者の制作意図情報）に対応付けられても良い。

［４．サービス情報の生成］
（４－１．映画視聴後の処理の流れ）
図１６は、ユーザＵが映画を視聴した後に行われる処理の流れを示すフローチャートである。ステップＳＴ２１では映画の視聴が終了する。ユーザＵの映画の視聴時におけるセンサ情報に基づいて感情情報が推定され、感情情報がサーバ２に送信される。感情情報を送信する際に、セキュリティを確保するためにランダムデータを重畳しても良い（差分プライバシー等と称される場合もある。）。そして、処理がステップＳＴ２２に進む。

ステップＳＴ２２では、サーバ２のサービス情報生成部２３が感情情報に基づいてサービス情報を生成する。そして、処理がステップＳＴ２３に進む。ステップＳＴ２３は、生成されたサービス情報が配信される。例えば、生成されたサービス情報が予約端末１に配信される。予約端末１への配信は、例えば、予約端末１に対するサービス情報に関する案内をメールにより送信し、当該案内に記載されたネットワーク上のアドレスにユーザＵがアクセスすることによりなされる。映画視聴後に、ユーザが映画館に設置された端末に予約端末１をかざすことにより予約端末１の表示部１２にサービス情報が表示されるようにしても良いし、特定のアプリケーションを利用してサービス情報の配信が行われても良い。また、電子的な媒体に限定されることはなく、紙に印刷されたサービス情報がユーザＵに提供されるようにしても良い。

（４－２．サービス情報生成部の動作例）
映画視聴後における処理について具体的に説明する。反応情報取得装置３からサーバ２に対して感情情報が送信され、当該感情情報がサーバ２の通信部２４により受信される。感情情報が通信部２４からサービス情報生成部２３に供給される。

図１７は、反応情報取得装置３から送信された感情情報の一例と予約情報管理部２２で管理される予約情報の一例とを示している。感情情報については図１５に例示したものと同様であるので、重複した説明を省略する。予約情報は、例えば、ユーザＵによって予約された座席を示す座席情報と、当該座席を予約したユーザＵの属性と、許諾情報と、連絡先とが対応付けられた情報である。許諾情報は、例えば、論理的な値である「１」、「０」のフラグであり、本実施形態では「１」を反応情報の利用に関する許諾が「有」とし「０」を反応情報の利用に関する許諾が「無」としている。連絡先は、例えば、予約端末１のメールアドレスであるが、他の装置のメールアドレス等でも良い。また、座席情報等に対して予約処理の際に使用されたユーザＵのアカウント情報が対応付けられていても良い。

例えば、予約された座席の座席情報００３５には、ユーザＵの属性として「２０代未満」、「男性」が対応付けられ、許諾情報として「１」が対応付けられ、所定のメールアドレスが対応付けられている。例えば、予約された座席の座席情報００３６には、ユーザＵの属性として「３０代」、「女性」が対応付けられ、許諾情報として「０」が対応付けられ、所定のメールアドレスが対応付けられている。

サービス情報生成部２３は、予約情報を参照して、感情情報の中から許諾有りに対応する座席情報を抽出する。そして、例えば同一の座席情報に対応する感情情報と、予約情報に記述されたユーザＵの属性とを用いて、マーケティング情報を生成する。マーケティング情報は、例えば、どのような属性のユーザＵがどのような映画のどのシーンで如何なる感情を示していたかを示す情報である。このようなマーケティング情報により、映画制作者が、どの地域や属性に対してどのような映画やシーンが受け入れられ易いか認識することができるので、マーケティング情報を次の映画の制作に反映させることができる。特に、本実施形態では、一般に公開された映画について感情情報を推定し、且つ、感情情報の利用を許諾することによりメリットが得られるようにしているので、多くの感情情報を利用できる可能性が大きく、有意なマーケティング情報を簡単に得ることができる。なお、一般に公開された映画ではなく、試写会等の限られた環境において、本実施形態のサービスを提供することでも、ユーザの映画に対する嗜好を感情情報と併せて取得できるという効果が得られる。ここでマーケティング情報には、後述するサービス情報に相当する情報を含めることもできる。

（４－３．サービス情報の具体例）
本実施形態では、感情情報の利用を許諾することによりメリットとしてユーザに対してサービス情報を提供するようにしている。サービス情報生成部２３は、予約情報を参照して、感情情報の中から許諾有りに対応する座席情報を抽出し、当該座席情報に対応する感情情報を利用してサービス情報を生成する。サービス情報は、例えば、反応情報に基づくユーザＵの特性である。サービス情報の具体的な例について図１８Ａ～図１８Ｃを参照して説明する。

図１８Ａに示すサービス情報は、映画の時系列に対して、感情Ａ、感情Ｂ及び感情Ｃの変化、より具体的には各感情の推定値の変化を示すグラフを対応付けたものである。なお、感情Ａ～感情Ｃは、喜び、驚き等、何でも良い。映画の時系列は、時間情報によって示しても良いが、ユーザＵにとってわかりやすくするため、本例では、代表的なシーン（シーン１～４）をサムネイル画像（縮小画像）ＩＭ１～ＩＭ４により表示している。なお、グラフは、線の変化でなく色の強弱の変化で示すヒートマップ表示等と称されるものでも良い。また、グラフは図１４Ｂまたは図１４Ｃのように、ある基準値を超えた場合に所定の感情が抱かれたと提示したり、シーン毎に提示したりしても良い。このような提示を行うことで、ユーザＵは映画の時系列やシーンに結び付けて、自身の感情の変化を振り返ることができる。

図１８Ｂに例示するサービス情報は図１８Ａに示すサービス情報と略同様のものであるが、感情の変化を示すグラフでなく、感情に対応するアイコン（例えば、顔の表情を示すアイコン）を用いている。

サービス情報は、感情が高揚したシーンをランキング形式で表示したものであっても良い。例えば、図１８Ｃに例示するように、驚きの感情に対応する推定値が高かった上位３個のシーンと、楽しさの感情に対応する推定値が高かった上位３個のシーンとがサービス情報として提示される。各シーンは、サムネイル画像ＩＭ５～ＩＭ１０によってそれぞれ示される。

図１８に示した例は、あるユーザＵに関する感情情報のみに基づく絶対的な特性であったが、提示情報は、他のユーザＵの感情情報における自身の感情情報の位置付けのように相対的な特性であっても良い。例えば、図１９に例示すような感情マップであっても良い。図１９の感情マップでは、一例として６個の感情（怒り、驚き、悲しみ、興奮、不快、楽しい）が規定されており、当該感情マップに、映画の視聴時にユーザＵが感じた各感情の程度がグラフ６１によりマッピングされている。また、感情マップには、他のユーザＵが感じた各感情の程度の平均がグラフ６２によりマッピングされている。この感情マップを見ることで、あるユーザＵは、他のユーザＵの映画に対する感じ方の違いを認識することができる。比較対象のデータは、ユーザＵと同じ属性を有するユーザの感情情報でも良いし、全体の感情情報であっても良く、その両方であっても良い。また、サービス情報は、感情マップに限定されることなく、ユーザＵが顕著に反応したシーンと他のユーザＵが顕著に反応したシーンとを対比的に示したものでも良い。なお、図１８や図１９に例示したサービス情報が併せて表示されても良い。なお、こうした他のユーザとの比較は、図１８Ａ乃至Ｃの提示方法において行われても良い。

図１８及び図１９に示すサービス情報に付加的な情報が含まれても良い。このような付加的な情報としては、感情情報に基づくおすすめの映画の提示が挙げられる。ここでおすすめの映画は、映画と感情情報とを対照し、そのような感情を抱くユーザが好むと推定されるカテゴリから選択することができる。例えば、映画の視聴中に怒りを多く感じたユーザＵについて、同様の感情を抱くユーザがアクション映画を好む傾向にある場合には、ユーザＵに対してもアクション映画をおすすめの映画として提示する。同様に、悲しみを多く感じたユーザＵには恋愛映画をおすすめ映画として提示することができる。付加的な情報は、性格診断の結果として提示されても良い。例えば、悲しみを多く感じたユーザＵに対しては「情に厚い」との性格診断結果が、付加的な情報として提示されても良い。また、感情の変化があまり無いユーザＵに対しては「冷静である」との性格診断結果が、付加的な情報として提示されても良い。

サービス情報に対するフィードバックが可能とされても良い。例えば、図２０Ａに示すように、感情情報に基づいてユーザＵが最も驚いたシーンに対応するサムネイル画像ＩＭ１１がサービス情報として表示部１２に表示される。表示されたシーンが、本当にユーザＵが最も驚いたシーンであるかを選択する表示７１がサムネイル画像ＩＭ１１に近接する箇所に表示される。ユーザＵは、サービス情報により示される結果が自身の主観的認知と合っているか否を例えば予約端末１を用いて選択する。選択結果がフィードバック情報として予約端末１からサーバ２に対して送信される。なお、この選択はユーザＵに強制されるものではなく選択されなくても良い。サーバ２に対して送信されたフィードバック情報は、対応する感情情報に対応付けられる。フィードバック情報が得られた場合には、感情情報がフィードバック情報により補正されるようにしても良い。また、フィードバック情報は、対応するユーザＵや、当該ユーザＵと同じ属性を有するユーザＵの感情情報を予測するための学習モデルの改善などの処理に活用されても良い。

上述したように、あるユーザＵが有する１個のアカウントで、例えば２座席が予約された場合には、恋人同士や夫婦で映画を視聴する可能性が高い。このような場合には、２座席のそれぞれを利用するユーザＵに関連する情報をサービス情報として提示しても良い。図２０Ａ及び図２０Ｂは、そのようなサービス情報の一例を示している。例えば、２座席のそれぞれについて感情情報が推定され、各座席におけるユーザＵの感情の傾向が同じ若しくは近似したシーンが共感したシーンとしてサムネイル画像ＩＭ１２～ＩＭ１４により表示される。また、各ユーザＵが別々に反応した（ある感情を強く抱いた）シーンがサムネイル画像ＩＭ１５及びＩＭ１６によりそれぞれ示される。さらに、相性の良さに関する表示７２が表示される。例えば、共感したシーンの数が多いほど相性の良さの高くなる確率（％）が表示される。

なお、２人のユーザＵは恋人や夫婦ではなく、友人や親子の場合もあり得る。そこで、グループの関係性（夫婦、恋人、友人、親子等）を併せて表示して、実際に該当する関係性をユーザが選択できるようにしても良い。選択結果に応じて異なるアルゴリズムにより相性の診断が行われても良い。この他にも、お互いのユーザＵが共感できると考えられる映画や、お互いを理解するために好ましいと考えられる映画を感情情報に基づいて抽出し、その結果をサービス情報として提示しても良い。

予約処理時に、映画に関する事前の予想クイズが行われた場合には、それに対する回答がサービス情報として提示されても良い。

以上説明したように、ユーザＵは、感情情報の利用を許諾することによりサービス情報の提示を受けることができる。サービス情報の提供を受けることによりユーザＵは映画の視聴時における自己の感情の変化を振り返ることが可能となる。また、ユーザＵは、映画に対する自身が抱いた感情の特徴や、相手との相性等、サービス情報に応じた様々な情報を得ることができる。このように、取得する感情情報について、これらに代表されるサービス情報としてユーザに提供することで、ユーザに対して感情情報の利用を許諾することの動機付けを与えることができ、より多くのユーザに対して、感情情報の利用の許諾を促すことができる。もちろん、ユーザはサービス情報を欲しない場合には、予約処理において感情情報の利用を許諾しなければ良い。

［５．反応情報の利用の許諾がない場合の処理］
ここで、反応情報の利用の許諾がない場合に行われる処理について説明する。反応情報の利用の許諾がない場合には、対応するデータは破棄される。例えば、サーバ２のサービス情報生成部２３は、予約情報を参照して許諾情報が「０」に対応する座席情報を読み出し、当該座席情報に対応する感情情報のデータを破棄する（消去する）。また、サーバ２は、許諾情報「１」が紐付けられた座席情報に対応する感情情報のデータのみを利用するようにしても良い。また、サーバ２は、許諾された情報のみを使用するようにしても良い。

予約情報がサーバ２から反応情報取得装置３に供給されても良い。そして、感情推定部３３が、予約情報を参照し、許諾情報が「１」の座席情報に対応して設けられたセンサ部３２から供給されるセンサ情報のみに対して感情推定を行いその結果を出力しても良い。また、予約情報がセンサ部３２に供給されても良い。そして、センサ部３２が、自身が設けられた座席に対応する許諾情報が「１」の場合のみに、センサ情報を感情推定部３３に出力するようにしても良い。反応情報取得装置３において許諾情報の内容を判断することにより、センサ部３２や感情推定部３３における処理の負荷を低減することができる。

なお、反応情報をユーザの属性とは結び付けずに、他のデータに混ぜて保存する、換言すれば、個人情報としてはわからない形で（無意味化して）保存しても良い（個人情報非連結化）。あるいは、得られた情報について統計化処理することでも、個人情報とは結びつかない形でのデータ利用を行うことができる。このように、許諾しなかったユーザに関する反応情報を必ずしも破棄する必要はない。このとき、反応情報の利用を許諾したユーザに関しては属性情報と連結しての情報利用を行い、許諾をしなかったユーザに関しては上述のように個人情報とは紐づかない形での情報利用を行うなど、許諾したユーザと許諾しなかったユーザとの反応情報との間の取り扱いに差を設けてもよい。

＜２．変形例＞
以上、本開示の一実施形態について具体的に説明したが、本開示の内容は上述した一実施形態に限定されるものではなく、本開示の技術的思想に基づく各種の変形が可能である。

上述した一実施形態では、提示情報の一例として映画を例にしたが、これに限定されるものではない。例えば、提示情報は、演劇、寄席、ライブパフォーマンス、スポーツ観戦、映画の本編再生前の宣伝、美術品の展示会等でも良い。特に、美術品の展示会等に対しても本技術を提供することができ、美術家は、鑑賞者がどの作品にどのような感情を抱いたのかを知ることができる。この場合、例えば、鑑賞チケットの購入時に許諾情報の入力がなされる。

また、本開示は、映画等のコンテンツ提示型イベントではなく、参加型イベントに対しても適用することができる。参加型イベントしては、競馬、競輪の観戦やテーマパークのアトラクションを挙げることができる。例えば、観客の反応情報に基づいて、図２１に示すようなスタジアムにおける反応情報の分布を作成する。例えば、ハッチング８１が付された箇所の観客は気分が高揚し、反対にハッチング８２が付された箇所の観客の気分は落ち着いたことが示される。このように、応援チームや応援する対象（競馬なら馬）、観客の属性毎に反応情報が可視化される。これにより、例えば、年齢が１０代の観客は盛り上がっているが３０代の観客は冷静でいる状態を可視化することができる。反応情報を使用して、これまでの観客の興奮の時間的変化や、客席における反応情報のヒートマップが作成されても良い。可視化された反応情報は、スタジアムにおけるスクリーンに表示されたり、反応情報の利用を許諾したユーザが有する携帯端末にリアルタイムに配信されたりする。これにより、ユーザＵは、スタジアムやテーマパークにおける盛り上がり状況を認識することができる。

上述した一実施形態における情報処理システム１００における各機能は、任意の装置が担うことができる。例えば、サーバ２が感情推定部３３を有するようにし、サーバ２において感情情報が推定されるようにしても良い。この場合、センサ情報のみが反応情報取得装置３からサーバ２に送信される。通信における帯域を低減するために、センサ情報のうち特徴的なデータ（例えば、顔認識における特徴点等）のみが送信されるようにしても良い。

また、サービス情報生成部２３を反応情報取得装置３が有する構成でも良い。そして反応情報取得装置３がサービス情報を生成し、生成したサービス情報を予約端末１に送信しても良い。さらに、サーバ２の全ての機能を反応情報取得装置３が有する構成でも良く、情報処理システム１００が予約端末１及び反応情報取得装置３からなる構成でも良い。このように構成を適宜変更することにより、反応情報取得装置３が情報処理装置として機能する場合もあり得る。

ＢＤ（Blu-ray Disc）（登録商標）、ＤＶＤ(Digital Versatile Disc)等を再生する再生機器には、本編を短縮して再生するダイジェスト再生と称される機能を有するものがある。ディスク制作者は、利用が許諾された反応情報を使用してダイジェスト再生する箇所や本編における区切り（チャプタ）を決定してディスクを制作しても良い。例えば、多くのユーザが驚いた箇所、興奮した箇所、感動した箇所を中心にダイジェスト再生が行われるようにディスクが作成されても良い。反応情報の利用を許諾したユーザが、自身の反応情報を反映させたディスクを作成できるようにしても良い。ディスクに限らず、ネットワークを経由して配信されるコンテンツの再生において反応情報が反映されても良い。

上述した一実施形態におけるカメラモジュール３２Ａは、映画館に備え付けられるものでなく、ユーザＵが有するスマートフォン、携帯電話、タブレットコンピュータ等の撮像装置でも良い。このような撮像装置を、例えば前方の席に設けられた支持器具に装着することによりユーザＵの撮影が行われるようにしても良い。撮像装置により撮影された画像が通信により感情推定部３３に供給される。なお、そのような支持器具に撮像装置が装着されたことをもって、反応情報の利用が許諾されたものと判断されても良い。

感情推定部３３は、驚きや感動等の特定の感情をターゲットとし、ターゲットである感情の有無を判定しても良い。映画のシーン毎にターゲットとする感情を変更しても良いし、提示情報の内容に応じてターゲットとする感情を変更しても良い。

サービス情報が表示に代えて、若しくは、表示と共に音声により提示されても良い。

本開示は、複数の装置からなるシステム、当該システムを構成する装置として実現することも可能である他、方法、プログラム等により実現することもできる。

本開示は、以下の構成も採ることができる。
（１）
提示情報に対するユーザの反応を示す反応情報を、当該反応情報の利用が許諾されている場合に利用する反応情報利用部を有する
情報処理装置。
（２）
前記反応情報を取得する反応情報取得部を有する（１）に記載の情報処理装置。
（３）
前記反応情報取得部は、センサ部と、前記センサ部から出力されるセンサ情報に基づいて、前記反応情報を推定する反応情報推定部とを有する（２）に記載の情報処理装置。
（４）
前記センサ部は、所定範囲に存在するユーザを監視し、当該ユーザが前記反応情報の利用を許諾している場合に、当該ユーザに関する前記センサ情報を前記反応情報推定部に出力する（３）に記載の情報処理装置。
（５）
前記反応情報推定部は、所定範囲に存在する全ユーザのセンサ情報を使用してユーザ毎の前記反応情報を推定し、前記許諾したユーザの前記反応情報のみを出力する（３）又は（４）に記載の情報処理装置。
（６）
前記反応情報利用部は、前記反応情報の利用を許諾したユーザに対してのみ提示されるサービス情報を生成する（１）から（５）までの何れかに記載の情報処理装置。
（７）
前記サービス情報は、前記ユーザの反応情報に基づく特性である（６）に記載の情報処理装置。
（８）
前記サービス情報は、前記ユーザの反応情報に基づく特性及び他のユーザの反応情報に対する相対的な特性の少なくとも一方である（６）に記載の情報処理装置。
（９）
前記許諾の有無を示す許諾情報が、前記ユーザが予約した座席情報に対応付けられている（１）から（８）までの何れかに記載の情報処理装置。
（１０）
所定のユーザに対応する前記座席情報が複数存在し、且つ、前記許諾情報が許諾有りを示す場合には、前記反応情報利用部は、前記座席情報に位置する複数のユーザの前記反応情報を利用して、当該ユーザ間に関連する情報を生成する（９）に記載の情報処理装置。
（１１）
前記反応情報は、前記ユーザの感情に対応する情報である（１）から（１０）までの何れかに記載の情報処理装置。
（１２）
前記提示情報は、前記ユーザが視聴するコンテンツ、前記ユーザが観戦するスポーツ及び前記ユーザが鑑賞する芸術の何れかである（１）から（１１）までの何れかに記載の情報処理装置。
（１３）
反応情報利用部が、提示情報に対するユーザの反応を示す反応情報を、当該反応情報の利用が許諾されている場合に利用する
情報処理方法。
（１４）
提示情報に対するユーザの反応を示す反応情報を取得する反応情報取得部と、
前記反応情報の利用が許諾されている場合に前記反応情報を利用する反応情報利用部を有する
情報処理システム。
（１５）
前記反応情報取得部は、センサ部と、前記センサ部から出力されるセンサ情報に基づいて、反応情報を推定する反応情報推定部とを有する（１４）に記載の情報処理システム。
（１６）
座席情報により示される座席を予約するための一連の予約処理において、所定の提示情報を鑑賞する際の座席情報と、前記提示情報を鑑賞する際のユーザの反応を示す反応情報の利用を許諾するか否かの入力画面と、前記許諾を促すための情報とを表示部に表示する制御を行う表示制御部を有する
表示装置。
（１７）
（１６）に記載の表示装置と、前記表示装置に接続される情報処理装置とを有し、
前記情報処理装置は、前記表示装置から出力される前記許諾の有無を示す許諾情報と、予約された前記座席情報とを対応付けて管理する予約情報管理部を有する
予約システム。

１・・・予約端末、２・・・サーバ、３・・・反応情報取得装置、１１・・・予約端末制御部、１２・・・通信部、２２・・・予約情報管理部、２３・・・サービス情報生成部、３２・・・センサ部、３３・・・感情推定部

Claims (12)

1. 提示情報に対するユーザの反応を示す反応情報を取得する反応情報取得部と、
   前記反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成する反応情報利用部と、
   を有し、
   前記反応情報取得部は、センサ部から出力されるセンサ情報に基づき前記反応情報を推定する反応情報推定部を有する
   情報処理装置。
2. 前記センサ部は、所定範囲に存在するユーザを監視し、当該ユーザが前記反応情報の利用を許諾している場合に、当該ユーザに関する前記センサ情報を前記反応情報推定部に出力する請求項１に記載の情報処理装置。
3. 前記反応情報推定部は、所定範囲に存在する全ユーザのセンサ情報を使用してユーザ毎の前記反応情報を推定し、前記許諾したユーザの前記反応情報のみを出力する請求項１に記載の情報処理装置。
4. 前記反応情報利用部は、前記二次情報として、前記反応情報の利用を許諾したユーザに対してのみ提示されるサービス情報を生成する請求項１に記載の情報処理装置。
5. 前記サービス情報は、前記ユーザの反応情報に基づく特性である請求項４に記載の情報処理装置。
6. 前記サービス情報は、前記ユーザの反応情報に基づく特性及び他のユーザの反応情報に対する相対的な特性の少なくとも一方である請求項４に記載の情報処理装置。
7. 前記許諾の有無を示す許諾情報が、前記ユーザが予約した座席情報に対応付けられている請求項１に記載の情報処理装置。
8. 所定のユーザに対応する前記座席情報が複数存在し、且つ、前記許諾情報が許諾有りを示す場合には、前記反応情報利用部は、前記座席情報に位置する複数のユーザの前記反応情報を利用して、当該ユーザ間に関連する情報を生成する請求項７に記載の情報処理装置。
9. 前記反応情報は、前記ユーザの感情に対応する情報である請求項１に記載の情報処理装置。
10. 前記提示情報は、前記ユーザが視聴するコンテンツ、前記ユーザが観戦するスポーツ及び前記ユーザが鑑賞する芸術の何れかである請求項１に記載の情報処理装置。
11. 反応情報取得部が、提示情報に対するユーザの反応を示す反応情報を取得し、
    反応情報利用部が、前記反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成し、
    反応情報推定部が、センサ部から出力されるセンサ情報に基づき前記反応情報を推定する
    情報処理方法。
12. 提示情報に対するユーザの反応を示す反応情報を取得する反応情報取得部と、
    前記反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成する反応情報利用部と、
    を有し、
    前記反応情報取得部は、センサ部から出力されるセンサ情報に基づき前記反応情報を推定する反応情報推定部を有する
    情報処理システム。

Images