JP7095593B2 - 興味推定システム - Google Patents

Description

本開示は、興味推定システムに関する。

人が着座するシートにおいて、着席者の姿勢に対応して座面の高さを調整可能なシートが知られている（特許文献１参照）。

特開２０１８－０９５０６２号公報

上記公報のシートは、着席者の利便性を高める機能を有しているが、シートが配置されている空間に提供されるコンテンツと連動して、着席者にサービスを提供する機能は備えていない。

本開示の一局面は、シートが配置された空間に提供されるコンテンツに対する着席者の興味を推定することで、着席者の興味の向上を図る興味推定システムを提供することを目的としている。

本開示の一態様は、コンテンツが提供される空間に配置されたシート本体（２）と、シート本体（２）に配置された少なくとも１つの加速度センサ（３Ａ，３Ｂ，３Ｃ）と、少なくとも１つの加速度センサ（３Ａ，３Ｂ，３Ｃ）の出力に基づいて、シート本体（２）に着座した着席者のコンテンツに対する興味を推定する処理装置（４）と、を備える、興味推定システム（１）である。

このような構成によれば、着席者の動きをセンサ出力に基づいた特徴量に変換することで、現在のコンテンツに対する着席者の興味を推定できる。その結果、着席者により興味のあるコンテンツを提供すること等によって、着席者の興味を向上できる。

また、本開示では、解析精度に左右される言語情報（つまり、着席者の発言内容）を用いずに興味を推定できる。さらに、本開示では、シート本体（２）が配置された空間の明るさ、騒音等の環境にセンサ出力が影響されない。そのため、興味の推定精度が高められる。

本開示の一態様では、処理装置（４）は、着席者のコンテンツに対する興味の推定結果に基づいて、コンテンツの内容を制御してもよい。このような構成によれば、個々の着席者に最適化されたコンテンツへの変更が適時可能となる。

本開示の一態様では、処理装置（４）は、着席者のコンテンツに対する興味の推定結果をデータとして記録してもよい。このような構成によれば、例えば、脈拍、顔の表情等の個人が特定される生体情報を含まない状態で、個人の興味を推定したデータを別のサービスに提供することができる。

なお、上記各括弧内の符号は、後述する実施形態に記載の具体的構成等との対応関係を
示す一例であり、本開示は上記括弧内の符号に示された具体的構成等に限定されるものではない。

図１は、実施形態における興味推定システムを示す模式的な構成図である。 図２Ａは、図１の推定部が実行する推定処理を概略的に示すフロー図であり、図２Ｂは、興味スコア算出処理を概略的に示すフロー図である。 図３は、図１の興味推定システムが搭載された移動体の模式図である。 図４は、図１の推定部が実行する処理におけるロジックの一例を示すブロック図である。

以下、本開示が適用された実施形態について、図面を用いて説明する。
［１．第１実施形態］
［１－１．構成］
図１に示す興味推定システム１は、例えば、スタジアム、映画館、劇場、コンサートホール、ライブハウス等の施設、又は、自動車、鉄道車両、船舶、航空機等の移動体に設置される。

興味推定システム１は、シート本体２と、複数の加速度センサ３Ａ，３Ｂ，３Ｃと、処理装置４とを備える。

＜シート本体＞
シート本体２は、施設又は移動体において、コンテンツが提供される空間に配置される。「コンテンツ」には、スポーツ、ボードゲーム、ビデオゲーム等の観戦イベント、演劇、演奏等の鑑賞イベント、実写又は仮想の映像、音楽などが含まれる。

特に、興味推定システム１は、着席者の行動によって内容が変化する双方向性のあるコンテンツに効果的に適用できる。このような双方向性のコンテンツの例として、仮想現実（ＶＲ：Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間又は拡張現実（ＡＲ：Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）空間と、仮想現実空間又は拡張現実空間に配置される仮想人物のキャラクタとを含むコンテンツが挙げられる。

シート本体２は、シートクッション２１と、シートバック２２とを有する。シートクッション２１は、着席者の臀部等を支持するための部位である。シートバック２２は、着席者の背部を支持するための部位である。

シートクッション２１には、後述する第１クッション用加速度センサ３Ａと、第２クッション用加速度センサ３Ｂとが配置されている。シートバック２２には、後述するバック用加速度センサ３Ｃが配置されている。

＜加速度センサ＞
第１クッション用加速度センサ３Ａ、第２クッション用加速度センサ３Ｂ、及びバック用加速度センサ３Ｃは、それぞれ、３軸加速度センサであり、３次元の加速度データを出力可能に構成されている。

第１クッション用加速度センサ３Ａ、第２クッション用加速度センサ３Ｂ、及びバック用加速度センサ３Ｃは、必要に応じて、３軸の角速度（つまり、ロール角速度、ピッチ角速度、及びヨー角速度）の検出機能を有してもよい。さらに、第１クッション用加速度センサ３Ａ、第２クッション用加速度センサ３Ｂ、及びバック用加速度センサ３Ｃは、加速
度と角速度とを同時に検出できるとよい。

ただし、後述する処理装置４において、角速度を入力データとして用いることなく興味の推定が実現される場合は、センサのコストと消費電力とを低減する観点から、各加速度センサは加速度のみの検出機能を有することが好ましい。

第１クッション用加速度センサ３Ａ及び第２クッション用加速度センサ３Ｂは、シートクッション２１の幅方向に互いに離間して、つまり左右方向に並んでシートクッション２１の内部に埋められている。

具体的には、第１クッション用加速度センサ３Ａは、シートクッション２１の幅方向中心よりも右側に配置されている。第２クッション用加速度センサ３Ｂは、シートクッション２１の幅方向中心よりも左側に配置されている。

第１クッション用加速度センサ３Ａ及び第２クッション用加速度センサ３Ｂは、それぞれ、着席者のヒップポイント（つまり大腿骨の最外部）と重なるように配置されている。また、第１クッション用加速度センサ３Ａと第２クッション用加速度センサ３Ｂとの左右方向の距離は、例えば１００ｍｍ以上１５０ｍｍ以下である。

バック用加速度センサ３Ｃは、シートバック２２の内部に埋められている。バック用加速度センサ３Ｃは、シートバック２２の幅方向中央に配置されている。バック用加速度センサ３Ｃの高さは、例えばヒップポイントに１５０ｍｍ以上４００ｍｍ以下の高さを加えたものである。

なお、興味推定システム１は、シート本体２に着席した着席者の姿勢を認識する３次元カメラを備えてもよい。３次元カメラと加速度センサとを組み合わせることで、興味推定のための着席者の動作をより明確に把握することができる。

＜処理装置＞
処理装置４は、シート本体２に着座している着席者に提供されている現在のコンテンツに対する、着席者の興味を推定する装置である。

処理装置４は、推定部４１と、記憶部４２と、制御部４３とを有する。処理装置４は、例えばマイクロプロセッサと、ＲＡＭ、ＲＯＭ等の記憶媒体と、入出力部とを備えるマイクロコンピュータにより構成される。処理装置４は、シート本体２に装着又は内蔵されてもよいし、シート本体２とは離間して配置されてもよい。

（推定部）
推定部４１は、各加速度センサの出力を取得し、取得した出力に対する積分、平均等の演算に基づいて、少なくとも１つの特徴量を算出する。

推定部４１が算出する特徴量の内容と、特徴量の算出に使用する入力データとして使用する出力と、特徴量の算出方法との組み合わせの一例を表１及び表２に示す。表１中の「シートバックの加速度」及び「シートバックの角速度」は、バック用加速度センサ３Ｃの出力であり、「シートクッションの加速度」及び「シートクッションの角速度」は、第１クッション用加速度センサ３Ａ及び第２クッション用加速度センサ３Ｂの出力である。

推定部４１は、特徴量ごとに予め設定された閾値を用いて、着席者の興味を推定する。具体的には、推定部４１は、１つの特徴量がその特徴量に対して設定された閾値を超えたか判定し、閾値を超えた場合に着席者のコンテンツへの興味度を表す興味スコアに一定の得点を付加する。

例えば、仮想現実空間内でキャラクタが着席者の隣に配置されるコンテンツの供給時に、加速度センサの出力に基づいて算出された特徴量Ｔｉｍｅが一定値より大きくなった場合、着席者のコンテンツ（つまりキャラクタ）に対する反応が大きいとして、興味スコアに一定の正の点数を付加する。

さらに、別の特徴量Ｃｅｎｔｒｏｉｄの左右方向成分が一定値より大きくなった（つまりキャラクタに一定量近づいた）場合、又は特徴量Ｍｏｖｉｎｇ ｄｉｒの前後方向成分が一定値より大きくなった場合、キャラクタへの興味が大きいとして、興味スコアに一定の正の点数を付加する。

特徴量が閾値を超えた場合に付加される点数は、閾値と同様、特徴量ごとに個別に設定される。また、推定部４１は、特徴量が閾値以下の場合、興味スコアに負の点数を付加してもよい。

推定部４１は、このようにして求めた興味スコアの大小によって、興味スコア算出時に供給されていたコンテンツへの興味（つまり、関心度又は没入度）の大きさを推定する。つまり、興味スコアが大きければ、そのコンテンツへの興味が高いと推定し、興味スコアが低ければ、そのコンテンツへの興味が低いと推定する。

なお、表１に示す特徴量は一例である。そのため、推定部４１は、表１に示す特徴量を全て算出する必要はない。また、推定部４１は、表１に示されない特徴量（ただし、加速度センサの出力に基づいて算出されるものに限られる）を用いて、着席者の興味を推定してもよい。

推定部４１は、複数の興味スコアを同時に算出し、複数の興味スコアの大小を比較することで、着席者の興味を推定してもよい。例えば、複数の要素が組み合わされたコンテンツが供給された場合に、コンテンツが含む要素ごとの興味スコアを算出することで、着席者がどの要素に最も興味があるか推定できる。

推定部４１は、算出した興味スコアをコンテンツに対する興味の推定結果として、記憶部４２及び制御部４３に出力する。

（記憶部）
記憶部４２は、推定部４１による着席者のコンテンツに対する興味の推定結果（つまり興味スコア）をデータとして記録する。

記憶部４２が記憶したデータは、記録媒体への書き込み、通信回路によるサーバへの送信、紙への印刷等の手段によって出力される。出力されたデータは、着席者により適したサービスを提供するための参照情報、不特定多数の着席者の興味の傾向を解析するためのビッグデータ等として使用することができる。

また、記憶部４２が記憶したデータは、制御部４３からも参照される。制御部４３は、記憶部４２のデータを直接参照することで、過去の興味推定結果に基づいて、後述するようにコンテンツの内容を制御する。

（制御部）
制御部４３は、推定部４１による着席者のコンテンツに対する興味の推定結果（つまり興味スコア）に基づいて、コンテンツの内容を制御する。

例えば、現在のコンテンツの興味スコアが低い場合は、制御部４３は、現在のコンテンツに替えて、異なるコンテンツの提供を開始する。また、制御部４３は、着席者に現在のコンテンツへの興味を持たせるための新たなイベントの追加又はストーリーの変化（例えば、キャラクタの性格の変更）を実施してもよい。さらに、制御部４３は、視覚以外の知覚で認識される刺激（例えば、音、におい、風、振動等）を着席者に提供してもよい。したがって、制御部４３は、このような刺激を出力するハードウェアを有してもよい。

また、現在のコンテンツの興味スコアが高い場合は、制御部４３は、着席者の興味を促進させ、コンテンツへの没入度が向上するように、イベントの追加、ストーリーの変化、刺激の提供等を行う。

また、制御部４３は、記憶部４２に記憶された過去の興味スコアを現在の興味スコアと組み合わせて着席者の嗜好を判断し、現在提供されているコンテンツの内容を制御してもよい。

＜推定部の処理＞
以下、図２Ａのフロー図を参照しつつ、推定部４１が実行する推定処理の一例について説明する。

本処理では、推定部４１は、最初に、少なくとも１つの加速度センサの出力を取得する（ステップＳ１０）。次に、推定部４１は、センサ出力に基づいて、図２Ｂの興味スコア算出処理を実行する（ステップＳ２０）。なお、推定部４１は、興味判定に使用する特徴量ごとに興味スコア算出処理を実行する。つまり、興味スコア算出処理は、使用する特徴量の種類の数だけ繰り返される。

興味スコア算出処理では、推定部４１は、特徴量が閾値以下であるか否か判定する（ステップＳ２１０）。特徴量が閾値以下の場合（Ｓ２１０：ＹＥＳ）、推定部４１は、興味スコアを変化させずに興味スコア算出処理を終了する。一方、特徴量が閾値を超える場合（Ｓ２１０：ＮＯ）、推定部４１は、興味スコアに一定の点数を加算し（ステップＳ２２０）、興味スコア算出処理を終了する。

興味スコア算出後、推定部４１は、興味スコアが閾値以下であるか否か判定する（ステップＳ３０）。興味スコアが閾値以下の場合（Ｓ３０：ＹＥＳ）、推定部４１は、コンテンツを切り替えるように制御部４３に指示する（ステップＳ４０）。なお、上述のように、推定部４１は、コンテンツを切り替える代わりに、興味を高めるためのイベントの追加、ストーリーの変化、刺激の提供等を制御部４３に指示してもよい。

一方、興味スコアが閾値を超える場合（Ｓ３０：ＮＯ）、推定部４１は、コンテンツを維持する（ステップＳ５０）。このとき、推定部４１は、イベントの追加、ストーリーの変化、刺激の提供等を制御部４３に指示してもよい。

また、推定部４１は、興味スコア算出処理を複数の興味スコアに対して行い、ステップＳ３０において算出した複数の興味スコアの比較を行ってもよい。また、ステップＳ３０において、推定部４１は、興味スコアに対応するテーブル又は関数を用いて、コンテンツの分岐を行ってもよい。

＜移動体＞
以下では、図３に示す移動体１０に興味推定システム１が設置され、仮想現実空間と仮想人物であるキャラクタＶとを含むコンテンツが着席者（つまりユーザー）Ｕに提供される例を説明する。

移動体１０は、興味推定システム１のシート本体２が配置された内部空間１０Ａを有すると共に、電力等の動力を用いて地上を自走可能な装置である。ただし、内部空間１０Ａを有する移動体１０は地上を走行するものに限定されない。

移動体１０の内部空間１０Ａは、興味推定システム１を利用する着席者Ｕが滞在する客室を構成する。移動体１０の内部空間１０Ａは、１つの地点に固定されない移動可能な空間（つまりモビリティ空間）である。

移動体１０は、自動運転機能を有し、予め定められたルートに沿った自動走行が可能で
ある。移動体１０は、内部空間１０Ａと移動体１０の外部とを仕切る少なくとも１つの窓を備えており、移動体１０の内部空間１０Ａに搭乗した着席者Ｕは、窓を介して移動体１０の外側の景観を視認できる。ただし、移動体１０は必ずしも自動運転機能を有しなくてもよい。

移動体１０の内部空間１０Ａには、シート本体２及び後述するキャラクタＶが着席するキャラクタ用シート１１以外に、図示されていない、机、照明、空調設備、ディスプレイ、運転制御機器（例えば、タッチパネル等の入力デバイス）等の設備が配置される。

興味推定システム１の処理装置４は、移動体１０の内部に配置される。また、コンテンツは、表示部１２に表示される。本実施形態では、表示部１２は、着席者Ｕが装着したウェアラブルデバイスによって構成されている。

表示部１２を構成するウェアラブルデバイスとしては、例えば、着席者Ｕの頭部に装着されるヘッドマウントディスプレイが使用できる。ヘッドマウントディスプレイは、着席者Ｕの眼を覆うディスプレイと、ジャイロセンサ、加速度センサ等のヘッドトラッキング用のセンサとを有する。

表示部１２としてヘッドマウントディスプレイを用いることで、着席者Ｕの位置及び姿勢を計測できるほか、拡張現実空間への着席者Ｕの没入度を高めることができる。ただし、表示部１２として用いられるウェアラブルデバイスは、ヘッドマウントディスプレイに限定されない。

また、表示部１２は、ウェアラブルデバイスに限定されない。例えば、内部空間１０Ａに配置された平面ディスプレイを表示部１２として用いてもよい。また、内部空間１０Ａを構成する窓にディスプレイ機能を持たせて表示部１２として使用してもよい。

処理装置４は、図示しない撮像部によって撮影した内部空間１０Ａの画像に基づいて、実空間に基づいた拡張現実空間を形成する。また、処理装置４は、予め記憶したキャラクタＶの情報と、キャラクタＶを動かすプログラムとに基づいて、拡張現実空間とこの拡張現実空間に配置されるキャラクタＶとを含む提供画像をリアルタイムに形成する。

処理装置４が形成した提供画像は、リアルタイムに表示部１２に送信される。例えば、移動体１０から見える景観の変化、内部空間１０Ａの照明の変化等は、即時提供画像に反映される。その結果、着席者Ｕは、表示部１２を介して、これらの変化を拡張現実空間においてリアルタイムで認識することができる。

次に、図４を用いて推定部４１による着席者Ｕの興味推定の具体例を説明する。
図４のブロック図は、着席者ＵがキャラクタＶと移動体１０を用いてデートを行うコンテンツにおけるロジックを想定したものである。

このロジックでは、推定部４１は、まず、内部空間１０Ａで提供されるコンテンツに対する着席者Ｕの没入度を判定する。着席者Ｕの没入度は、例えば、コンテンツの内容とユーザーの動作との連動性によって行うことができる。例えば、キャラクタＶが着席者Ｕに言葉を投げかけた際に、着席者Ｕが一定の動作をした場合、没入度が高い（つまり関心がある）と判定できる。

着席者Ｕの没入度が低い場合は、推定部４１は、着席者Ｕがコンテンツに対し無関心なユーザータイプであると判定し、ドライブコンテンツへの興味を持つように状態誘導の強いドライブコンテンツの提供を制御部４３に指示する。

一方、着席者Ｕの没入度が高い場合は、推定部４１は、シート本体２に取り付けられた加速度センサの出力に基づいて、第１興味スコアと、第２興味スコアとを算出する。第１興味スコアは、ドライブに関する興味の度合いを示し、第２興味スコアは、キャラクタＶに関する興味の度合いを示す。

推定部４１は、第１興味スコアと第２興味スコアとを比較する。ここで、２つの興味スコアが共に予め定めた基準値以下の場合は、推定部４１は、着席者Ｕがコンテンツに対し無関心なユーザータイプであると判定し、上述のように、状態誘導の強いドライブコンテンツの提供を制御部４３に指示する。

第１興味スコアが第２興味スコアよりも高い場合は、推定部４１は、着席者ＵがキャラクタＶよりもドライブに関心があるユーザータイプであると判定し、例えばキャラクタＶがガイドとして振る舞う状態誘導の低いドライブコンテンツの提供を制御部４３に指示する。

第２興味スコアが第１興味スコアよりも高い場合は、推定部４１は、着席者ＵがドライブよりもキャラクタＶに関心があるユーザータイプであると判定し、例えばキャラクタＶが恋人として振る舞う状態誘導の低いデートコンテンツの提供を制御部４３に指示する。

［１－２．効果］
以上詳述した実施形態によれば、以下の効果が得られる。
（１ａ）着席者の動きをセンサ出力に基づいた特徴量に変換することで、現在のコンテンツに対する着席者の興味を推定できる。その結果、着席者により興味のあるコンテンツを提供すること等によって、着席者の興味を向上できる。

（１ｂ）解析精度に左右される言語情報（つまり、着席者の発言内容）を用いずに興味を推定できる。さらに、シート本体２が配置された空間の明るさ、騒音等の環境にセンサ出力が影響されない。そのため、興味の推定精度が高められる。

（１ｃ）着席者のコンテンツに対する興味の推定結果に基づいて、制御部４３によってコンテンツの内容を制御することで、個々の着席者に最適化されたコンテンツへの変更が適時可能となる。

（１ｄ）着席者のコンテンツに対する興味の推定結果をデータとして記録することで、例えば、脈拍、顔の表情等の個人が特定される生体情報を含まない状態で、個人の興味を推定したデータを別のサービス（例えば、マーケティング、広告配信、データの売買等）に提供することができる。

［２．他の実施形態］
以上、本開示の実施形態について説明したが、本開示は、上記実施形態に限定されることなく、種々の形態を採り得ることは言うまでもない。

（２ａ）上記実施形態の興味推定システム１において、処理装置４は、必ずしも着席者のコンテンツに対する興味の推定結果に基づいて、コンテンツの内容を制御させなくてもよい。また、処理装置４は、必ずしも着席者のコンテンツに対する興味の推定結果をデータとして記録しなくてもよい。

例えば、処理装置４は、興味を推定する機能と、推定結果を記録する機能とだけを有してもよい。また、処理装置４は、興味を推定する機能と、推定結果に基づいてコンテンツ
の内容を制御する機能とだけを有してもよい。

（２ｂ）上記実施形態の興味推定システム１において、加速度センサの数は、１つ又は２つでもよいし、４つ以上であってもよい。例えば、２つのクッション用加速度センサ３Ａ，３Ｂのみがシート本体２に配置されてもよい。

（２ｃ）上記実施形態における１つの構成要素が有する機能を複数の構成要素として分散させたり、複数の構成要素が有する機能を１つの構成要素に統合したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加、置換等してもよい。なお、特許請求の範囲に記載の文言から特定される技術思想に含まれるあらゆる態様が本開示の実施形態である。

１…興味推定システム、２…シート本体、３Ａ…第１クッション用加速度センサ、
３Ｂ…第２クッション用加速度センサ、３Ｃ…バック用加速度センサ、４…処理装置、
１０…移動体、１０Ａ…内部空間、１１…キャラクタ用シート、１２…表示部、
２１…シートクッション、２２…シートバック、４１…推定部、４２…記憶部、
４３…制御部。

Claims (3)

1. コンテンツが提供される空間に配置されたシート本体と、
   前記シート本体に配置された少なくとも１つの加速度センサと、
   前記少なくとも１つの加速度センサの出力に基づいて、前記シート本体に着座した着席者の前記コンテンツに対する興味を推定する処理装置と、
   を備える、興味推定システム。
2. 請求項１に記載の興味推定システムであって、
   前記処理装置は、前記着席者の前記コンテンツに対する興味の推定結果に基づいて、前記コンテンツの内容を制御する、興味推定システム。
3. 請求項１又は請求項２に記載の興味推定システムであって、
   前記処理装置は、前記着席者の前記コンテンツに対する興味の推定結果をデータとして記録する、興味推定システム。

Images