JP2015031996A

JP2015031996A - 携帯型動き検出装置、感情情報集計装置、感情情報取得報知システム、感情情報取得報知方法およびコンピュータプログラム

Info

Publication number: JP2015031996A
Application number: JP2013159071A
Authority: JP
Inventors: 広行小原; Hiroyuki Obara
Original assignee: KDDI Corp
Current assignee: KDDI Corp
Priority date: 2013-07-31
Filing date: 2013-07-31
Publication date: 2015-02-16

Abstract

【課題】人が感情を簡便に表現できると共に、複数の人と感情を簡便に共有できることに寄与する。
【解決手段】携帯型動き検出装置２は、検出した動きを表す動きデータと動き定義データに基づいて特定の感情を表す感情情報を取得し、取得された感情情報を感情情報集計装置３へ送信する。感情情報集計装置３は、携帯型動き検出装置２から感情情報を受信し、受信された感情情報を集計し、集計の結果である感情情報集計データを報知装置４へ送信する。報知装置４は、感情情報集計装置３から受信した感情情報集計データを報知する。
【選択図】図１

Description

本発明は、携帯型動き検出装置、感情情報集計装置、感情情報取得報知システム、感情情報取得報知方法およびコンピュータプログラムに関する。

従来、スポーツやコンサートなどの放送番組の視聴者同士で感情を共有するための技術として、例えば特許文献１に記載の技術が知られている。特許文献１に記載の従来技術では、ワンセグ放送を視聴可能な携帯端末が、ワンセグ放送の番組の表示中にマイクで集音した音声を文字データに変換し、該文字データをサーバへ送信する。そして、サーバは、あるグループに属する携帯端末から受信した文字データを、当該グループに属する他の携帯端末へ配信する。そして、携帯端末が、サーバから受信した文字データを、ワンセグ放送の番組の表示中に該表示画面に併せて表示することにより、他の視聴者とワンセグ放送の内容について簡易的（擬似的）に共感できるようにしている。

また、放送番組中のハイライトシーンを抽出するための技術として、例えば特許文献２に記載の技術が知られている。特許文献２に記載の従来技術では、放送番組に含まれるオーディオ信号のスペクトルパワー値に基づいて歓声特徴量を検出し、該検出された歓声特徴量の閾値判定によって歓声区間を判定している。

また、ソーシャルネットワーキングサービス（Social Networking Service）を利用して同じ番組の視聴者同士で感情を文字で共有したり（例えば非特許文献１参照）、携帯端末のタッチパネルの表示画面に表示されたボタンを押すことにより同じ番組の視聴者同士で感情を共有したり（例えば非特許文献２参照）する技術が知られている。

特開２０１２−０９００９１号公報特許第５０３４５１６号公報

"坂本龍一無料USTREMライヴ中継とskmtSocialproject"、インターネット＜ＵＲＬ：http://www.myspace.com/welcomepolysics/blog/541610508＞ "ワラテン"、インターネット＜ＵＲＬ：http://ren.sp2.fujitv.co.jp/profile/top.php?pjid=waraten_info＞

しかし、上述した従来技術では、以下に示すような課題がある。

特許文献１に記載の従来技術では、ある視聴者が発した音声を文字で他の視聴者へ伝えるが、集音側で雑音が多い等の劣悪な環境下では集音した音声の誤認識などによって視聴者の感情の共有を妨げる恐れがある。

特許文献２に記載の従来技術では、例えばコンサートの中継番組に含まれるオーディオ信号のスペクトルパワー値から、コンサートの観客の感情を判定することは難しい。

非特許文献１，２では、視聴者が直接的に文字を入力したり、ボタンを押したりする必要があるので、視聴者が番組に集中できない等の不都合がある。また、非特許文献２では、１つのボタンだけを用いて一つの感情にのみ焦点を当てており、複数の感情を表現するのは難しい。

本発明は、このような事情を考慮してなされたもので、人が感情を簡便に表現できると共に、複数の人と感情を簡便に共有できることに寄与することを課題とする。

（１）本発明に係る携帯型動き検出装置は、動きを検出し、該検出した動きを表す動きデータを出力する動き検出部と、特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得部と、前記取得された感情情報を感情情報集計装置へ送信する無線通信部と、を備えたことを特徴とする。

（２）本発明に係る感情情報集計装置は、携帯型動き検出装置から感情情報を受信する受信部と、前記受信された感情情報を集計する感情情報集計部と、前記集計の結果である感情情報集計データを報知装置へ送信する通信部と、を備えたことを特徴とする。

（３）本発明に係る感情情報取得報知システムは、上記（１）の携帯型動き検出装置と、上記（２）の感情情報集計装置と、前記感情情報集計装置から受信した感情情報集計データを報知する報知装置と、を有することを特徴とする。

（４）本発明に係る携帯型動き検出装置は、動きを検出し、該検出した動きを表す動きデータを出力する動き検出部と、特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得部と、自己の位置を示す位置情報を取得する位置情報取得部と、前記取得された感情情報および位置情報を感情情報集計装置へ送信する無線通信部と、を備えたことを特徴とする。

（５）本発明に係る感情情報集計装置は、携帯型動き検出装置から感情情報および位置情報を受信する受信部と、前記受信された位置情報に基づいた位置集計単位ごとに、前記受信された感情情報を集計する感情情報集計部と、前記集計の結果である位置集計単位ごとの感情情報集計データを報知装置へ送信する通信部と、を備えたことを特徴とする。

（６）本発明に係る感情情報取得報知システムは、上記（４）の携帯型動き検出装置と、上記（５）の感情情報集計装置と、前記感情情報集計装置から受信した位置集計単位ごとの感情情報集計データを報知する報知装置と、を有することを特徴とする。

（７）本発明に係る携帯型動き検出装置は、動きを検出し、該検出した動きを表す動きデータを出力する動き検出部と、特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得部と、ユーザプロファイル情報を取得するユーザプロファイル情報取得部と、前記取得された感情情報およびユーザプロファイル情報を感情情報集計装置へ送信する無線通信部と、を備えたことを特徴とする。

（８）本発明に係る感情情報集計装置は、携帯型動き検出装置から感情情報およびユーザプロファイル情報を受信する受信部と、前記受信されたユーザプロファイル情報に基づいたユーザ属性集計単位ごとに、前記受信された感情情報を集計する感情情報集計部と、前記集計の結果であるユーザ属性集計単位ごとの感情情報集計データを報知装置へ送信する通信部と、を備えたことを特徴とする。

（９）本発明に係る感情情報取得報知システムは、上記（７）の携帯型動き検出装置と、上記（８）の感情情報集計装置と、前記感情情報集計装置から受信したユーザ属性集計単位ごとの感情情報集計データを報知する報知装置と、を有することを特徴とする。

（１０）本発明に係る携帯型動き検出装置は、動きを検出し、該検出した動きを表す動きデータを出力する動き検出部と、特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得処理を実行する情報処理部と、前記取得された感情情報を感情情報集計装置へ送信する無線通信部と、を備えたことを特徴とする。

（１１）本発明に係る感情情報集計装置は、携帯型動き検出装置から感情情報を受信する受信部と、前記受信された感情情報を集計する感情情報集計部と、前記集計の結果である感情情報集計データを報知装置へ送信する通信部と、を備え、前記感情情報集計データは、感情情報取得処理が実行されている前記携帯型動き検出装置の総数に対する、特定の感情の感情情報を送信した前記携帯型動き検出装置の数の割合を示す、ことを特徴とする。

（１２）本発明に係る感情情報取得報知システムは、上記（１０）の携帯型動き検出装置と、上記（１１）の感情情報集計装置と、前記感情情報集計装置から受信した感情情報集計データを報知する報知装置と、を有することを特徴とする。

（１３）本発明に係る感情情報集計装置は、上記（２）、（５）、（８）または（１１）のいずれか一つの感情情報集計装置において、前記感情情報集計データに基づいて、特定の感情情報の集計値が所定の条件である時刻を記録することを特徴とする。

（１４）本発明に係る感情情報取得報知方法は、携帯型動き検出装置と感情情報集計装置と報知装置を有する感情情報取得報知システムの感情情報取得報知方法であり、前記携帯型動き検出装置が、動きを検出し、該検出した動きを表す動きデータを出力する動き検出ステップと、特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得ステップと、前記取得された感情情報を前記感情情報集計装置へ送信する送信ステップと、前記感情情報集計装置が、前記携帯型動き検出装置から感情情報を受信する受信ステップと、前記受信された感情情報を集計する感情情報集計ステップと、前記集計の結果である感情情報集計データを前記報知装置へ送信する送信ステップと、前記報知装置が、前記感情情報集計装置から受信した感情情報集計データを報知する報知ステップと、を含むことを特徴とする。

（１５）本発明に係るコンピュータプログラムは、動きを検出し、該検出した動きを表す動きデータを出力する動き検出部を備えた携帯型動き検出装置のコンピュータに、特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得ステップと、前記取得された感情情報を感情情報集計装置へ送信する送信ステップと、を実行させるためのコンピュータプログラムであることを特徴とする。

（１６）本発明に係るコンピュータプログラムは、コンピュータに、携帯型動き検出装置から感情情報を受信する受信ステップと、前記受信された感情情報を集計する感情情報集計ステップと、前記集計の結果である感情情報集計データを報知装置へ送信する送信ステップと、を実行させるためのコンピュータプログラムであることを特徴とする。

本発明によれば、人が感情を簡便に表現できると共に、複数の人と感情を簡便に共有できることに寄与するという効果が得られる。

本発明の一実施形態に係る感情情報取得報知システム１の構成を示すブロック図である。図１に示す携帯型動き検出装置２の構成を示すブロック図である。図１に示す感情情報集計装置３の構成を示すブロック図である。本発明の一実施形態に係る感情情報取得報知方法の手順を示すシーケンスチャートである。本発明の実施例１に係る感情情報取得報知システム１の構成図である。図５に示す携帯端末５０の構成を示すブロック図である。本発明の実施例１に係る感情情報取得報知方法の手順を示すシーケンスチャートである。本発明の実施例１に係る動き定義データの例の説明図である。本発明の実施例１に係る動き定義データの例の説明図である。本発明の実施例１に係る動き定義データの例の説明図である。本発明の実施例１に係る感情情報集計データを説明するための表示画面例の構成図である。本発明の実施例２に係る感情情報取得報知システム１の構成図である。本発明の実施例２に係る携帯端末５０の構成を示すブロック図である。本発明の実施例２に係る感情情報取得報知方法の手順を示すシーケンスチャートである。本発明の実施例２に係る感情情報集計データを説明するための表示画面例の構成図である。本発明の実施例３に係る携帯端末５０の構成を示すブロック図である。本発明の実施例３に係る感情情報取得報知方法の手順を示すシーケンスチャートである。本発明の実施例３に係る感情情報集計データを説明するための表示画面例の構成図である。本発明の実施例４に係る感情情報集計データの応用例を説明するためのヒストグラムである。

以下、図面を参照し、本発明の実施形態について説明する。
図１は、本発明の一実施形態に係る感情情報取得報知システム１の構成を示すブロック図である。図１において、感情情報取得報知システム１は、携帯型動き検出装置２と感情情報集計装置３と報知装置４を備える。携帯型動き検出装置２と感情情報集計装置３は無線通信回線１００を介してデータを送受する。無線通信回線１００として、例えば、携帯電話網や無線ＬＡＮなどを利用できる。感情情報集計装置３は通信回線１０１を介してデータを報知装置４へ送信する。通信回線１０１は、有線通信回線であってもよく、又は無線通信回線であってもよい。

図２は、図１に示す携帯型動き検出装置２の構成を示すブロック図である。図２において、携帯型動き検出装置２は、動き検出部２１と感情情報取得部２２と無線通信部２３と記憶部２４を備える。各部２１、２２、２３、２４はデータを送受可能に接続されている。

動き検出部２１は、動きを検出し、該検出した動きを表す動きデータを出力する。感情情報取得部２２は、動き検出部２１から出力された動きデータと、動き定義データとに基づいて、特定の感情を表す感情情報を取得する処理（感情情報取得処理）を行う。動き定義データは、特定の感情に対応付けられた動きを定義するデータである。

無線通信部２３は、感情情報取得部２２によって取得された感情情報を感情情報集計装置３へ送信する。記憶部２４は、動き定義データ等の各種のデータを記憶する。

図３は、図１に示す感情情報集計装置３の構成を示すブロック図である。図３において、感情情報集計装置３は、感情情報集計部３１と通信部３２と記憶部３３を備える。各部３１、３２、３３はデータを送受可能に接続されている。

通信部３２は、携帯型動き検出装置２から感情情報を受信する。感情情報集計部３１は、通信部３２により携帯型動き検出装置２から受信された感情情報を集計する。通信部３２は、感情情報集計部３１による集計の結果である感情情報集計データを報知装置４へ送信する。

次に、図４を参照して、図１に示す感情情報取得報知システム１の動作を説明する。図４は、本実施形態に係る感情情報取得報知方法の手順を示すシーケンスチャートである。

携帯型動き検出装置２を持っている人（以下、ユーザと称する）は、特定のコンテンツ（例えば、スポーツやコンサート）を実際の会場やテレビ放送などで視聴している。ユーザに対して、予め、動き定義データの内容が提示される。この提示では、ユーザが特定の感情を表現するために携帯型動き検出装置２をどのように動かしたらよいのかが示される。例えば、「良い！」という感情を表現したい場合には、携帯型動き検出装置２を垂直方向に上下に動かすこと、が示される。これにより、ユーザは、コンテンツを視聴しながら、「良い！」と感じた時に、携帯型動き検出装置２を垂直方向に上下に動かせばよいと認識する。

（ステップＳ１）感情情報集計装置３は、動き定義データを携帯型動き検出装置２へ送信する。携帯型動き検出装置２は、感情情報集計装置３から受信した動き定義データを記憶部２４に格納する。なお、携帯型動き検出装置２に予め動き定義データを保持しておいてもよい。

（ステップＳ２）携帯型動き検出装置２において、動き検出部２１は、動きを検出し、該検出した動きを表す動きデータを出力する。感情情報取得部２２は、その動きデータと、記憶部２４に格納されている動き定義データとに基づいて、特定の感情を表す感情情報を取得する。無線通信部２３は、その取得された感情情報を感情情報集計装置３へ送信する。

（ステップＳ３）感情情報集計装置３において、通信部３２は、各ユーザの携帯型動き検出装置２から感情情報を受信する。感情情報集計部３１は、その受信された感情情報を集計する。通信部３２は、その集計の結果である感情情報集計データを報知装置４へ送信する。報知装置４は、感情情報集計装置３から受信した感情情報集計データを報知する。報知装置４は、コンサート会場など、ユーザが居る場所に設けられる。その報知方法として、例えば、表示画面に感情情報集計データを表示することが挙げられる。又は、感情情報集計データに応じた報知音をスピーカから出力することが挙げられる。

本実施形態によれば、各ユーザの携帯型動き検出装置２が各ユーザの感情を表す感情情報を取得し、該取得した感情情報を感情情報集計装置３へ送信する。感情情報集計装置３は、各ユーザの携帯型動き検出装置２から受信した感情情報を集計し、該集計の結果である感情情報集計データを報知装置４へ送信する。報知装置４は、感情情報集計装置３から受信した感情情報集計データをユーザに報知する。これにより、ユーザは、特定の感情を表現するために携帯型動き検出装置２を動かすだけでよいので、簡便に感情を表現できるという効果が得られる。また、例えばコンサート会場で同じコンテンツを視聴しているユーザ同士が感情を共有できるという効果が得られる。また、コンサートやスポーツなどのコンテンツの出演者や主催者も、視聴者による感情表現の状態をリアルタイムに確認できるので、視聴者とのさらなる一体感を醸し出す演出ができるという効果が得られる。

以下、本実施形態に係る実施例を説明する。

実施例１では、携帯型動き検出装置２として、携帯電話網の加入者端末などの携帯端末を利用する。又、報知装置４として、液晶表示装置などの表示装置を利用する。図５は本発明の実施例１に係る感情情報取得報知システム１の構成図である。図５において、携帯端末５０と感情情報集計装置３は無線通信回線１００を介してデータを送受する。感情情報集計装置３は通信回線１０１を介してデータを表示装置４０へ送信する。感情情報集計装置３は、図３の構成と同じである。

図６は、図５に示す携帯端末５０の構成を示すブロック図である。図６において、携帯端末５０は、加速度センサ５１と情報処理部５２と無線通信部２３と記憶部２４と操作部５３と表示部５４を有する。これら各部はデータを送受可能に接続されている。

加速度センサ５１は動き検出部２１として機能する。加速度センサ５１は、携帯端末５０が持つ３軸加速度センサ等で重力及び動きを計測することにより携帯端末５０の傾き（上下左右前後の方向）及びその速度を検知することができ、携帯端末５０がどちらの方向に振られたかという行為とその回数を計測する。情報処理部５２は、メモリ及びＣＰＵ（中央演算処理装置）により構成される。情報処理部５２は、感情情報取得部２２の機能を実現するためのコンピュータプログラム（以下、感情情報取得アプリケーションと称する）をＣＰＵが実行することにより、感情情報取得部２２の機能を実現する。

無線通信部２３は、携帯電話網や無線ＬＡＮなどの無線基地局と通信接続し、該無線基地局を介して感情情報集計装置３とデータを送受する。記憶部２４は、動き定義データ等の各種のデータを記憶する。操作部５３は、入力デバイスを有し、ユーザの操作に応じたデータ入力を行う。表示部５４は、表示デバイスを有し、表示画面にデータ表示を行う。なお、操作部５３および表示部５４として、タッチパネルを備えてもよい。タッチパネルは、データを表示する表示画面を有し、該表示画面に対する接触によってデータ入力が可能である。

次に、図７を参照して、図５に示す実施例１に係る感情情報取得報知システム１の動作を説明する。図７は、本発明の実施例１に係る感情情報取得報知方法の手順を示すシーケンスチャートである。

ユーザは、携帯端末５０を所持し、特定のコンテンツ（例えば、スポーツやコンサート）を実際の会場やテレビ放送などで視聴している。

（ステップＳ１１）ユーザは、携帯端末５０を使用して、感情情報集計装置３にアクセスし、感情情報取得アプリケーションをダウンロードする操作を行う。これにより、携帯端末５０は、感情情報集計装置３に対して、感情情報取得アプリケーションのダウンロード要求を送信する。

（ステップＳ１２）感情情報集計装置３は、携帯端末５０から感情情報取得アプリケーションのダウンロード要求を受信すると、感情情報取得アプリケーションを携帯端末５０へ送信する。感情情報取得アプリケーションは、感情情報集計装置３の記憶部３３に予め格納されている。

（ステップＳ１３）携帯端末５０は、感情情報集計装置３から感情情報取得アプリケーションを受信すると、受信した感情情報取得アプリケーションのインストールを行う。これにより、感情情報取得アプリケーションは、携帯端末５０の情報処理部５２にインストールされる。そして、ユーザが感情情報取得アプリケーションの実行を指示すると、携帯端末５０の情報処理部５２は感情情報取得アプリケーションを実行する。情報処理部５２は、感情情報取得アプリケーションを実行することにより、感情情報取得処理を行う。この感情情報取得処理では、加速度センサ５１からの出力信号と、動き定義データとに基づいて、特定の感情を表す感情情報を取得する。これにより、携帯端末５０において、感情情報取得部２２の機能が実現される。感情情報取得アプリケーションは、動き定義データを有する。

なお、ユーザに対して、予め、動き定義データの内容が提示されるが、この提示方法として、感情情報取得アプリケーションに具備される使用説明書に動き定義データの内容を記載しておく方法、特定のコンテンツ（例えば、スポーツやコンサート）の提供者（例えば、出演者や主催者）が事前に視聴者へ周知する方法、などが挙げられる。

（ステップＳ１４）携帯端末５０において、感情情報取得部２２は、加速度センサ５１からの出力信号と、動き定義データとに基づいて、特定の感情を表す感情情報を取得する。例えば、ユーザによる携帯端末５０の振り方とその回数を検出する。そして、検出された振り方に対応する特定の感情を動き定義データに基づいて判定する。そして、判定された特定の感情を示す感情識別情報と、検出された回数（特定の感情の発生回数）とを感情情報とする。

（ステップＳ１５）携帯端末５０において、無線通信部２３は、感情情報取得部２２によって取得された感情情報を感情情報集計装置３へ送信する。この送信タイミングは、感情情報の取得時であってもよく、又は、定期的であってもよい。

（ステップＳ１６）感情情報集計装置３において、感情情報集計部３１は、通信部３２により各ユーザの携帯端末５０から感情情報を受信すると、その受信された感情情報を集計する。例えば、特定の感情ごとに、一定期間の発生回数を集計する。

（ステップＳ１７）感情情報集計装置３において、通信部３２は、感情情報集計部３１による集計の結果である感情情報集計データを表示装置４０へ送信する。

（ステップＳ１８）表示装置４０は、感情情報集計装置３から受信した感情情報集計データを表示画面に表示する。

図８、図９および図１０は、本発明の実施例１に係る動き定義データの例の説明図である。図８（１）の動き定義データでは、「良い！」という感情を表現したい場合には、携帯端末５０を垂直方向に上下に動かす（振る）こと、が示される。図（２）の動き定義データでは、「とても良い！」という感情を表現したい場合には、携帯端末５０を水平方向に左右に動かす（振る）こと、が示される。

図９（１）の動き定義データでは、「最高！」という感情を表現したい場合には、携帯端末５０を垂直方向の上方に突き出すこと、が示される。図９（２）の動き定義データでは、「最低！」という感情を表現したい場合には、携帯端末５０を垂直方向の下方に突き出すこと、が示される。図１０の動き定義データでは、「もっともっと！」という感情を表現したい場合には、携帯端末５０を円周に動かす（グルグルと回す）こと、が示される。

携帯端末５０が垂直方向の上に動いたのか又は下に動いたのか、水平方向の右に動いたのか又は左に動いたのか、円周に動いたのか、及びその動いた回数は、加速度センサ５１からの出力信号によって検知、計測できる。

なお、図８、図９および図１０に示した動き定義データは一例であって、これに限定されない。動き定義データは、特定の感情に対応付けられた動きを定義するデータであればよく、任意の感情と任意の動きとの対応付けが可能である。例えば、３軸の加速度センサ５１によって携帯端末５０の振り方の加速度の大小を測定し、この測定結果である加速度の大小を特定の感情の強弱に対応付けることが挙げられる。

図１１は、本発明の実施例１に係る感情情報集計データを説明するための表示画面例の構成図である。図１１には、表示装置４０の表示画面２００が示されている。表示画面２００には、感情情報集計データを表示する領域２１０が設けられる。また、この例では、集計対象である感情情報が取得された場所（言い換えると、集計対象のユーザが居た場所）を特定する情報「会場Ａ」を表示する領域２２０が表示画面２００に設けられている。

図１１の例では、感情情報集計データは、集計総数に対する集計値の割合を示す。領域２１０には、その感情情報集計データに基づいて、集計値の割合が棒グラフで表示される。集計総数として、例えば、感情情報取得アプリケーション（感情情報取得処理）が実行されている携帯端末５０の総数を利用することが挙げられる。感情情報集計データとして、例えば、感情情報取得処理が実行されている携帯端末５０の総数に対する、特定の感情の感情情報を送信した携帯端末５０の数の割合を示すものが挙げられる。これにより、感情情報取得アプリケーションを実行している携帯端末５０のユーザのうち、どのくらいのユーザが例えば「良い！」という感情を持ったのかが報知される。

なお、図１１で説明した感情情報集計データは一例であって、これに限定されない。例えば、携帯端末５０から送信される感情情報として、特定の感情を示す感情識別情報と、当該特定の感情の発生回数とを用いる。そして、一定期間における特定の感情の発生回数を利用した感情情報集計データとして、例えば、一定期間ごとの特定の感情の発生総回数や発生頻度、各種の統計値などが挙げられる。

また、図１１の例では、表示画面２００に棒グラフで感情情報集計データを表示しているが、感情情報集計データの表示方法は任意に変更可能である。例えば、数値（例えば百分率）で感情情報集計データを表示してもよい。また、コンピュータグラフィックを用い、アニメーションのキャラクターの動作の大小や激しさの大小等で感情情報集計データを表すようにしてもよい。

実施例２では、ユーザの位置に基づいた位置集計単位ごとに感情情報を集計する。図１２は本発明の実施例２に係る感情情報取得報知システム１の構成図である。図１２において、ユーザは、特定のコンテンツを視聴できる場所に居る。この場所として、例えば、スポーツやコンサートが実際に行われている会場や、テレビ中継されている会場（例えば、パブリックビューイング会場）、テレビ放送を視聴できる場所（例えば、ユーザの宅内）などが挙げられる。図１２には、会場Ａ，Ｂとユーザの宅内が例示されている。

各ユーザの携帯端末５０と感情情報集計装置３は無線通信回線１００を介してデータを送受する。感情情報集計装置３は通信回線１０１を介してデータを、会場Ａ，Ｂおよびユーザ宅の各表示装置４０へ送信する。感情情報集計装置３は、図３の構成と同じである。

図１３は、本発明の実施例２に係る携帯端末５０の構成を示すブロック図である。図１３において、携帯端末５０は、図６の構成に対してさらに位置情報取得部５５を備える。位置情報取得部５５は、自己の位置を示す位置情報を取得する。位置情報取得部５５として、ＧＰＳ（Global Positioning System）が利用可能である。又は、位置情報取得部５５として、携帯電話網や無線ＬＡＮなどの無線基地局から位置情報を取得する機能を備えてもよい。

次に、図１４を参照して、図１２に示す実施例２に係る感情情報取得報知システム１の動作を説明する。図１４は、本発明の実施例２に係る感情情報取得報知方法の手順を示すシーケンスチャートである。

各ユーザは、携帯端末５０を所持し、特定のコンテンツ（例えば、スポーツやコンサート）を会場Ａ，Ｂまたは宅内で視聴している。

図１４のステップＳ２１からステップＳ２３までは、図７のステップＳ１１からステップＳ１３までと同じである。ユーザは、携帯端末５０を使用して、感情情報集計装置３にアクセスし、感情情報取得アプリケーションをダウンロードする操作を行う。これにより、携帯端末５０は、感情情報集計装置３に対して、感情情報取得アプリケーションのダウンロード要求を送信する。感情情報集計装置３は、携帯端末５０から感情情報取得アプリケーションのダウンロード要求を受信すると、感情情報取得アプリケーションを携帯端末５０へ送信する。携帯端末５０は、感情情報集計装置３から感情情報取得アプリケーションを受信すると、受信した感情情報取得アプリケーションのインストールを行う。そして、ユーザが感情情報取得アプリケーションの実行を指示すると、携帯端末５０の情報処理部５２は感情情報取得アプリケーションを実行し、携帯端末５０において感情情報取得部２２の機能が実現される。

また、ユーザは、感情情報取得アプリケーションに具備される使用説明書に記載される動き定義データの内容を見たり、又は、特定のコンテンツ（例えば、スポーツやコンサート）の提供者（例えば、出演者や主催者）による事前の周知を受けたりすることにより、動き定義データの内容を把握する。

（ステップＳ２４）携帯端末５０において、感情情報取得部２２は、加速度センサ５１からの出力信号と、動き定義データとに基づいて、特定の感情を表す感情情報を取得する。また、位置情報取得部５５は、自己の位置を示す位置情報を取得する。

（ステップＳ２５）携帯端末５０において、無線通信部２３は、感情情報取得部２２によって取得された感情情報と位置情報取得部５５によって取得された位置情報とを感情情報集計装置３へ送信する。この送信タイミングは、感情情報の取得時であってもよく、又は、定期的であってもよい。

（ステップＳ２６）感情情報集計装置３において、感情情報集計部３１は、通信部３２により各ユーザの携帯端末５０から感情情報および位置情報を受信する。そして、感情情報集計部３１は、該受信された位置情報に基づいた位置集計単位ごとに、該受信された感情情報を集計する。位置集計単位は、事前に定義される。

図１２の例では、位置集計単位は、会場Ａと会場Ｂとユーザ宅の３種類である。位置集計単位「会場Ａ」、「会場Ｂ」は、例えば、会場Ａ、会場Ｂの位置を含む所定範囲として定義される。位置集計単位「ユーザ宅」は、位置集計単位「会場Ａ」、「会場Ｂ」以外の範囲として定義される。この場合、会場Ａ、会場Ｂに居ないユーザは、ユーザ宅に居るユーザ群として扱われる。

（ステップＳ２７）感情情報集計装置３において、通信部３２は、感情情報集計部３１による集計の結果である位置集計単位ごとの感情情報集計データを、会場Ａ，Ｂおよびユーザ宅の各表示装置４０へ送信する。

（ステップＳ２８）会場Ａ，Ｂおよびユーザ宅の各表示装置４０は、感情情報集計装置３から受信した位置集計単位ごとの感情情報集計データを表示画面に表示する。

図１５は、本発明の実施例２に係る感情情報集計データを説明するための表示画面例の構成図である。図１５には、表示装置４０の表示画面２００が示されている。表示画面２００には、位置集計単位ごとの感情情報集計データを表示する領域２１０が設けられる。また、この例では、位置集計単位を特定する情報、例えば「会場Ａ」、「会場Ｂ」を表示する領域２２０が表示画面２００に設けられている。

図１５の表示画面２００には、同時に２つの位置集計単位の感情情報集計データを表示できるように、領域２１０，２２０が２つずつ設けられている。これら２つの領域２１０，２２０を使用して、３つの位置集計単位「会場Ａ」，「会場Ｂ」，「ユーザ宅」の感情情報集計データが、順次、交代で表示される。

図１５の例示では、一方の領域２１０には位置集計単位「会場Ａ」の感情情報集計データが表示されると共に領域２２０には「会場Ａ」が表示されている。そして、もう一方の領域２１０には位置集計単位「会場Ｂ」の感情情報集計データが表示されると共に領域２２０には「会場Ｂ」が表示されている。感情情報集計データは、実施例１と同様である。

本実施例２によれば、同じコンテンツを視聴しているユーザの視聴場所ごとに感情情報の集計を行い、視聴場所ごとの感情情報の集計結果を各視聴場所のユーザに報知できる。これにより、同じコンテンツを異なる場所で視聴しているユーザ同士で、互いの感情を共有できるという効果が得られる。また、異なる場所のユーザ間で盛り上がりを競い合うなどの楽しみが得られる。また、宅内でコンテンツを視聴しているユーザであっても、会場Ａ，Ｂに居るユーザと同様に感情を表現できるので、他のユーザとのワクワク感等の感情を共有できるという効果が得られる。

実施例３では、ユーザプロファイル情報に基づいたユーザ属性集計単位ごとに感情情報を集計する。感情情報取得報知システム１は、図５の構成と同じである。感情情報集計装置３は、図３の構成と同じである。

図１６は、本発明の実施例３に係る携帯端末５０の構成を示すブロック図である。図１６において、携帯端末５０は、図６の構成に対してさらにユーザプロファイル情報取得部５６を備える。ユーザプロファイル情報取得部５６は、ユーザのプロファイルを示すユーザプロファイル情報を取得する。例えば、ユーザプロファイル情報は予め記憶部２４に格納されており、ユーザプロファイル情報取得部５６は記憶部２４からユーザプロファイル情報を取得する。又は、ユーザプロファイル情報取得部５６は、ユーザに対してユーザプロファイル情報を入力するように要求し、ユーザによる入力によってユーザプロファイル情報を取得する。

次に、図１７を参照して、実施例３に係る感情情報取得報知システム１の動作を説明する。図１７は、本発明の実施例３に係る感情情報取得報知方法の手順を示すシーケンスチャートである。

図１７のステップＳ３１からステップＳ３３までは、図７のステップＳ１１からステップＳ１３までと同じである。ユーザは、携帯端末５０を使用して、感情情報集計装置３にアクセスし、感情情報取得アプリケーションをダウンロードする操作を行う。これにより、携帯端末５０は、感情情報集計装置３に対して、感情情報取得アプリケーションのダウンロード要求を送信する。感情情報集計装置３は、携帯端末５０から感情情報取得アプリケーションのダウンロード要求を受信すると、感情情報取得アプリケーションを携帯端末５０へ送信する。携帯端末５０は、感情情報集計装置３から感情情報取得アプリケーションを受信すると、受信した感情情報取得アプリケーションのインストールを行う。そして、ユーザが感情情報取得アプリケーションの実行を指示すると、携帯端末５０の情報処理部５２は感情情報取得アプリケーションを実行し、携帯端末５０において感情情報取得部２２の機能が実現される。

（ステップＳ３４）携帯端末５０において、感情情報取得部２２は、加速度センサ５１からの出力信号と、動き定義データとに基づいて、特定の感情を表す感情情報を取得する。また、ユーザプロファイル情報取得部５６は、ユーザプロファイル情報を取得する。

（ステップＳ３５）携帯端末５０において、無線通信部２３は、感情情報取得部２２によって取得された感情情報とユーザプロファイル情報取得部５６によって取得されたユーザプロファイル情報とを感情情報集計装置３へ送信する。この送信タイミングは、感情情報の取得時であってもよく、又は、定期的であってもよい。

（ステップＳ３６）感情情報集計装置３において、感情情報集計部３１は、通信部３２により各ユーザの携帯端末５０から感情情報およびユーザプロファイル情報を受信する。そして、感情情報集計部３１は、該受信されたユーザプロファイル情報に基づいたユーザ属性集計単位ごとに、該受信された感情情報を集計する。ユーザ属性集計単位は、事前に定義される。ユーザ属性集計単位として、例えば、性別、年齢別、居住区域別などが挙げられる。

（ステップＳ３７）感情情報集計装置３において、通信部３２は、感情情報集計部３１による集計の結果であるユーザ属性集計単位ごとの感情情報集計データを表示装置４０へ送信する。

（ステップＳ３８）表示装置４０は、感情情報集計装置３から受信したユーザ属性集計単位ごとの感情情報集計データを表示画面に表示する。

図１８は、本発明の実施例３に係る感情情報集計データを説明するための表示画面例の構成図である。図１８には、表示装置４０の表示画面２００が示されている。表示画面２００には、ユーザ属性集計単位ごとの感情情報集計データを表示する領域２１０が設けられる。また、この例では、ユーザ属性集計単位を特定する情報、例えば性別の「男性」，「女性」を表示する領域２３０が表示画面２００に設けられている。

図１８の表示画面２００には、同時に２つのユーザ属性集計単位の感情情報集計データを表示できるように、領域２１０，２３０が２つずつ設けられている。これら２つの領域２１０，２３０を使用して、２つのユーザ属性集計単位「男性」，「女性」の感情情報集計データが同時に表示される。感情情報集計データは、実施例１と同様である。

本実施例３によれば、同じコンテンツを視聴しているユーザの属性ごとに感情情報の集計を行い、ユーザ属性ごとの感情情報の集計結果を各ユーザに報知できる。これにより、例えば、男性視聴者の盛り上がりの状況と、女性視聴者の盛り上がりの状況とを比較表示することが可能となる。

なお、感情情報集計装置３が、各ユーザのユーザプロファイル情報を保持し、該ユーザプロファイル情報に基づいてユーザ属性集計単位ごとに感情情報を集計するようにしてもよい。この場合、ユーザプロファイル情報の取得方法として、携帯端末５０が感情情報と共に端末識別情報を感情情報集計装置３に送信し、感情情報集計装置３は該端末識別情報に関連付けて記憶されているユーザプロファイル情報を取得することが挙げられる。

また、本実施例３と実施例２を組み合わせてもよい。これにより、位置集計単位ごと、且つ、ユーザ属性集計単位ごとに、感情情報集計データを生成し、ユーザに報知することができる。

実施例４は、感情情報集計データの応用例である。感情情報集計装置３は、感情情報集計データに基づいて、特定の感情情報の集計値が所定の条件である時刻を記録する。図１９は、本発明の実施例４に係る感情情報集計データの応用例を説明するためのヒストグラムである。図１９において、横軸は時間の経過を示す。縦軸は、ある楽曲が演奏されている最中における一定期間ごとの感情情報の集計値を示す。

図１９の例では、時刻ｔの集計値３００が最大値である。感情情報集計装置３が集計値３００の時刻ｔを記録することにより、当該楽曲における特定の感情のピーク時刻を把握できる。そして、例えば、楽曲ごとに、「最高！」という感情のピーク時刻を把握し、ユーザに報知することが挙げられる。これにより、ユーザは、各楽曲における盛り上がりのピークを知ることができる。

また、例えばコンサートで演奏される複数の楽曲の中での特定の感情のピーク時刻を記録するようにしてもよい。そして、例えば、「最高！」という感情のピーク時刻を把握し、ユーザに報知することが挙げられる。これにより、ユーザは、コンサートの中で最も盛り上がった楽曲を知ることができる。また、コンサートの模様を録画した録画データに該ピーク時刻を記録しておくことによって、該録画データの再生時に、視聴者は最も盛り上がった楽曲を知ることができる。

また、特定の感情の集計値の大きさのレベルごとに、その時刻を記録するようにしてもよい。これにより、例えば楽曲ごとやコンサート中において、特定の感情の集計値の大きさのレベルを時間の流れに沿って把握することができる。例えば、コンサートの模様を録画した録画データに対してチャプターごとに該レベルを示す識別子を記録しておくことによって、該録画データの再生時に、視聴者は該レベルに応じたハイライトシーンだけを視聴したりすることが可能となる。また、視聴者は、該録画データを視聴しながら、動き定義データに基づいて携帯端末５０を振ることによって、コンサート当時の感情の共有を疑似体験することができる。

以上、本発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。

例えば、感情情報集計データを報知する方法として、感情情報集計装置３からユーザの携帯端末５０へ感情情報集計データを送信し、携帯端末５０が感情情報集計データを報知することが挙げられる。携帯端末５０による感情情報集計データの報知方法として、表示、振動発生、音声出力、発光などが挙げられる。例えば、振動の強弱によって特定の感情の発生の割合を報知することが挙げられる。又は、ユーザが視聴している放送番組の音声の出力の強弱によって特定の感情の発生の割合を報知することが挙げられる。又は、ランプの発光強度の強弱によって特定の感情の発生の割合を報知することが挙げられる。又は、感情情報取得アプリケーションのホーム画面をチカチカと点滅させる速度の大小によって特定の感情の発生の割合を報知することが挙げられる。

また、携帯型動き検出装置２は、携帯端末を利用したものであってもよく、又は、他の装置に具備されるものであってもよく、又は、独立した装置であってもよい。例えば、携帯型動き検出装置２を独立した装置として構成し、リストバンド等でユーザの腕に装着できるようにすることが挙げられる。又は、コンサート等で用いられるスティック型の発光体やペンライトに、携帯型動き検出装置２を具備することが挙げられる。

また、本発明は、スポーツやコンサート、映画などの鑑賞、クイズ番組等のテレビ番組への視聴者の参加、討論会等における意見の収集など、様々なコンテンツを対象にすることができる。

また、上述した携帯型動き検出装置２、携帯端末５０または感情情報集計装置３を実現するためのコンピュータプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行するようにしてもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものであってもよい。

また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、フラッシュメモリ等の書き込み可能な不揮発性メモリ、ＤＶＤ（Digital Versatile Disk）等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。

さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（例えばＤＲＡＭ（Dynamic Random Access Memory））のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。

１…感情情報取得報知システム、２…携帯型動き検出装置、３…感情情報集計装置、４…報知装置、２１…動き検出部、２２…感情情報取得部、２３…無線通信部、２４…記憶部、３１…感情情報集計部、３２…通信部、３３…記憶部、５０…携帯端末、５１…加速度センサ、５２…情報処理部、５３…操作部、５４…表示部、５５…位置情報取得部、５６…ユーザプロファイル情報取得部

Claims

動きを検出し、該検出した動きを表す動きデータを出力する動き検出部と、
特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得部と、
前記取得された感情情報を感情情報集計装置へ送信する無線通信部と、
を備えたことを特徴とする携帯型動き検出装置。
携帯型動き検出装置から感情情報を受信する受信部と、
前記受信された感情情報を集計する感情情報集計部と、
前記集計の結果である感情情報集計データを報知装置へ送信する通信部と、
を備えたことを特徴とする感情情報集計装置。
請求項１に記載の携帯型動き検出装置と、
請求項２に記載の感情情報集計装置と、
前記感情情報集計装置から受信した感情情報集計データを報知する報知装置と、
を有する感情情報取得報知システム。
動きを検出し、該検出した動きを表す動きデータを出力する動き検出部と、
特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得部と、
自己の位置を示す位置情報を取得する位置情報取得部と、
前記取得された感情情報および位置情報を感情情報集計装置へ送信する無線通信部と、
を備えたことを特徴とする携帯型動き検出装置。
携帯型動き検出装置から感情情報および位置情報を受信する受信部と、
前記受信された位置情報に基づいた位置集計単位ごとに、前記受信された感情情報を集計する感情情報集計部と、
前記集計の結果である位置集計単位ごとの感情情報集計データを報知装置へ送信する通信部と、
を備えたことを特徴とする感情情報集計装置。
請求項４に記載の携帯型動き検出装置と、
請求項５に記載の感情情報集計装置と、
前記感情情報集計装置から受信した位置集計単位ごとの感情情報集計データを報知する報知装置と、
を有する感情情報取得報知システム。
動きを検出し、該検出した動きを表す動きデータを出力する動き検出部と、
特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得部と、
ユーザプロファイル情報を取得するユーザプロファイル情報取得部と、
前記取得された感情情報およびユーザプロファイル情報を感情情報集計装置へ送信する無線通信部と、
を備えたことを特徴とする携帯型動き検出装置。
携帯型動き検出装置から感情情報およびユーザプロファイル情報を受信する受信部と、
前記受信されたユーザプロファイル情報に基づいたユーザ属性集計単位ごとに、前記受信された感情情報を集計する感情情報集計部と、
前記集計の結果であるユーザ属性集計単位ごとの感情情報集計データを報知装置へ送信する通信部と、
を備えたことを特徴とする感情情報集計装置。
請求項７に記載の携帯型動き検出装置と、
請求項８に記載の感情情報集計装置と、
前記感情情報集計装置から受信したユーザ属性集計単位ごとの感情情報集計データを報知する報知装置と、
を有する感情情報取得報知システム。
動きを検出し、該検出した動きを表す動きデータを出力する動き検出部と、
特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得処理を実行する情報処理部と、
前記取得された感情情報を感情情報集計装置へ送信する無線通信部と、
を備えたことを特徴とする携帯型動き検出装置。
携帯型動き検出装置から感情情報を受信する受信部と、
前記受信された感情情報を集計する感情情報集計部と、
前記集計の結果である感情情報集計データを報知装置へ送信する通信部と、を備え、
前記感情情報集計データは、感情情報取得処理が実行されている前記携帯型動き検出装置の総数に対する、特定の感情の感情情報を送信した前記携帯型動き検出装置の数の割合を示す、
ことを特徴とする感情情報集計装置。
請求項１０に記載の携帯型動き検出装置と、
請求項１１に記載の感情情報集計装置と、
前記感情情報集計装置から受信した感情情報集計データを報知する報知装置と、
を有する感情情報取得報知システム。
前記感情情報集計データに基づいて、特定の感情情報の集計値が所定の条件である時刻を記録することを特徴とする請求項２、５、８または１１のいずれか１項に記載の感情情報集計装置。
携帯型動き検出装置と感情情報集計装置と報知装置を有する感情情報取得報知システムの感情情報取得報知方法であり、
前記携帯型動き検出装置が、
動きを検出し、該検出した動きを表す動きデータを出力する動き検出ステップと、
特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得ステップと、
前記取得された感情情報を前記感情情報集計装置へ送信する送信ステップと、
前記感情情報集計装置が、
前記携帯型動き検出装置から感情情報を受信する受信ステップと、
前記受信された感情情報を集計する感情情報集計ステップと、
前記集計の結果である感情情報集計データを前記報知装置へ送信する送信ステップと、
前記報知装置が、前記感情情報集計装置から受信した感情情報集計データを報知する報知ステップと、
を含むことを特徴とする感情情報取得報知方法。
動きを検出し、該検出した動きを表す動きデータを出力する動き検出部を備えた携帯型動き検出装置のコンピュータに、
特定の感情に対応付けられた動き定義データと前記出力された動きデータとに基づいて、前記特定の感情を表す感情情報を取得する感情情報取得ステップと、
前記取得された感情情報を感情情報集計装置へ送信する送信ステップと、
を実行させるためのコンピュータプログラム。
コンピュータに、
携帯型動き検出装置から感情情報を受信する受信ステップと、
前記受信された感情情報を集計する感情情報集計ステップと、
前記集計の結果である感情情報集計データを報知装置へ送信する送信ステップと、
を実行させるためのコンピュータプログラム。