JP2013258450A

JP2013258450A - 情報処理装置

Info

Publication number: JP2013258450A
Application number: JP2012131599A
Authority: JP
Inventors: Satoshi Shirasawa; 聡白澤
Original assignee: NEC Casio Mobile Communications Ltd
Current assignee: NEC Casio Mobile Communications Ltd
Priority date: 2012-06-11
Filing date: 2012-06-11
Publication date: 2013-12-26

Abstract

【課題】視聴者が求めるベストなハイライトシーンを信頼性よく検出することができる情報処理装置を提供する。
【解決手段】情報処理装置１０４は、時系列的に構成されたコンテンツ１００に対し、前記コンテンツ１００の時系列位置に対応させてユーザが入力した前記コンテンツ１００に対する入力情報１０１と、前記ユーザが入力を行った前記コンテンツ１００の時系列位置情報Ｔａとを取得する情報取得手段１０２と、前記情報取得手段１０２により取得した前記入力情報１０１及び前記時系列位置情報Ｔａに基づき、前記時系列における前記入力情報１０１の変動を検出する変動検出手段１０３とを備える。
【選択図】図１０

Description

本発明は、時系列なデータである映像データと音声データの双方またはいずれか一方を収めたコンテナを処理する情報処理装置に関し、特に当該コンテナ内の映像データまたは音声データを視聴するユーザが最も興味をそそられると思われる部分（ハイライトシーンともいう）の検出技術に関する。

近年、デジタル技術の進歩に伴い、時系列なデータである映像データや音声データを一つの入れ物に収め、その入れ物を無線媒体やネットワークを介して送信したり、または、ＣＤやＤＶＤなどの記憶媒体に書き込んで配布したりすることが行われている。入れ物のことを「コンテナ」という。コンテナの実体はコンピュータで処理可能なデジタルデータの集合体であるファイルであり、たとえば、Ａｖｉ、Ｆｌａｓｈ（登録商標）、Ｖｉｄｅｏ、Ｍｏｖ、ＭＰＥＧ２などの多様なファイル形式がある。

上記のとおり、コンテナは一般的に映像データと音声データの両方を含むが、用途によってはいずれか一方だけの場合もある。また、映像データは必ずしも「映像」（動画）とは限らない。たとえば、スライドのように静止画や文字などの動きのない画面のみで構成されたり、あるいは、動きのない画面を一部含んで構成されることもある。いずれにせよ、映像データと音声データの双方を含むか、またはいずれか一方を含むか、あるいは、動画だけで映像データを構成するか、または動画や静止画との混在構成にするか、などは、編集の裁量であり、ここでは意識しない。

図１１は、コンテナの概念構造図である。（ａ）はコンテナの構造を示し、（ｂ）はコンテナ内のデータの時系列的な構造を示す。（ａ）に示すように、コンテナは映像データと音声データの双方または一方を含むことが可能であり、（ｂ）に示すように、コンテナ内のデータはタイムラインと呼ばれる時間軸に沿って並べられている。時間軸は０から始まり、以降、画面ごとにタイムライン上の位置情報、つまり、各点の時間を示す指標（図ではＴ_１、Ｔ_２、Ｔ_３・・・・Ｔ_ｍ）が設定されている。
なお、本明細書においては、タイムライン上の点のことを「時間」と表現することもある。たとえば、時間Ｔ_１と表現したり、あるいは、コメントの送信時間などと表現したりする。一般的に「時間」とは“時刻と時刻との間の時の長さ”のことであり、通常、「長さ」の意味で用いられるが、本明細書では、この解釈（時間＝長さ）を採用しない。単に「時間」という場合は、あくまでも「タイムライン上の一点である位置情報」のことを指すものとする。
また、“時刻”とは「時の流れにおける、ある一点」のことである。この定義からすると、本発明の時間（タイムライン上の一点である位置情報）も時刻といえなくもないが、一般的には一日を２４時間としたときのある一点のこと（たとえば、１２時００分００秒）を時刻というから、それとは区別して「時間」の概念を用いている。

（ｂ）において、映像データを構成する多数の升目の一つ一つが映像の１単位である画面（コマともいう）を表している。先頭のコマの位置情報はＴ_１、２番目のコマの位置情報はＴ_２、３番目のコマの位置情報はＴ_３、・・・・最後のコマの位置情報はＴ_ｍである。一般的に一つの映像データは一つまたは複数のコマからなる映像素材を複数つなげて構成されることが多い。映像素材のことをシーンともいう。たとえば、先頭にオープニングシーンを置き、そのオープニングシーンの後に、第１、第２、第３・・・・の各シーンをつなげ、最後にクローズドシーンを置くという具合である。音声データは各々の映像素材に含まれているものを使用する場合と、ＢＧＭやナレーションのように別途に用意して付け加える場合とがある。どのような映像素材を用いるか、また、どの音声データを用いるかなどについても、編集の裁量であり、ここでは意識しない。

ハイライトシーンの検出とは、（ｂ）のタイムライン上における任意の二つの点で挟まれた区間を検出することをいう。区間（つまり、ハイライトシーン）は、一つのコンテナにつき、複数検出されることもある。ハイライトシーンとは、一般的に視聴者が盛り上がりを感じるシーンのことをいい、たとえば、サッカーの試合におけるゴールシーンなどのことである。

便宜的に二つの点をＴｓ、Ｔｅとする。タイムライン上の位置関係はＴｓ＜Ｔｅ、すなわち、時間的にＴｓが前、Ｔｅが後である。Ｔｓをハイライトシーン開始点、Ｔｅをハイライトシーン終了点という。

ハイライトシーンを検出することができれば、そのハイライトシーンを頭出しして直ちに見る（聞く）ことができ、面倒がなく、また、ハイライトシーンを見逃す（聞き逃す）こともない。

ハイライトシーンの検出技術としては、たとえば、下記の特許文献１に記載のものが知られている。以下、この技術を従来技術ということにすると、この従来技術には、ハイライトシーンの検出を具体的にどのようにして行うのかについての詳しい説明がないものの、（イ）視聴者からのコメント情報を収集して番組中の注目度の高い箇所などを表す視聴統計情報を作成し、（ロ）その番組を録画再生視聴する際に、（イ）で作成された視聴統計情報を参照して注目度の高い番組箇所（ハイライトシーン）を推定することが開示されている。なお、視聴者からのコメント情報の収集には、他のユーザの意見のみならず、本人ユーザの意見も含まれる。
ここで、同文献の段落〔００１２〕に「個々のチャンネル番号について視聴率や視聴率履歴などの視聴統計情報」と記載されているので、上記の（イ）（ロ）における視聴統計情報は「視聴率」に関する情報であると認められる。してみれば、従来技術は、「視聴率」に基づいてハイライトシーンを推定していると解することができる。

特開２０１０−２０６４４７号公報

しかしながら、従来技術は、「視聴率」に基づいてハイライトを推定する仕組みとなっているため、必ずしも視聴者が求めるベストなハイライトシーンを検出できないという問題点がある。
これは、視聴率は、対象となるデータの利用数を表す単なる指標に過ぎないからであり、たとえ、一時的に視聴率が急増したといっても、その急増には、“ながら視聴”（別の仕事を行いながらチョイ見したりチョイ聴きしたりする行為）の利用者や、“ザッピグ”（複数のデータを切り換えながら忙しく視聴する行為）を行う利用者が少なからず含まれているからであり、結局のところ、必ずしも「視聴率の急増点＝ハイライトシーン開始点、視聴率の急減点＝ハイライトシーン終了点」であるとは言い切れないからである。

本発明は、このような問題点に鑑みてなされたものであり、その目的は、視聴者が求めるベストなハイライトシーンを信頼性よく検出することができる情報処理装置を提供することにある。

上記目的を達成するため、本発明に係る情報処理装置は、時系列的に構成されたコンテンツに対し、前記コンテンツの時系列位置に対応させてユーザが入力した前記コンテンツに対する入力情報と、前記ユーザが入力を行った前記コンテンツの時系列位置情報とを取得する情報取得手段と、前記情報取得手段により取得した前記入力情報及び前記時系列位置情報に基づき、前記時系列における前記入力情報の変動を検出する変動検出手段と、を備えることを特徴とする。

本発明によれば、視聴者が求めるベストなハイライトシーンを信頼性よく検出することができる情報処理装置を提供することができる。

実施形態の全体的なシステム構成図である。支援サーバ２の構成図である。支援サーバ２の記憶部９に記憶される情報テーブルの構造図である。情報処理装置３の構成図である。中央制御部１７の機能ブロック図である。情報処理装置３の表示部２０における画面表示の一例を示す図である。一つのコンテンツに関するコメントの変化傾向を示す図である。一つのコンテンツに関するコメントの変化傾向を示す図である。ツイッターの書き込み情報を利用する場合のコンテンツ指定データおよび判別データの一例を示す図である。付記１の構成図である。コンテナの概念構造図である。

以下、図面を参照しながら本発明の実施形態について説明する。
図１は、実施形態の全体的なシステム構成図である。このシステムは、インターネット等のネットワーク１と、このネットワーク１に接続されたハイライトシーン検出支援サーバ（以下、単に支援サーバ２という）と、同じくネットワーク１に接続されたｎ台（ｎは１以上の整数）の情報処理装置３＿１〜３＿ｎと、コンテンツ配信装置４とを含む。なお、以下において、ｎ台の情報処理装置３＿１〜３＿ｎを総称する場合は単に情報処理装置３ということにする。

コンテンツ配信装置４は任意のコンテンツを配信する。コンテンツとは、冒頭で説明した、時系列なデータである映像データと音声データの双方またはいずれか一方を収めたコンテナのことをいい、具体的には、Ａｖｉ、Ｆｌａｓｈ（登録商標）、Ｖｉｄｅｏ、Ｍｏｖ、ＭＰＥＧ２などのファイルのことをいう。

ここで、コンテンツの語源を解説すると、一般的に情報処理の分野においては、コンピュータ等の物理要素（ハードウェア）と、その物理要素上で動作する機能要素（ソフトウェア）という二つの区分法が用いられているが、さらに、ソフトウェアを「コンピュータの処理手順を示すプログラム」と、そのプログラムで利用することができる「デジタルデータ」とに再区分することも行われており、このデジタルデータのことを一般に「コンテンツ」と呼んでいる。

コンテンツは大別して、時間軸の情報を持たない、たとえば、テキストなどの文字データや静止画データもしくはそれらの混在データと、時間軸の情報を持つ、映像や音声などの時系列データからなる情報の集まりとに分けることができる。本明細書におけるコンテンツは、後者の「映像や音声などの時系列データからなる情報の集まり」のことをいい、要するに、前述のコンテナのことをいう。以下、説明の便宜上、コンテンツとコンテナを同義語として取り扱うことにし、特に断りがない限り、コンテンツで統一することにする。なお、コンテンツは、映像や音声などの時系列データのみに限らず、その一部にテキストなどの文字データや静止画データなどを含んでいてもよい。すなわち、本明細書におけるコンテンツは“主に”映像や音声などの時系列データからなる情報の集まりであればよい。

コンテンツの一例は、地上波や衛星などの無線媒体を利用して一斉送信（配信という）されるテレビジョン放送等の番組である。
ここでのテレビジョン放送とは、主として動画ファイル形式のデータを電波を使って、不特定多数のために放送する仕組みのことで、通常は動画に加えて音声、あるいはデータ等の付加情報を送ることができる。電波を使用せず有線で送出するケーブルテレビの形態もある。
なお、法令的な観点からすると、「テレビジョン放送」とは「静止し、又は移動する事物の瞬間的影像及びこれに伴う音声その他の音響を送る放送（文字、図形その他の影像（音声その他の音響を伴うものを含む。）又は信号を併せ送るものを含む。）」と定義されている（放送法２条１項１８号参照）。
番組とは、放送によって送られるコンテンツの総称のことであり、テレビ番組とはテレビジョン放送によって送られるコンテンツの総称のことである。また、テレビプログラム（Television Program）ともいう。
以下、便宜的に、コンテンツをテレビジョン放送番組とし、図示のコンテンツ配信装置４が、地上波等の無線媒体を用いて一斉送信するものとする。ただし、技術思想上は、このような狭義（コンテンツ＝テレビジョン放送番組）の解釈に限定しない。コンテンツは、主に映像や音声などの時系列データからなる情報の集まりであればよく、たとえば、ネットワーク１を介して任意のサーバ（図示の支援サーバ２や他のサーバなど）から情報処理装置３に個別にまたは一斉に送信される態様であってもよい。この態様の場合、テレビジョン放送番組をそのままネットで送信したり、あるいはその録画データをネットで再送信したりすることはもちろんのこと、それ以外にも、たとえば、個人的に制作した様々な内容のコンテンツをネットで送信するものであってもよい。

図２は、支援サーバ２の構成図である。支援サーバ２は、ネットワーク１との通信を中継する通信部５と、キーボード等の操作部６と、コンピュータ（以下、ＣＰＵ７ａ）やプログラム記憶要素（以下、ＲＯＭ７ｂ）及び高速作業エリア用一時記憶要素（以下、ＲＡＭ７ｃ）などを含む中央制御部７と、液晶パネル等の表示部８と、ハードディスク等の大容量の記憶部９とを備える。
ここで、記憶とは、将来に必要な情報をその時まで保持することを言う。
保存とは、情報（例えば、データ：作成したり編集したデータ）を記憶装置（例えば、ＲＡＭやハードディスク等）に記憶させることを言い、また、情報を記憶させる操作を指すこともある。
記録とは、情報を安定した形で定着し、保存された状態にすることを言う。
また、バッファとは、一時的なもので削除されることを前提とした一時記憶を意図した概念であり、後述のＲＡＭ１７ｃや記憶部２３に確保したバッファは、情報を一時保存する機能を有している。一方、記録とは、残しておくことを前提とした記憶を意図した概念である。

支援サーバ２は、好ましくは長時間の運用耐性と安定性に優れたサーバ専用マシンである。支援サーバ２は、一カ所に設置された集中型であっても、あるいは、各所（各地）に分かれて設置された分散型であってもよい。この支援サーバ２は、ＲＯＭ７ｂに格納されている制御プログラムをＲＡＭ７ｃにロードしてＣＰＵ７ａで実行することにより、支援サーバ２に特有の機能、すなわち、各々の情報処理装置３＿１〜３＿ｎから必要に応じて送信される情報を通信部５を介して受信して集計し、その集計結果を記憶部９に蓄積記憶する第一の機能と、蓄積された情報の中から同じコンテンツに関する情報を抽出し、その抽出結果を通信部５を介して各々の情報処理装置３＿１〜３＿ｎへ配信する第二の機能とを少なくとも実現する。
各々の情報処理装置３＿１〜３＿ｎから支援サーバ２に送信される情報には、視聴者のコメント情報（コメント及びそのコメントの時間情報を含む情報）と、視聴中のコンテンツの属性を表すコンテンツ指定データ（たとえば、図９参照）とが含まれる。本実施形態では、一例としてテレビ放送される番組を視聴対象のコンテンツとしているが、これに限定されず、たとえば、ネット配信される動画や音声などのコンテンツまたはそれらの双方を含むコンテンツを視聴対象としてもよい。
なお、視聴者からのコメント情報には、他のユーザの意見のみならず、本人ユーザの意見も含まれる構成にしてもよい（自分がコメントした情報も盛り上がり判別に利用される形態も想定できるからである）。

図３は、支援サーバ２の記憶部９に記憶される情報テーブルの構造図である。この図において、情報テーブル１０は、少なくとも、一つ一つのコンテンツを識別するためのコンテンツ識別情報を格納するコンテンツ識別部１１と、視聴者（ユーザ）によって意図的にコンテンツにつけられた入力情報の一つであるコメント（視聴者の意見や感想など）を格納するコメント格納部１２と、コメントがつけられた時間（タイムライン上の時間で示される位置情報、つまり時系列位置情報）を格納するタイムライン格納部１３とを備えており、たとえば、同一のコンテンツ識別情報を有するレコードをグループ化（図示の例ではコンテンツＡ、コンテンツＢ、コンテンツＣの各々にグループ化）して集計している。

図４は、情報処理装置３の構成図である。情報処理装置３は、ネットワーク１との通信を中継する通信部１４と、コンテンツ配信装置４から適宜に配信されるコンテンツを受信するコンテンツ受信部１５と、キーボード等の操作部１６と、コンピュータ（以下、ＣＰＵ１７ａ）やプログラム記憶要素（以下、ＲＯＭ１７ｂ）及び高速作業エリア用一時記憶要素（以下、ＲＡＭ１７ｃ）などを含む中央制御部１７と、中央制御部１７から出力される映像データを所定の表示形式（たとえば、コンピュータ画像形式やテレビジョン画像形式など）に変換して出力し、また中央制御部１７から出力される音声データをアナログ信号に変換して出力する映像音声出力部１８と、タッチパネル１９付きの液晶ディスプレイ等の表示部２０と、モノラルまたはステレオ方式のスピーカ２１と、タッチパネル１９のタッチ座標を検出して中央制御部１７に出力するタッチ検出部２２と、ハードディスク等の大容量の記憶部２３と、コンテンツ受信部１５で受信したコンテンツを録画（記憶部２３に記憶すること）したり、その録画データを再生したりするための録画再生部２４とを備える。
なお、操作部１６は、キーボード等のキースイッチを備えるが、このキースイッチは、ハードウェアスイッチに別段限定されるものではなく、例えばソフトウェアースイッチであってもよい。また、タッチパネルを使用した構成であってもよい。その場合は、タッチパネル１９付きの液晶ディスプレイ等の表示部２０の表示画面に表示されるソフトキーボードに対応した画面のタッチ操作で情報入力がなされる。

なお、図示の情報処理装置３は、ノート型のパーソナルコンピュータとされているが、これは一例に過ぎない。たとえば、タブレット型のパーソナルコンピュータや据え置き型のパーソナルコンピュータなどであってもよい。また、ノート型やタブレット型のような一体型のもの（すべての要素を一つの筐体に収めたもの）である必然性もない。各要素のいくつかを外付けとするようなパーソナルコンピュータであってもよい。たとえば、通信部１４、コンテンツ受信部１５、操作部１６、タッチパネル１９付きの表示部２０、スピーカ２１、タッチ検出部２２、記憶部２３、録画再生部２４のすべてまたはいずれかを外付けとするものであってもよい。さらに、パーソナルコンピュータにも限定されない。携帯電話機等の携帯電子機器や、その他の種類のコンピュータ応用機器などであってもよい。

図５は、中央制御部１７の機能ブロック図である。“機能”とは、中央制御部１７において、ＣＰＵ１７ａなどのハードウェアリソースと制御プログラムなどのソフトウェアリソースとの有機的結合によって仮想的に実現される動作や動きまたは仕組みのことをいう。機能は実体（形）を伴わない。

実施形態の中央制御部１７で実現される機能は、たとえば、情報取得機能２５と変動検出機能２６の少なくとも二つである。前記のとおり、これらの機能は実体（形）を伴わないものであるが、この態様（実体を伴わないもの）に限定されない。発明の思想上は、上記機能の一部またはすべてを“実体を伴うもの”、すなわち、ハードロジック等で構成してもかまわない。これら二つの機能（情報取得機能２５と変動検出機能２６）の働きについては後で説明する。

図６は、情報処理装置３の表示部２０における画面表示の一例を示す図である。なお、表示部２０における表示画面は、先にも説明したとおり、映像音声出力部１８から出力されたものであるので、図示の表示例は、映像音声出力部１８から出力された画面の一例を示すものと考えて差し支えない。

以下、情報処理装置３の表示部２０における画面表示例として説明する。この図において、画面２７は、面積の異なる４つの表示エリア（Ｅ１〜Ｅ４）と、ソフトウェアで描かれた二つのコマンドボタン（Ｂ１、Ｂ２）とを適宜にレイアウトした構成を有している。

左上に位置するＥ１はコンテンツ表示エリアであり、このＥ１は、コンテンツ受信部１５で受信中のコンテンツの映像データまたは録画再生部２４で再生中のコンテンツの映像データを表示する。また、Ｅ１の下に位置するＥ２はコンテンツ情報表示エリアであり、このＥ２は、Ｅ１に表示中のコンテンツに関する様々な情報（たとえば、コンテンツ名や再生時間など）を表示する。

残り二つのエリア（Ｅ３、Ｅ４）はコメント用である。コメントとは、Ｅ１に表示中のコンテンツに必要に応じてつけられる視聴者の感想や意見などの入力情報の一つのことをいい、右下のＥ４は自分のコメントを作成するためのコメント作成エリア、右上のＥ３はＥ１に表示中のコンテンツにつけられたすべてのコメントを一覧表示するためのコメント一覧表示エリアである。

コメントをつける際の基本手順は以下のとおりである。まず、Ｅ１に表示中のコンテンツを見ている視聴者が特定のシーン（たとえば、タイムライン上の時間Ｔｘにおけるシーン）で何らかのコメントを残したいと思ったとき、当該視聴者は、操作部１６を用いてコメント作成エリア（Ｅ４）に所望の文字情報を入力し、次いで、コメント送信ボタン（Ｂ１）を押してその文字情報と、その時点におけるタイムラインの時間Ｔｘ′とを含む情報を支援サーバ２に送信する。

支援サーバ２は、受信した情報を他の情報処理装置３からの情報（ただし、同一のコンテンツに関する情報）と一緒に集計してグループ化し、前記の情報テーブル１０に格納して記憶部９に蓄積記憶すると共に、その蓄積情報を同一のコンテンツを視聴中のすべての情報処理装置３に宛てて配信し、配信先の情報処理装置３は、配信された情報に含まれるコメントをコメント一覧表示エリア（Ｅ３）にリスト表示する。

ここで、コメントの作成、すなわち、コメント作成エリア（Ｅ４）への文字情報の入力には少なからず時間を要する。以下、この時間のことを「遅延時間」ということにする。遅延時間は前記のＴｘからＴｘ′までの間の時間である。

このため、コンテンツの注目シーンとコメント送信との間に上記遅延時間に相当するずれ（Ｔｘ′−Ｔｘ）を生じてしまう。録画済みのコンテンツを再生している場合であれば、時間Ｔｘで一時停止を行い、その間に文字情報を入力して送信することにより、Ｔｘ＝Ｔｘ′となってずれを生じないが、コンテンツをリアルタイムに再生している場合には上記のずれを無くすことが難しい。

リアルタイム再生におけるずれを無くすための対策の一つは、文字情報を単純化することである。たとえば、ネット動画の世界では「拍手」を数字の“８”で表したり、あるいは「疑問」をクエスチョンマーク“？”で表したりすることが行われているので、たとえば、「８８」や「？」などと入力してコメント送信ボタン（Ｂ１）を押すことにより、上記の“ずれ”を極力少なくすることができる。

または、「追っかけ再生」の機能を利用してもよい。追っかけ再生とは、録画（長期記録を目的とした録画に限らない。再生後に抹消される一時的な録画でもよい。）しながら再生することをいい、任意の位置で一時停止したり、巻き戻ししたりすることができる特殊な再生機能のことをいう。タイムシフト再生ともいう。この機能を利用すると、上記の“ずれ”を無くすことができる。コンテンツの注目シーン（時間Ｔｘ）で一時停止し、その間にコメントを入力して送信すればよいからである。

このように、文字情報を単純化したり、録画済みのコンテンツを再生したり、あるいは、追っかけ再生の機能を利用したりすることによって、コンテンツの注目シーンとコメントとの時間的なずれを無くす（または極力少なくする）ことが可能であるが、実施形態では念のために、さらに、ワンタッチでハイライトシーンを指定することができる手段を提供している。その手段は、画面２７の右下のシーン指定ボタン（Ｂ２）である。視聴者によってこのシーン指定ボタン（Ｂ２）が押されると、情報処理装置３は、直ちに所要の付加情報（少なくともコンテンツの識別情報とタイムラインの時間を含む情報）を生成して支援サーバ２に送信する。したがって、このシーン指定ボタン（Ｂ２）を利用することによっても、上記のずれ問題を解消することができる（請求項６）。

なお、すでにコメント作成エリア（Ｅ４）に文字情報が入力済みであれば、シーン指定ボタン（Ｂ２）を押したときに、この入力済みの文字情報と、上記の所要の情報（少なくともコンテンツの識別情報とタイムラインの時間を含む情報）とを一緒にして支援サーバ２に送信するようにしてもよい。

次に、情報処理装置３におけるハイライトシーンの検出原理について説明する。
図７は、一つのコンテンツに関するコメントの変化傾向を示す図である。この図において、縦軸は一つのコンテンツに関する累計コメント数を示し、横軸は同一つのコンテンツのタイムラインを示しており、太折れ線のグラフ２８は同一つのコンテンツに関する累計コメント数の時間的な変化傾向を示している。このグラフ２８の元になっているコメントは、元々、支援サーバ２で集計され、且つ、その支援サーバ２から情報処理装置３に配信され、中央制御部１７の情報取得機能２９によって取得されたものであり、グラフ２８は、情報処理装置３の変動検出機能２６によって数値的に処理されたものである。

図示のグラフ２８を観察すると、タイムラインの開始点（横軸の左端の点）から所定点（ＭＴ＿Ｂ１）までは緩やかにコメント数が増加し、同点（ＭＴ＿Ｂ１）を越えるとコメント数が急増する様子が認められる。さらに、同点（ＭＴ＿Ｂ１）を過ぎた後の所定点（ＭＴ＿Ｅ１）に至るとコメント数の急増が止まり、再び穏増する傾向に変化する様子が認められる。

このようなグラフ２８の変化から、二つの点（ＭＴ＿Ｂ１とＭＴ＿Ｅ１）の間の区間をハイライトシーンとして検出することができる。少なくとも第一の点（ＭＴ＿Ｂ１）でコメント数が急増し、また、第二の点（ＭＴ＿Ｅ１）でコメント数の急増が止まっているからであり、第一の点（ＭＴ＿Ｂ１）をハイライトシーン開始点、第二の点（ＭＴ＿Ｅ１）をハイライトシーン終了点とすることができるからである。
情報処理装置３の変動検出機能２６は、このような仕組みに基づいて、ハイライトシーンを検出する（請求項１）。

このように、実施形態では「コメント数」に基づいてハイライトシーンを検出しているのに対して、冒頭の従来技術では「視聴率」に基づいてハイライトシーンを検出している。両者を対比すると、ハイライトシーンの検出信頼性の点で実施形態の仕組みの方に優位性がある。これは、「視聴率」は“ながら視聴”や“ザッピング”の視聴者を含み、必ずしもコンテンツに対する正確な視聴情報を表していない一方、「コメント数」は、視聴者による積極的且つ明示的な行為である「コメントの投稿」の数を表し、且つ、コメントの投稿は感動や盛り上がりを感じたときに行われるのが一般であるからであり、ハイライトシーンの検出に用いる基本データとしてふさわしいからである。

ハイライトシーン開始点（ＭＴ＿Ｂ１）とハイライトシーン終了点（ＭＴ＿Ｅ１）は、たとえば、以下のように検出してもよい。すなわち、図示のように、所定の閾値ＭＰ１を設定し、この閾値ＭＰ１を累計コメント数が越えた点をハイライトシーン開始点（ＭＴ＿Ｂ１）としてもよい。また、ハイライトシーン終了点（ＭＴ＿Ｅ１）については、たとえば、ハイライトシーン開始点（ＭＴ＿Ｂ１）の通過後に、累計コメント数の増加率が急増から緩増に転じる点を検出するようにしてもよい。

また、ハイライトシーン開始点とハイライトシーン終了点の検出を以下のようにしてもよい。
図８は、一つのコンテンツに関するコメントの変化傾向を示す図である。先の図７では、累計コメント数の変化傾向を示していたが、この図８では、単位時間（たとえば、１分間）あたりのコメント数の変化傾向を示す点で相違する。この図において、縦軸は一つのコンテンツに関する単位時間当たりのコメント数を示し、横軸は同一つのコンテンツのタイムラインを示しており、太折れ線のグラフ２９は、同一つのコンテンツに関する単位時間当たりのコメント数の変化傾向を示している。このグラフ２９の元になっているコメントも、元々、支援サーバ２で集計され、且つ、その支援サーバ２から情報処理装置３に配信され、中央制御部１７の情報取得機能２９によって取得されたものであり、グラフ２９は、情報処理装置３の変動検出機能２６によって数値的に処理されたものである。

図示のグラフ２９を観察すると、タイムラインの開始点から所定点（ＭＴ＿Ｂ２）までは単位時間当たりのコメント数が若干の上下動を伴ってほぼ一定の大きさで推移し、同点（ＭＴ＿Ｂ２）を越えると単位時間当たりのコメント数が急増する様子が認められる。さらに、同点（ＭＴ＿Ｂ２）を過ぎた後の所定点（ＭＴ＿Ｅ２）に至る間に、単位時間当たりのコメント数が急増から明らかな減少に転じ、且つ、所定点（ＭＴ＿Ｅ２）以降、単位時間当たりのコメント数が若干の上下動を伴ってほぼ一定の大きさで推移しながら緩減する様子が認められる。

このようなグラフ２９の変化からも、二つの点（ＭＴ＿Ｂ２とＭＴ＿Ｅ２）の間の区間をハイライトシーンとして検出することができる。少なくとも第一の点（ＭＴ＿Ｂ２）で単位時間当たりのコメント数が急増し、また、第二の点（ＭＴ＿Ｅ２）で単位時間当たりのコメント数が一定の大きさの推移に移行しているからであり、第一の点（ＭＴ＿Ｂ２）をハイライトシーン開始点、第二の点（ＭＴ＿Ｅ２）をハイライトシーン終了点とすることができるからである。
情報処理装置３の変動検出機能２６は、このような仕組みに基づいて、ハイライトシーンを検出する（請求項１）。

ハイライトシーン開始点（ＭＴ＿Ｂ２）とハイライトシーン終了点（ＭＴ＿Ｅ２）は、たとえば、以下のようにして検出してもよい。すなわち、図示のように、所定の閾値ＭＰ２を設定し、この閾値ＭＰ２を単位時間当たりのコメント数が越えた点をハイライトシーン開始点（ＭＴ＿Ｂ２）とするとともに、同閾値ＭＰ２を単位時間当たりのコメント数が下回った点をハイライトシーン終了点（ＭＴ＿Ｅ２）としてもよい。あるいは、ハイライトシーン終了点（ＭＴ＿Ｅ２）用の閾値を別途に設けてもよい。つまり、ハイライトシーン開始用の閾値とハイライトシーン終了点用の閾値とを個別に設定してもよい。ハイライトシーン開始用の閾値の方がハイライトシーンを特定する上でより重要な要素であり、ハイライトシーン終了用の閾値よりも小さく、即ち感度を良く設定されることが好ましい。この場合には、ハイライトシーンの特定を素早く行いつつも、ハイライトシーンを長く認識してしまうことを防止することができる。

このようにして、情報処理装置３の変動検出機能２６で、二種類のハイライトシーン開始点（ＭＴ＿Ｂ１及びＭＴ＿Ｂ２）と、同じく二種類のハイライトシーン終了点（ＭＴ＿Ｅ１及びＭＴ＿Ｅ２）とを検出することができる。つまり、一つのコンテンツに関し、ＭＴ＿Ｂ１からＭＴ＿Ｅ１までの第一のハイライトシーンと、ＭＴ＿Ｂ２からＭＴ＿Ｅ２までの第二のハイライトシーンとを検出することができる。

これら二つのハイライトシーンは本来同じはず（一致するはず）であるが、コメント数の増え方によっては一致しない場合があり得る。第一のハイライトシーンが「累計」のコメント数に基づいて検出されたものであり、第二のハイライトシーンが「単位時間当たり」のコメント数に基づいて検出されたものであるからであり、元になっている情報に違いがあるからである。

したがって、実用上の観点からは、以下のようにすることが望ましい。すなわち、情報処理装置３の変動検出機能２６で、上記二種類のハイライトシーン開始点（ＭＴ＿Ｂ１及びＭＴ＿Ｂ２）と、上記二種類のハイライトシーン終了点（ＭＴ＿Ｅ１及びＭＴ＿Ｅ２）とを用い、第一のハイライトシーンと第二のハイライトシーンの平均をとって、その平均値を最終的なハイライトシーンとして決定することが望ましい。

具体的には、ハイライトシーンの平均開始点（（ＭＴ＿Ｂ１＋ＭＴ＿Ｂ２）／２）と平均終了点（（ＭＴ＿Ｅ１＋ＭＴ＿Ｅ２）／２）とを算出し、それらの平均開始点と平均終了点との間の区間を最終的なハイライトシーン（以下、第三のハイライトシーンという）として決定する。

このようにすると、元になっている情報（累計のコメント数と単位時間当たりのコメント数）の違いに伴う誤差を平均化して、信頼性のあるハイライトシーン（第三のハイライトシーン）を得ることができる。

さらに、この第三のハイライトシーンに、一般的なコメント作成時間やコメント配信に要する時間等の遅延時間（Ｄ）分を加味する補正を行うとさらに好ましい。すなわち、情報処理装置３の変動検出機能２６で、（（ＭＴ＿Ｂ１＋ＭＴ＿Ｂ２）／２−Ｄ）および（（ＭＴ＿Ｅ１＋ＭＴ＿Ｅ２）／２−Ｄ）の補正計算を行ってもよい。この補正後のハイライトシーンを、第四のハイライトシーンということにする。

以上のようにして、四種類のハイライトシーンを検出することができる。
＜第一のハイライトシーン＞
累計コメント数に基づいて検出されたもの。信頼性は元になっている情報（累計コメント数）の精度に依存する。遅延補正を行っていないため、リアルタイムのコンテンツに適用するとタイムラグ（視聴者が意図する注目シーンと実際のコメント投稿動作とのずれ）を生じる可能性がある。
＜第二のハイライトシーン＞
単位時間当たりのコメント数に基づいて検出されたもの。信頼性は元になっている情報（単位時間当たりのコメント数）の精度に依存する。第一のハイライトシーンと同様に遅延補正を行っていないため、リアルタイムのコンテンツに適用するとタイムラグを生じる可能性がある。
＜第三のハイライトシーン＞
第一のハイライトシーンと第二のハイライトシーンとを平均化したもの。元になっている情報（累計のコメント数と単位時間当たりのコメント数）の違いに伴う誤差を平均化しているので信頼性が高い。第一や第二のハイライトシーンと同様に遅延補正を行っていないため、リアルタイムのコンテンツに適用するとタイムラグを生じる可能性がある。
＜第四のハイライトシーン＞
第三のハイライトシーンに遅延補正を行ったもの。信頼性が高く（第三のハイライトシーンと同等）、且つ、リアルタイムのコンテンツに適用してもタイムラグを生じない。

実用上は、これら四種類のハイライトシーンのうち信頼性の高い第三のハイライトシーンまたは第四のハイライトシーンを使用することが望ましい。特に、リアルタイムなコンテンツ（テレビジョン放送番組等）に対しては第四のハイライトシーンを使用し、また、非リアルタイムなコンテンツ（テレビジョン放送番組等の録画データやネット配信された動画データなどを再生したもの）に対しては第三のハイライトシーンを使用することが望ましい。ただし、これらの使い方は、あくまでも実用上のベストモードである。信頼性やタイムラグが問題とならない場合には、残り二つのハイライトシーン（第一と第二のハイライトシーン）のいずれかを使用してもかまわない。

情報処理装置３の中央制御部１７は、上記四種類のハイライトシーン（第一のハイライトシーン・・・・第四のハイライトシーン）のいずれかの情報、つまり、ハイライトシーン開始点とハイライトシーン終了点の情報を、視聴中のコンテンツの属性を表すコンテンツ指定データと一緒にして記憶部２３に記憶する。

次に、記憶部２３に記憶された、ハイライトシーン開始点とハイライトシーン終了点の情報（以下、ハイライトシーン情報という）のいくつかの使用例について説明する。

＜ハイライトシーン情報の第１の使用例＞
コンテンツのハイライトシーン部分だけを取り出して再生する使用例である。コンテンツは、あらかじめ記憶部２３に録画データとして記憶しておいたものを読み出して再生したものであってもよく、あるいは、コンテンツ配信装置４から再配信の予定があれば、その予定に合わせて受信したものであってもよい。説明の便宜上、ハイライトシーン情報に対応したコンテンツが録画データとして記憶部２３に記憶されていたものとする。この場合、録画再生部２４は、記憶部２３から該当するコンテンツを読み出して中央制御部１７に出力するとともに、その読み出しに際して、記憶部２３からハイライトシーン開始点とハイライトシーン終了点の情報を読み出し、これらのハイライトシーン開始点とハイライトシーン終了点とを、それぞれコンテンツの再生開始点と再生終了点に設定する。
このようにすると、コンテンツのハイライトシーン部分だけを取り出して表示部２０に表示したり、スピーカ２１から出力したりすることができ、余計なシーンを視聴する無駄がない（請求項２）。

＜ハイライトシーン情報の第２の使用例＞
録画再生部２４におけるタイムシフト再生（追っかけ再生）に適用する使用例である。コンテンツ配信装置４で受信したリアルタイムのコンテンツを使用する。中央制御部１７は、コンテンツ配信装置４からのコンテンツをコンテンツ受信部１５で受信して読み込みながら、ＲＡＭ１７ｃや記憶部２３に確保したバッファに一時保存していく。
ここで、バッファ（buffer）とは、機器やソフトウェアの間でデータをやり取りするときに、処理速度や転送速度の差を補うためにデータを一時的に保存しておく記憶領域のことをいう。バッファの容量は追っかけ再生に必要な過不足のないサイズであり、好ましくは、コンテンツの再生時間のすべてに相当するサイズである。ただし、ＲＡＭ１７ｃや記憶部２３の記憶容量は上限があるため、バッファの容量にも自ずと制限があることは勿論である。
中央制御部１７は、バッファに一時保存されたコンテンツを読み出して表示部２０に出力するが、その際に、記憶部２３からハイライトシーン開始点とハイライトシーン終了点の情報を読み出し、これらのハイライトシーン開始点とハイライトシーン終了点とを、それぞれコンテンツの再生開始点と再生終了点に設定する。
このようにすると、リアルタイム配信または放送されるコンテンツにおいても、前記と同様に、コンテンツのハイライトシーン部分だけを取り出して表示部２０に表示したり、スピーカ２１から出力したりすることができ、余計なシーンを視聴する無駄がない（請求項３）。

＜ハイライトシーン情報の第３の使用例＞
視聴中のコンテンツのハイライトシーンだけを抜き出して録画する際の使用例である。録画再生部２４は、現在視聴中のコンテンツを記憶部２３に録画する際に、記憶部２３からハイライトシーン開始点とハイライトシーン終了点の情報を読み出し、これらのハイライトシーン開始点とハイライトシーン終了点とを、それぞれコンテンツの録画開始点と録画終了点に設定する。
このようにすると、視聴中のコンテンツのハイライトシーンだけを抜き出して録画することができ、再生時に余計なシーンを視聴する無駄がない（請求項４）。

＜ハイライトシーン情報の第４の使用例＞
前記第３の使用例の発展例であり、複数のハイライトシーンを取り出して録画する際の使用例である。録画再生部２４は、現在視聴中のコンテンツを記憶部２３に録画する際に、記憶部２３からハイライトシーン開始点とハイライトシーン終了点の情報を読み出し、これらのハイライトシーン開始点とハイライトシーン終了点とを、それぞれコンテンツの録画開始点と録画終了点に設定するが、記憶部２３から読み出されるハイライトシーン開始点とハイライトシーン終了点の情報が“複数組”である点で相違する。つまり、この第４の使用例では、コンテンツの録画に際して、複数のハイライトシーンを取り出して録画することがポイントである。たとえば、記憶部２３から読み出されるハイライトシーン開始点とハイライトシーン終了点の情報がＮ組であったと仮定すると、コンテンツからＮ個のハイライトシーンを取り出し、それらＮ個のハイライトシーンをつなぎ合わせて録画する。
このようにすると、一つのコンテンツに含まれる複数のハイライトシーンを抜き出して録画することができる。このため、再生の際にそれら複数のハイライトシーンだけを連続して視聴することができ、余計なシーンを視聴する無駄がない（請求項５）。

なお、上述した実施形態では、ハイライトシーン開始点を、累計コメント数や単位時間当たりのコメント数に基づいて検出した一つの点（タイムライン上における一つの点）としているが、これに限定されない。たとえば、上記のようにして検出されたハイライトシーン開始点を所定時間だけ前にずらしてもよい。この所定時間は、タイムラインを遡った最初のシーン特異点までの時間としてもよい。シーン特異点は、たとえば、シーンの切り替わり点などであり、このような特異点はハードディスク録画機に標準搭載されているチャプター分割部検出機能を使うなどして検出することができる。あるいは、シーン特異点をタイムラインを遡った最初のコマーシャル部分としてもよい。

また、ハイライトシーン終了点についても同様にずらしてもよい。たとえば、累計コメント数や単位時間当たりのコメント数に基づいて検出されたハイライト終了点を、その検出位置から一定時間進んだ時点までずらしてもよく、あるいは、タイムラインを進んだ最初のシーン特異点（前記と同様）や最初のコマーシャル部分までずらしてもよい。

次に、上述した実施形態の変形例について説明する。
（１）第１変形例
上述した実施形態では、コンテンツの表示画面と同一画面上のコメント作成エリア（Ｅ４）に入力されたコメントを支援サーバ２で集計し、そのコメント数に基づいてハイライトシーンを検出しているが、これに限らない。たとえば、ツイッターやインターネット上の実況掲示板などの他のシステムに投稿されるコメント数に基づいてハイライトシーンを検出するようにしてもよい。この場合、対象となるコンテンツは、ツイッターであればハッシュタグから検索でき、また、実況掲示板であればスレッドタイトルなどから検索することができる。ツイッターや実況掲示板などの他のシステムに投稿された大量のコメントを積極的に活用することができ、より一層、ハイライトシーンの検出精度を高めることができるうえ、支援サーバ２も不要とすることができる。

図９は、ツイッターの書き込み情報を利用する場合のコンテンツ指定データおよび判別データの一例を示す図である。この図において、コンテンツ指定データ３０は、コンテンツの種別を表す「チャンネル情報」と、コンテンツ名を表す「番組名」と、コンテンツの配信日時を表す「放送日時」と、コメントの書き込み場所を表す「コメントデータ元」と、コメント抽出用の情報を表す「キーワード」などを含み、また、判別データ３１は、ハイライトシーン番号「データＮｏ．」と、盛り上がり開始時間（タイムライン上の時間）を表す「盛り上がり開始時間」と、盛り上がり終了時間（同）を表す「盛り上がり開始時間」などを含む。

（２）第２変形例
上述した実施形態の情報処理装置３では、コンテンツのハイライトシーンからタイムシフト再生（追っかけ再生）を行うことができるが、この第２変形例による情報処理装置３では、これに加えてコメント一覧表示エリア（Ｅ３）にコメントもタイムシフト再生表示する。具体的には、録画再生部２４が視聴中のコンテンツをタイムシフト再生する際に、中央制御部１７がそのタイムシフト再生するタイムライン時間に対応するコメントと、そのコメントの時間情報とを含むコメント情報とを、記憶部２３から読み出して表示画面のコメント一覧表示エリア（Ｅ３）に表示する。
このように、コメント情報のタイムシフト再生表示を行えば、録画していたコンテンツのハイライトシーンからタイムシフト再生により臨場感を与えることが可能になる。

（３）第３変形例
第３変形例による情報処理装置３では、視聴するコンテンツと、ハイライトシーンの情報と、コメント情報（コメント及びそのコメントの時間情報を含む情報）とを支援サーバ２から取得し、取得したコンテンツを再生視聴する際に、ハイライトシーンの情報を用いて再生箇所を特定して再生表示する。この場合、ハイライトシーンの情報を用いて対応するコメント情報を抽出してコンテンツと共に画面表示する。また、ハイライトシーンの情報に基づき取得したコンテンツからハイライトシーンを切り出す編集を施してダイジェスト版を作成して表示する。その際、対応するコメント情報を抽出してダイジェスト版と共に表示する。なお、コメント情報は、ハイライトシーンの情報と関連付けて記憶し、またはハイライトシーンの情報中に包含させる態様としてもよい。
このようにすれば、ハイライトシーンをまとめたダイジェスト版を視聴することができ、ハイライトシーンの視聴の手間を無くすことができる。

（４）第４変形例
第４変形例による情報処理装置３では、コンテンツを見ながらコメントを送信する場合に、そのコンテンツのハイライトシーンを指定するための付加情報（タイムライン上の時間情報など）を自動的に作成し、その付加情報をコメント情報（コメント及びそのコメントの時間情報を含む情報）に加えて送信する。具体的には、図６のシーン送信ボタンＢ２を操作した場合に、そのときのタイムライン上の時間と、ハイライトシーンを特定する時間情報と、図９に図示するコンテンツ指定データを含む付加情報とを生成して支援サーバ２に送信する。また、たとえば、「いいね」等の予め用意された特定文や記号、符号、キャラクタなどを規定のコメントとして付加する態様としてもよい。こうした付加情報を含むコメント情報を受信した情報処理装置３側では、当該付加情報に従ってハイライトシーンおよびコメントを表示する。
このようにすれば、シーン送信ボタンＢ２を操作するだけで、直ちに所要の情報を支援サーバ２に送信することができ、タイムラグを生じない。

また、付加情報を所定のアルゴリズムでデータ圧縮し、圧縮された付加情報をコメント情報に加えて送信する態様とすることもできる。圧縮された付加情報を受信した側では、圧縮された付加情報を伸長復元し、復元された付加情報に従ってハイライトシーンおよびコメントを表示する態様とすれば、ツイッターなど、書き込み文字数に制限がある場合にユーザコメント領域を圧迫することなく対応可能になる。

（５）第５変形例
第５変形例による情報処理装置３では、自分との関係性が明確なユーザからのコメント情報（コメント及びそのコメントの時間情報を含む情報）のみを用いて処理を実行する。たとえば、ツイッターでフォローしている対象のユーザなど、自分との関連が明確なユーザのコメント情報を用いてコンテンツのハイライトシーンを検出する。このため、この第５変形例では、情報処理装置３から支援サーバ２にコメント情報を含む情報を送信する際に、送信者のユーザ情報も一緒に送信する。このユーザ情報はコメント投稿者の固有識別情報であり、ツイッターのアカウント情報などである。支援サーバ２は、たとえば、図３の情報テーブル１０にユーザ情報格納部を追加するなどして、そのユーザ情報格納部に各々の情報処理装置３から送信されたユーザ情報を格納し、情報処理装置３にコメント情報などを配信する際には、このユーザ情報も一緒に配信する。
このようにすれば、情報処理装置３でコメントを一覧表示する際に、自分とは無関係なユーザのコメントを表示から省くことが可能となり、不必要なコメント表示を回避することができる。

（６）第６変形例
第６変形例による情報処理装置３では、ユーザが現在の視聴内容を優先する場合、付加情報により指定されたハイライトシーンに関連したコメントだけを表示する。つまり、現在の視聴を優先するものの、他のコンテンツのハイライトシーンの状況を知りたい場合に付加情報により指定されたハイライトシーンに関連したコメントだけを表示する。コメントは、コメント一覧表示エリア（Ｅ３）の内容を書き換えて表示するか、あるいはコメント表示用の新たなウィンドウを表示エリアとして別途設けてそこに表示してもよい。これにより、現在の視聴を邪魔されることなく他の状況を知ることができる。

また、コメントを表示して確認した後、付加情報により指定されたコンテンツのハイライトシーンを再生視聴する態様としてもよい。この場合、ハイライトシーンを再生視聴し終えると、それ以前に視聴していたコンテンツへの視聴に戻るか、あるいはハイライトシーン以降を継続して視聴するかの何れかを選択することができる。以前に観ていたコンテンツへの視聴に戻る場合には、直前の再生シーンに戻り、そこから追っかけ再生する視聴形態とすることもできる。

（７）第７変形例
第７変形例による情報処理装置３では、視聴していない他のコンテンツに関連したコメント情報（コメント及びそのコメントの時間情報を含む情報）に基づいてハイライトシーンが判定された場合に、該当するコンテンツのハイライトシーンに遡って再生視聴（ザッピング視聴）する。前出の図３において、支援サーバ２の記憶部９に記憶されている情報テーブル１０には、いくつかのコンテンツの情報（同図ではコンテンツＡ、コンテンツＢ、コンテンツＣの各情報）が格納されている。今、情報処理装置３で視聴中のコンテンツをコンテンツＡとし、視聴していないコンテンツをコンテンツＢと仮定する。そして、このコンテンツＢに関連したコメント情報に基づいてハイライトシーンが判定された場合には、コンテンツＡの視聴をやめてコンテンツＢの視聴に変更し、コンテンツＢのハイライトシーンに遡って再生視聴（ザッピング視聴）する。コンテンツＢは支援サーバ２から配布されたものであってもよいし、あるいは、録画データとして情報処理装置３の記憶部２３に記憶されていたものであってもよい。
この場合、コンテンツＢのハイライトシーンを再生視聴すると同時に、それに対応するコメントも表示するようにしてもよい。または、視聴中のコンテンツ（上記の例示ではコンテンツＡ）はそのままとし、コンテンツＢのハイライトシーンのコメントだけを別ウィンドウで表示するようにしてもよい。
こうすることで、視聴していない他のコンテンツＢのハイライトシーンを視聴したり、ハイライトシーンのコメントを確認したりすることができる。

（８）第８変形例
第８変形例による情報処理装置３では、情報処理装置３から支援サーバ２に送信する情報にコメント投稿者のユーザの情報（以下、ユーザ情報）を含むようにする。つまり、情報処理装置３の情報取得機能２５は、コメント投稿者のユーザ情報を含む情報を取得し、それらの情報を支援サーバ２に送信するようにする。また、支援サーバ２から情報処理装置３に配信される情報にも、このユーザ情報が含まれるようにする。そして、情報処理装置３の情報取得機能２５で、ユーザ情報の識別を行い、所定の条件（たとえば、友人関係等）を満たすユーザが入力した入力情報（コメント等）とコメント情報（コメント及びそのコメントの時間情報を含む情報）とを抽出すると共に、変動検出機能２６で、その抽出結果に含まれる少なくともコメントと、そのコメントの時間情報（コンテンツの時系列位置情報）とに基づき、コンテンツの時系列位置に対する入力情報の変動を検出する。
このようにすると、所定の条件を満たしたユーザだけの入力情報を用いてハイライトシーンを検出することができ、無関係なユーザを省いてハイライトシーンの検出信頼性を高めることができる（請求項７）。

（９）第９変形例
第９変形例による情報処理装置３では、コンテンツ配信装置４から配信されたコンテンツをコンテンツ表示エリア（Ｅ１）に出力し、また、支援サーバ２から配信されたコメント情報（コメント及びそのコメントの時間情報を含む情報）をコメント一覧表示エリア（Ｅ３）に出力する際に、以下の工夫を講じる。すなわち、情報処理装置３は、前記コンテンツを出力中に変動検出機能２６で入力情報の変動を検出すると、コンテンツ表示エリア（Ｅ１）へのコンテンツの出力を継続し、また、前記変動に対応する時系列位置に対応する入力情報をコメント一覧表示エリア（Ｅ３）に出力する。
このようにすると、ハイライトシーンの表示とコメント表示の同期をとることができ、コメント表示の違和感を無くすことができる（請求項８）。

（１０）第１０変形例
第１０変形例による情報処理装置３では、情報取得機能２５が、複数のコンテンツに対してユーザがそれぞれ入力した複数の入力情報（コメント等）と、それぞれのコンテンツの時系列位置情報とを取得するとともに、変動検出機能２６が、前記複数のコンテンツに対する前記入力情報の変動をそれぞれ検出する。
このようにすると、複数のコンテンツのハイライトシーンと、各々のハイライトシーンのコメントとを交互に切り換えながら視聴する動作（ザッピング）を行うことができる（請求項９）。

（１１）第１１変形例
第１１変形例による情報処理装置３では、情報取得機能２５が、入力情報（コメント等）を出力する入力情報出力手段を兼ねる。この入力情報出力手段は、変動検出機能２６で検出された変動に対応する他のコンテンツの時系列位置に対応する入力情報をコンテンツ一覧表示エリア（Ｅ３）に出力する。そして、情報処理装置３は、コンテンツ表示エリア（Ｅ１）に一のコンテンツを出力中に、変動検出機能２６が他のコンテンツに対する入力情報の変動を検出した場合に、前記一のコンテンツをコンテンツ表示エリア（Ｅ１）に継続して出力する。
このようにすると、一のコンテンツを表示中に、他のコンテンツの入力情報をコンテンツ一覧表示エリア（Ｅ３）に出力することができ、視聴中でない他のコンテンツの入力情報も確認することができる（請求項１０）。

なお、本発明は、前述した実施形態や各種変形例に限定されるものではなく、本発明の範囲で種々変形することが可能である。一例として挙げれば、本実施形態は、携帯電話やスマートフォン等の情報処理装置に限らず、ネットワーク接続可能な通信機能を備える他の装置（ゲーム装置、タブレット型パーソナルコンピュータ、ラップトップ型やノート型のパーソナルコンピュータ、デジタルテレビジョン受信装置、ワンセグデジタルテレビジョン受信装置など）にも適用可能であることは言うまでもない。

次に、本発明の特徴を付記する。なお、上記の実施形態の一部または全部は、以下の付記のように記載され得るが、その記載に限定されるものではない。
（付記１）
図１０は、付記１の構成図である。この図に示すように、付記１は、時系列的に構成されたコンテンツ１００に対し、前記コンテンツ１００の時系列位置に対応させてユーザが入力した前記コンテンツ１００に対する入力情報１０１と、前記ユーザが入力を行った前記コンテンツ１００の時系列位置情報Ｔａとを取得する情報取得手段１０２と、
前記情報取得手段１０２により取得した前記入力情報１０１及び前記時系列位置情報Ｔａに基づき、前記時系列における前記入力情報１０１の変動を検出する変動検出手段１０３と、
を備えることを特徴とする情報処理装置１０４である。
この付記１における情報取得手段１０２は実施形態の情報取得機能２５に相当し、変動検出手段１０３は実施形態の変動検出機能２６に相当し、情報処理装置１０４は実施形態の情報処理装置３に相当する。
（付記２）
付記２は、更に、コンテンツ出力手段を備え、
前記コンテンツ出力手段は、前記変動検出手段が検出した変動に対応する時系列位置に応じてコンテンツを出力することを特徴とする付記１記載の情報処理装置である。
（付記３）
付記３は、更に、リアルタイム配信または放送されるコンテンツを取得するコンテンツ取得手段と、
前記コンテンツ取得手段により取得されたコンテンツをバッファするバッファ手段とを備え、
前記コンテンツ出力手段は、前記コンテンツ取得手段により取得されたコンテンツを出力し、前記変動検出手段が検出した変動に対応する時系列位置に応じて前記バッファ手段にバッファされたコンテンツを出力することを特徴とする付記１乃至２の何れかに記載の情報処理装置である。
（付記４）
付記４は、更に、コンテンツを記録するコンテンツ記録手段を備え、
前記コンテンツ記録手段は、前記変動検出手段が検出した変動に対応する時系列位置に応じてコンテンツを記録することを特徴とする付記１乃至３の何れか一に記載の情報処理装置である。
（付記５）
付記５は、前記コンテンツ記録手段は、前記変動検出手段が検出した変動に対応する時系列位置に応じて複数個所のコンテンツを記録し、当該複数個所の記録データを結合することを特徴とする付記４記載の情報処理装置である。
（付記６）
付記６は、前記入力情報は、コンテンツのシーンを指定する付加情報を含むことを特徴とする付記１乃至５の何れか一に記載の情報処理装置である。
（付記７）
付記７は、前記入力情報は、当該入力情報を入力したユーザの情報を含み、
前記変動検出手段は、所定の条件を満たすユーザが入力した前記入力情報と前記コンテンツの時系列位置情報に基づき、前記コンテンツの時系列位置に対する前記入力情報の変動を検出することを特徴とする付記１記載の情報処理装置である。
（付記８）
付記８は、更に、前記入力情報を出力する入力情報出力手段を備え、
前記コンテンツ出力手段は、前記コンテンツを出力中に、前記変動検出手段が前記入力情報の変動を検出した場合に、出力中のコンテンツの出力を継続し、
前記入力情報出力手段は、前記変動検出手段が検出した変動に対応する時系列位置に対応する入力情報を出力することを特徴とする付記２記載の情報処理装置である。
（付記９）
付記９は、前記情報取得手段は、複数のコンテンツに対してユーザがそれぞれ入力した複数の入力情報と、それぞれのコンテンツの前記時系列位置情報とを取得し、
前記変動検出手段は、前記複数のコンテンツに対する前記入力情報の変動をそれぞれ検出することを特徴とする付記１乃至８の何れか一に記載の情報処理装置である。
（付記１０）
付記１０は、更に、前記入力情報を出力する入力情報出力手段を備え、
前記入力情報出力手段は、前記変動検出手段が検出した変動に対応する前記他のコンテンツの時系列位置に対応する前記入力情報を出力し、
前記出力手段は、前記コンテンツ出力手段が一のコンテンツを出力中に、前記変動検出手段が他のコンテンツに対する前記入力情報の変動を検出した場合に、前記一のコンテンツを継続して出力することを特徴とする付記９記載の情報処理装置である。
（付記１１）
付記１１は、時系列的に構成されたコンテンツに対し、前記コンテンツの時系列位置に対応させてユーザが入力した前記コンテンツに対する入力情報と、前記ユーザが入力を行った前記コンテンツの時系列位置情報と、を取得する情報取得過程と、
前記情報取得過程で取得した前記入力情報及び前記時系列位置情報に基づき、前記時系列における前記入力情報の変動を検出する変動検出過程と、
を備えることを特徴とする情報処理方法である。
（付記１２）
付記１２は、コンピュータに、
時系列的に構成されたコンテンツに対し、前記コンテンツの時系列位置に対応させてユーザが入力した前記コンテンツに対する入力情報と、前記ユーザが入力を行った前記コンテンツの時系列位置情報と、を取得する情報取得ステップと、
前記情報取得ステップで取得した前記入力情報及び前記時系列位置情報に基づき、前記時系列における前記入力情報の変動を検出する変動検出ステップと、
を実行させることを特徴するプログラムである。
（付記１３）
付記１３は、前記付加情報は、圧縮データであることを特徴とする付記６記載の情報処理装置である。
（付記１４）
付記１４は、前記入力情報は、所定単位のテキスト情報を含むことを特徴とする付記１乃至６の何れか一に記載の情報処理装置である。
（付記１５）
付記１５は、前変動検出手段は、前記テキスト情報の単位数の変動を検出することを特徴とする付記１、７の何れかに記載の情報処理装置である。
（付記１６）
付記１６は、前変動検出手段は、前記テキスト情報の所定単位あたりのテキスト数の変動を検出することを特徴とする付記１、７の何れかに記載の情報処理装置である。
（付記１７）
付記１７は、前記入力情報は、所定単位の選択情報を含むことを特徴とする付記１乃至６の何れか一に記載の情報処理装置である。
（付記１８）
付記１８は、前変動検出手段は、前記選択情報の単位数の変動を検出することを特徴とする付記１、７の何れかに記載の情報処理装置である。
（付記１９）
付記１９は、前記入力情報は、所定の単位を有し、
前記変動検出手段は、前記入力情報の単位数が、第１の閾値を超えたことを判断することを特徴とする付記１記載の情報処理装置である。
（付記２０）
付記２０は、前記変動検出手段は、前記入力情報の単位数が、第１の閾値を超えた後で第２の閾値を下回ることを判断することを特徴とする付記１記載の情報処理装置である。
（付記２１）
付記２１は、前記変動検出手段により前記入力情報の単位数が第１の閾値を超えたことが判断された場合、
前記出力手段は、前記変動検出手段が検出した第１の閾値に対応する時系列位置からコンテンツを出力することを特徴とする付記１記載の情報処理装置である。
（付記２２）
付記２２は、前記変動検出手段により前記入力情報の単位数が第２の閾値を下回ったことが判断された場合、
前記出力手段は、前記変動検出手段が検出した第２の閾値に対応する時系列位置までコンテンツを出力することを特徴とする付記１記載の情報処理装置である。
（付記２３）
付記２３は、前記変動検出手段により前記入力情報の単位数が第１の閾値を超えたことが判断された場合、
前記コンテンツ記録手段は、前記変動検出手段が検出した第１の閾値に対応する時系列位置からコンテンツを記録することを特徴とする付記４記載の情報処理装置である。
（付記２４）
付記２４は、前記変動検出手段により前記入力情報の単位数が第２の閾値を下回ったことが判断された場合、
前記コンテンツ記録手段は、前記変動検出手段が検出した第２の閾値に対応する時系列位置までコンテンツを記録することを特徴とする付記４記載の情報処理装置である。

１００コンテンツ
１０１入力情報
１０２情報取得手段
１０３変動検出手段
１０４情報処理装置

Claims

時系列的に構成されたコンテンツに対し、前記コンテンツの時系列位置に対応させてユーザが入力した前記コンテンツに対する入力情報と、前記ユーザが入力を行った前記コンテンツの時系列位置情報とを取得する情報取得手段と、
前記情報取得手段により取得した前記入力情報及び前記時系列位置情報に基づき、前記時系列における前記入力情報の変動を検出する変動検出手段と、
を備えることを特徴とする情報処理装置。
更に、コンテンツ出力手段を備え、
前記コンテンツ出力手段は、前記変動検出手段が検出した変動に対応する時系列位置に応じてコンテンツを出力することを特徴とする請求項１に記載の情報処理装置。
更に、リアルタイム配信または放送されるコンテンツを取得するコンテンツ取得手段と、
前記コンテンツ取得手段により取得されたコンテンツをバッファするバッファ手段とを備え、
前記コンテンツ出力手段は、前記コンテンツ取得手段により取得されたコンテンツを出力し、前記変動検出手段が検出した変動に対応する時系列位置に応じて前記バッファ手段にバッファされたコンテンツを出力することを特徴とする請求項１乃至２の何れかに記載の情報処理装置。
更に、コンテンツを記録するコンテンツ記録手段を備え、
前記コンテンツ記録手段は、前記変動検出手段が検出した変動に対応する時系列位置に応じてコンテンツを記録することを特徴とする請求項１乃至３の何れか一に記載の情報処理装置。
前記コンテンツ記録手段は、前記変動検出手段が検出した変動に対応する時系列位置に応じて複数個所のコンテンツを記録し、当該複数個所の記録データを結合することを特徴とする請求項４に記載の情報処理装置。
前記入力情報は、コンテンツのシーンを指定する付加情報を含むことを特徴とする請求項１乃至５の何れか一に記載の情報処理装置。
前記入力情報は、当該入力情報を入力したユーザの情報を含み、
前記変動検出手段は、所定の条件を満たすユーザが入力した前記入力情報と前記コンテンツの時系列位置情報に基づき、前記コンテンツの時系列位置に対する前記入力情報の変動を検出することを特徴とする請求項１に記載の情報処理装置。
更に、前記入力情報を出力する入力情報出力手段を備え、
前記コンテンツ出力手段は、前記コンテンツを出力中に、前記変動検出手段が前記入力情報の変動を検出した場合に、出力中のコンテンツの出力を継続し、
前記入力情報出力手段は、前記変動検出手段が検出した変動に対応する時系列位置に対応する入力情報を出力することを特徴とする請求項２に記載の情報処理装置。
前記情報取得手段は、複数のコンテンツに対してユーザがそれぞれ入力した複数の入力情報と、それぞれのコンテンツの前記時系列位置情報とを取得し、
前記変動検出手段は、前記複数のコンテンツに対する前記入力情報の変動をそれぞれ検出することを特徴とする請求項１乃至８の何れか一に記載の情報処理装置。
更に、前記入力情報を出力する入力情報出力手段を備え、
前記入力情報出力手段は、前記変動検出手段が検出した変動に対応する前記他のコンテンツの時系列位置に対応する前記入力情報を出力し、
前記出力手段は、前記コンテンツ出力手段が一のコンテンツを出力中に、前記変動検出手段が他のコンテンツに対する前記入力情報の変動を検出した場合に、前記一のコンテンツを継続して出力することを特徴とする請求項９に記載の情報処理装置。