JP2016538657A

JP2016538657A - 複数のユーザコメントを検索してコンテンツにオーバーレイすることによるビデオのブラウジング

Info

Publication number: JP2016538657A
Application number: JP2016541997A
Authority: JP
Inventors: ボス，ネイル，ディー
Original assignee: Thomson Licensing SAS
Current assignee: Thomson Licensing SAS
Priority date: 2013-09-16
Filing date: 2014-08-27
Publication date: 2016-12-08
Also published as: US20160232696A1; WO2015038356A9; JP2016537744A; CN105874780B; CN105580013A; EP3047362A1; EP3047396A1; US20160283097A1; KR20160055813A; WO2015038338A1; WO2015038342A1; EP3047362B8; EP3047644B1; KR20160056888A; WO2015038351A1; US20160227285A1; KR20160058103A; EP3047644A1; WO2015038356A1; CN105874780A

Abstract

ユーザがメディアコンテンツに関するメディアリッチコメントを残す方法及び装置。クライアント／メディアサーバシステムは、ユーザが、コンテンツのユーザ視聴に関するマルチユーザ生成コンテンツを作成するために、コメントをメディアに加えることを可能にする。メディアは、特定のメディアコンテンツ時点で挿入される。メディア及びコメントは、如何なるタイプ（テキスト、オーディオ、ビデオ、等）であってもよい。ビデオは、複数のユーザ（コメンテータ）からのコメントを検索することによってクエリされ、コメントと結合されたビデオのオーバーレイが表示される。方法は、少なくとも第２のコメントを更に有し、第１のコメントは、コメンテータと、注釈付きのメディア、キーワード、ビデオ注釈付きビデオ、ビデオブログを見ている目下のユーザとの間の関係（家族、親しい友人、等）に基づき、第２のコメントよりも高い優先度で（より大きく）表示される。

Description

ポータブル型電子デバイスは、ますます普遍的になりつつある。例えば、携帯電話機、音楽プレーヤー、カメラ、タブレット、等のような、それらのデバイスは、デバイスの組み合わせを含み、よって、複数のオブジェクトを持ち運ぶことを不必要にする。例えば、Ａｐｐｌｅ（登録商標）のｉＰｈｏｎｅ（登録商標）又はＳａｍｓｕｎｇ（登録商標）のＧａｌａｘｙ（登録商標）アンドロイド（登録商標）フォンのような、現在のタッチスクリーン型携帯電話機は、例えば、ビデオ及び静止画カメラ、グローバルポジショニングナビゲーションシステム、インターネットブラウザ、テキスト及び電話、ビデオ及び音楽プレーヤー、他を含む。それらのデバイスは、例えば、ＷｉＦｉ（登録商標）、有線、及びセルラー（例えば、３Ｇ）のような複数のネットワークにおいて、データを送信及び受信することをしばしば可能にされる。

ポータブル型電子デバイスにおける二次的要素の品質は、絶えず改善してきた。例えば、初期の“カメラ付き電話機”は、固定焦点レンズであって且つフラッシュなしの低解像度センサから成った。今日、多くの携帯電話機は、フル高精細ビデオ機能、編集及びフィルタリングツール、並びに高精細ディスプレイを備える。それらの改善された機能により、多くのユーザは、自身の主たる写真撮影デバイスとしてそれらのデバイスを使用している。従って、より一層改善された性能及びプロ仕様の組み込み型写真撮影ツールに対する要求が存在する。加えて、ユーザは、単に写真を印刷するだけでなく、より多くの方法で他者と自身のコンテンツを共有し且つ容易にそうしたいと望んでいる。そのような共有方法には、電子メール、テキスト、又はソーシャルメディアサイト、例えば、Ｆａｃｅｂｏｏｋ（登録商標）、Ｔｗｉｔｔｅｒ（登録商標）、ＹｏｕＴｕｂｅ（登録商標）、等が含まれ得る。ユーザは、例えば、ＹｏｕＴｕｂｅのような、ビデオストレージサイト又はソーシャルメディアサイトへコンテンツをアップロードしてよい。

ソーシャルメディアを用いると、ユーザはしばしばコメンテータとなって、他の寄稿者によって共有されているメディアに関するコメント又はフィードバックを提供する。実際に、このフィードバックは、ソーシャルメディアを魅力あるものにすることにおける一次的な駆動力である。しかし、ビデオメディアに関するコメントは、コメントがビデオの一部分又はビデオシーンの特定の局面にしか関係しないことがあるので、視聴者が長いビデオを見た後に理解することがしばしば困難である。よって、メディアプロバイダは、コメンテータが何に言及しているのかに関して困惑することがある。更に、多くのコメントが提供される場合に、メディアプロバイダにとってより好ましいコメントは、多量のそれほど好ましくないコメントの中で失われ得る。よって、モバイル電子デバイスに組み込まれている現在のカメラに伴うそれらの問題を解消することが望ましい。

ユーザがメディアコンテンツに関するメディアリッチコメントを残すことを助ける方法及び装置が開示される。システムは、ユーザが、コンテンツの視聴者に関するマルチユーザ生成コンテンツを作成するために、ビデオコンテンツをビデオに加えることを可能にする。メディアは、メディアコンテンツ内の特定の時点で挿入され得る。視聴者は、また、特定の視聴者により関係がある視聴経験をカスタマイズするために、プロバイダによるコンテンツをソートしてよい。

本発明の態様に従って、方法は、第１のメディアコンテンツのリクエストを受けるステップと、前記第１のメディアコンテンツと関係がある第１のコメントを検索するステップと、前記第１のメディアコンテンツ及び前記第１のコメントを複合メディアコンテンツへとまとめるステップと、前記複合メディアコンテンツを送信するステップとを有する。

本発明の他の態様に従って、方法は、ユーザ入力に応答して第１のメディアコンテンツのリクエストを生成するステップと、前記第１のメディアコンテンツを受けるステップと、前記第１のメディアコンテンツと関係がある第１のコメントを検索するステップと、前記第１のコメントを受けるステップと、前記第１のメディアコンテンツ及び前記第１のコメントを複合メディアコンテンツへとまとめるステップと、前記複合メディアコンテンツを含む信号を生成するステップとを有する。

本発明の更なる他の態様に従って、装置は、ユーザ入力に応答して制御信号を生成するインターフェイスと、ユーザ入力に応答して第１のメディアコンテンツのリクエスト生成し、該第１のメディアコンテンツと関係がある第１のコメントのリクエストを生成し、前記第１のメディアコンテンツ及び前記第１のコメントを複合メディアコンテンツへとまとめ、更に、該複合メディアコンテンツを含む信号を生成するよう動作するプロセッサと、前記第１のメディアコンテンツのリクエスト及び前記第１のコメントのリクエストを送信する送信器と、前記第１のメディアコンテンツ及び前記第１のコメントを受ける入力部とを有する。

本開示のそれら及び他の態様、特徴及び利点は記載され、すなわち、添付の図面に関連して読まれるべき好適な実施形態の以下の詳細な説明から明らかになるであろう。図面において、同じ参照符号は、図を通して同様の要素を表す。
モバイル電子デバイスの例となる実施形態のブロック図を示す。本発明に従うアクティブ表示を備える例となるモバイルデバイスディスプレイを示す。本開示に従う画像安定化及びリフレーミングのための例となるプロセスを示す。本発明に従うキャプチャ初期化を備える例となるモバイルデバイスディスプレイを示す。本開示に従って画像又はビデオを開始する例となるプロセスを示す。本発明に従ってメディアコンテンツに関するメディアコメントを表示する例となる表示デバイスを示す。本発明に従ってメディアコンテンツに関するメディアコメントを表示する他の例となる表示デバイスを示す。本発明に従ってメディアコンテンツに関するメディアコメントを表示する例となるタイムラインを示す。本開示に従ってメディアコメントをメディアコンテンツにおいて生成する例となるプロセスを示す。本開示に従ってメディアコメントをメディアコンテンツにおいて生成する他の例となるプロセスを示す。

ここで示される例示は、本発明の好適な実施形態を表し、そのような例示は、如何なる方法によっても本発明の適用範囲を制限するものとして解釈されるべきではない。

メディアコンテンツに関するメディアコメントのための方法及び装置は、ユーザがメディアコンテンツに関するメディアリッチコメントを残すことを可能にする。芸術的なビデオコンテンツ等を見るユーザは、彼らが、例えば、フォローアップのビデオ又はテキストコメントのようなフィードバックを残す様式において、制限されている。ユーザは、彼らが知らない他者がコンテンツについてどう思うかに興味がないことがある。友人が何を考えているかを見つけるためにコメントを検索することは難儀であり得る。例えばＹｏｕＴｕｂｅ（登録商標）のような他のシステムは、ユーザが、フォローアップ解説のビデオにリンクしたり、又はテキストコメントを書き込んだりすることを可能にする。システムは、批評家に優先順位をつけることを好まない。ユーザが創造的なコンテンツを見る場合に、彼らは、独創的な方法で創造的な努力に寄与したいと望むことがある。しばしば、テキストコメントは、単に、平均的なユーザへのスパム及び無関係のコメントとともにまとめられる。本発明のシステムは、ユーザが、コンテンツの視聴者に関係があるマルチユーザ生成コンテンツを作成するために、ビデオコンテンツをビデオに加えることを可能にする。コメントは、コンテンツとともに移動するビデオ内に埋め込まれたテキストを含んでよい。それは、原コンテンツ内で継ぎ合わされるか、又は原コンテンツの再生中のある関連した時間中にプレビューモードで再生するビデオであってよい。コメントは、視聴者から一又は二次の隔たりに制限されてよい。例えば、直近の友人又は友人の友人からのコメントのみが視聴者に示される。コメント及びビデオコメントは、ビデオの２回目の再生ループにおいて示されるよう選択されてよい。例えば、ビデオは、１回目には当初のフォーマットで再生し、次いで、２回目には、コメント及びビデオセグメントが表示された状態で再生する。ビデオのその後の再生で再生される第２レベルのコメントが存在してよい。例えば、最初はオリジナルを再生し、２回目は視聴者の一次の友人のコメントを再生し、３回目は視聴者の二次の友人のコメントをループ再生し、４回目は、ビデオ再生に加えられた最も人気のあるコメントをループ再生する。ビデオは、セーブされたコメントのバケットを有してよく、夫々のバケットは、友人の程度、又は、例えば、男性若しくは女性、専門家対個人、同じ共同グループのメンバー、等のようなその他コメントエンティティに関係があってよい。このように、ビデオの集合体は、他のユーザによって合作される。ユーザは、もし許されるならばコンテンツを挿入したり、あるいは、コンテンツを加えたりしてよく、全てのコンテンツは、共通のバケットにおいて記憶され、視聴者にシームレスに再生される。

図１を参照すると、モバイル電子デバイスの例となる実施形態のブロック図が示されている。表されているモバイル電子デバイスは携帯電話機１００であるが、本発明は、例えば、音楽プレーヤー、カメラ、タブレット、グローバルポジショニングナビゲーションシステム、等のような、いくつのデバイスにおいても同様に実施されてよい。携帯電話機は、通常は、電話呼び出し及びテキストメッセージを送信及び受信する能力、セルラーネットワーク又はローカル無線ネットワークのいずれかを通じてインターネットと相互作用する能力、ピクチャ及び画像を撮影する能力、オーディオ及びビデオコンテンツを再生する能力、並びにアプリケーション（例えば、ワードプロセッシング、プログラム、又はビデオゲーム）を実行する能力を備える。多くの携帯電話機はＧＰＳを有し、更には、ユーザインターフェイスの部分としてタッチスクリーンパネルを有する。

携帯電話機は、他の主たるコンポーネントの夫々へ結合されているメインプロセッサ１５０を有する。メインプロセッサ（複数を含む。）は、例えば、ネットワークインターフェイス、カメラ１４０、タッチスクリーン１７０、及び他の入出力（Ｉ／Ｏ）インターフェイス１８０のような、様々なコンポーネントの間で情報を転送する。メインプロセッサ１５０は、また、直接に当該デバイスにおける、又はオーディオ／ビデオインターフェイスを通じて外部デバイスにおける再生のためにオーディオ及びビデオコンテンツを処理する。メインプロセッサ１５０は、例えば、カメラ１４０、タッチスクリーン１７０、及びＵＳＢインターフェイス１３０のような、様々なサブデバイスを制御するよう動作する。メインプロセッサ１５０は、コンピュータと同様にデータを扱うために使用される携帯電話機におけるサブルーチンを実行するよう更に動作する。例えば、メインプロセッサは、写真がカメラ１４０によって撮影された後に、画像ファイルを処理するために使用されてよい。そのような処理は、クロッピング、圧縮、色及び輝度の調整、等を含んでよい。

セルネットワークインターフェイス１１０は、メインプロセッサ１５０によって制御され、セルラー無線ネットワークにわたって情報を受信及び送信するために使用される。この情報は、例えば、時分割多重アクセス（ＴＤＭＡ；time division multiple access）、符号分割多重アクセス（ＣＤＭＡ；code division multiple access）又は直交周波数分割多重化（ＯＦＤＭ；orthogonal frequency-division multiplexing）のような、様々なフォーマットにおいて符号化されてよい。情報は、セルネットワークインターフェイス１１０を通じて当該デバイスから送信及び受信される。インターフェイスは、情報を送信のための適切なフォーマットに符号化及び復号するために使用される複数のアンテナ、符号化器、復調器、等を有してよい。セルネットワークインターフェイス１１０は、ボイス若しくはテキスト送信を容易にするために、又はインターネットから情報を送信及び受信するために使用されてよい。この情報は、ビデオ、オーディオ、及び／又は画像を含んでよい。

無線ネットワークインターフェイス１２０、又はＷｉＦｉネットワークインターフェイスは、ＷｉＦｉネットワークにわたって情報を送信及び受信するために使用される。この情報は、例えば、８０２．１１ｇ、８０２．１１ｂ、８０２．１１ａｃ、等のような、種々のＷｉＦｉ規格に従う様々なフォーマットにおいて符号化され得る。インターフェイスは、情報を送信のための適切なフォーマットに符号化及び復号し、情報を復調のために復号するために使用される複数のアンテナ、符号化器、復調器、等を有してよい。ＷｉＦｉネットワークインターフェイス１２０は、ボイス若しくはテキスト送信を容易にするために、又はインターネットから情報を送信及び受信するために使用されてよい。この情報は、ビデオ、オーディオ、及び／又は画像を含んでよい。

ユニバーサルシリアルバス（ＵＳＢ）インターフェイス１３０は、情報を、通常はコンピュータ又は他のＵＳＢ対応デバイスへ、有線リンクにわたって送信及び受信するために使用される。ＵＳＢインターフェイス１３０は、情報を送信及び受信し、インターネットへ接続し、ボイス及びテキスト呼び出しを送信及び受信するために使用され得る。加えて、この有線リンクは、モバイルデバイスのセルネットワークインターフェイス１１０又はＷｉＦｉネットワークインターフェイス１２０を用いてＵＳＢ対応デバイスを他のネットワークへ接続するために使用されてよい。ＵＳＢインターフェイス１３０は、構成情報をコンピュータへ送信及び受信するためにメインプロセッサ１５０によって使用され得る。

メモリ１６０、又はストレージデバイスは、メインプロセッサ１５０へ結合されてよい。メモリ１６０は、モバイルデバイスの動作に関連し且つメインプロセッサ１５０によって必要とされる具体的な情報を記憶するために使用されてよい。メモリ１６０は、ユーザによって記憶及び検索されるオーディオ、ビデオ、写真、又は他のデータを記憶するために使用されてよい。

入出力（Ｉ／Ｏ）インターフェイス１８０は、電話呼び出し、オーディオの記録及び再生、又は音声駆動制御とともに使用するためのボタン、スピーカ／マイクロホンを含む。モバイルデバイスは、タッチスクリーンコントローラを通じてメインプロセッサ１５０へ結合されているタッチスクリーン１７０を有してよい。タッチスクリーン１７０は、容量性及び抵抗性タッチセンサの１つ以上を用いるシングルタッチ又はマルチタッチスクリーンのいずれかであってよい。スマートフォンは、例えば、それだけに限られないが、オン／オフボタン、駆動ボタン、ボリューム制御、リンガー制御、及びマルチボタンキーパッド又はキーボードのような、更なるユーザコントロールを更に有してよい。

これより図２を参照すると、本発明に従うアクティブ表示２００を備えた例となるモバイルデバイスディスプレイが示されている。例となるモバイルデバイスアプリケーションは、ユーザがあらゆるフレーミングにおいて記録し且つ自身のデバイスを撮影中に自由に回転させることを可能にし、撮影中にデバイスのビューファインダでのオーバーレイにおいて最終の出力を視覚化し、最終的に最終の出力においてデバイスの位置付けを補正するよう動作する。

例となる実施形態に従って、ユーザが撮影を開始するときに、その現在の位置付けが考慮され、デバイスのセンサに基づく重力のベクトルが水平線を合わせるために使用される。例えば、デバイスのスクリーン及び関連する光センサが横長より縦長である縦向き２１０、又はデバイスのスクリーン及び関連する光センサが縦長より横長である横向き２５０のような、夫々のとり得る位置付けについて、最適な目標アスペクト比が選択される。はめ込み長方形２２５は、所与の（現在の）位置付けについての所望の最適アスペクト比を鑑みて、センサの最大境界に適合するセンサ全体内に記される。センサの境界は、補正のための“猶予（breathing room）”を提供するためにわずかに水増しされる。このはめ込み長方形２２５は、デバイス自体の回転と逆方向において本質的に回転することによって、回転２２０、２３０、２４０を補償するよう変形される。回転は、デバイスの内蔵ジャイロスコープからサンプリングされる。変形された内側長方形２２５は、センサ全体の最大使用可能境界から水増し分を引いたものの内側に最適に記される。デバイスの現在の最たる位置付けに応じて、変形された内側長方形２２５の大きさは、回転の量に対して、２つの最適なアスペクト比の間を補間するよう調整される。

例えば、縦向きのために選択された最適なアスペクト比が正方形（１：１）であり、横向きのために選択された最適なアスペクト比が幅広（１６：９）であった場合に、表記の長方形は、それが１つの位置付けから他の位置付けへ回転されるときに１：１から１６：９の間を最適に補間する。表記の長方形は、サンプリングされ、次いで、最適な出力寸法にあるよう変形される。例えば、最適な出力寸法が４：３であり、サンプリングされた長方形が１：１である場合には、サンプリングされた長方形は、アスペクトフィルド（aspect filled）（必要に応じてデータをクロッピングして、最適に１：１のエリアを完全に満たす。）又はアスペクトフィット（aspect fit）（‘レターボクシング’又は‘ピラーボクシング’により如何なる未使用エリアも黒く塗りつぶして、最適に１：１エリアの内側に完全に合う。）のいずれかである。終わりに、結果は固定アスペクトアセットであり、コンテンツフレーミングは、補正の間に、動的に提供されたアスペクト比に基づき調整する。故に、例えば、１：１から１６：９のコンテンツから成る１６：９のビデオは、最適に満たされた状態２６０（１６：９部分の間）とピラーボックスを取り付けた状態（１：１部分の間）との間を行ったり来たりする。

全ての動きの総計が最適な出力アスペクト比の選択に考慮され且つ重み付けされるところの更なる精緻化が実施される。例えば、ユーザが、縦長のコンテンツがわずかであって‘大部分が横長’であるビデオを記録する場合には、出力フォーマットは横長アスペクト比である（縦長セグメントにピラーボックスを挿入する。）。ユーザが、大部分が縦長であるビデオを記録する場合には、反対のことが起こる（ビデオは縦長であるよう、出力長方形の境界の外にある如何なる横長コンテンツもクロッピングして最適に出力を満たす。）。

これより図３を参照すると、本開示に従う画像安定化及びリフレーミングのための例となるプロセス３００が示されている。システムは、カメラのキャプチャモードが起動されることに応答して、初期化される（３１０）。この初期化は、ハードウェア又はソフトウェアボタンに従って、又はユーザの行動に応答して生成される他の制御信号に応答して、開始されてよい。デバイスのキャプチャモードが起動されると、モバイルデバイスセンサは、ユーザ選択に応答して選択される（３２０）。ユーザ選択は、タッチスクリーンデバイスでの設定を通じて、メニューシステムを通じて、又は如何にしてボタンが作動されるのかに応答して、なされてよい。例えば、一度押下されたボタンは、フォトセンサを選択してよく、一方、途切れることなく押下されたままであるボタンは、ビデオセンサを示してよい。加えて、所定の時間、例えば、３秒間、ボタンを押したままであることは、ビデオが選択されたことを示してよく、モバイルデバイスでのビデオ記録は、ボタンが２度目に作動されるまで続く。

適切なキャプチャセンサが選択されると、システムは、次いで、回転センサに測定を要求する（３３０）。回転センサは、ジャイロスコープ、加速度計、軸配向センサ、光センサ、等であってよく、モバイルデバイスの位置の水平及び／又は垂直の現れを決定するために使用される。測定センサは、周期的な測定を制御プロセッサへ送信して、モバイルデバイスの水平及び／又は垂直の向きを連続的に示してよい。よって、デバイスが回転されると、制御プロセッサは、表示を絶えず更新し、且つ、連続的な一貫した水平線を有するようにビデオ又は画像をセーブすることができる。

回転センサがモバイルデバイスの垂直及び／又は水平の向きのインジケーションを返した後、モバイルデバイスは、ビデオ又は画像のキャプチャの向きを示すようディスプレイ上ではめ込み長方形を表す（３４０）。モバイルデバイスが回転されると、システムプロセッサは、引き続き、はめ込み長方形を、回転センサから受け取った回転測定と同期させる（３５０）。ユーザは、任意に、例えば、１：１、６：９、１６：９のような、好適な最終のビデオ若しくは画像比、又はユーザに決定されたあらゆる比を示してよい。システムは、また、モバイルデバイスの位置付けに従う異なる比ごとのユーザ選択を記憶してよい。例えば、ユーザは、垂直の向きにおいて記録されるビデオについては１：１比を、一方、水平の向きにおいて記録されるビデオについては１６：９比を示してよい。この事例では、システムは、モバイルデバイスが回転されると、連続的に又は漸増的にビデオをリスケーリングしてよい（３６０）。よって、ビデオは、１：１の位置付けから始まってよいが、ユーザが撮影中に垂直から水平の向きへ回転することに応答して、１６：９の位置付けにおいて終わるよう漸次的にリスケーリングされ得る。任意に、ユーザは、開始又は終了の位置付けがビデオの最終の比を決定することを示してよい。

これより図４を参照すると、本発明に従うキャプチャ初期化４００を備える例となるモバイルデバイスディスプレイが示されている。例となるモバイルデバイスは、画像又はビデオを捕捉するタッチトーンディスプレイを表すよう示されている。本発明の態様に従って、例となるデバイスのキャプチャモードは、多数の動作に応答して起動されてよい。モバイルデバイスのハードウェアボタン４１０のいずれかは、キャプチャシーケンスを開始するよう押し下げられてよい。代替的に、ソフトウェアボタン４２０は、キャプチャシーケンスを開始するようタッチスクリーンを通じて作動されてよい。ソフトウェアボタン４２０は、タッチスクリーンに表示されている画像４３０にオーバーレイされてよい。画像４３０は、画像センサによって捕捉されている現在の画像を示すビューファインダの役目をする。上述された表記の長方形４４０も画像にオーバーされてよく、捕捉される画像又はビデオのアスペクト比を示す。

キャプチャシーケンスは、例えばソフトウェアボタン又はハードウェアボタンのようなボタンを押し続けることによって起動され、そして、ボタンを放すことによって停止されてよい。代替的に、キャプチャシーケンスは、一度ボタンを押すことによって起動され、次いで、２回目にボタンを押すことによって停止されてよい。ビデオの記録は、タイマと無関係に、異なるジェスチャを通じて起動されてよい。この異なるジェスチャは、ボタンを２回タップすること、ボタンを保持すること、及び一方の側へスワイプすること、等を含んでよい。

これより図５を参照すると、本開示に従って画像又はビデオキャプチャを開始する例となるプロセス５００が示されている。イメージングソフトウェアが開始されると、システムは、画像キャプチャを開始するためのインジケーションを待つ。画像キャプチャのインジケーションがメインプロセッサによって受け取られると（５１０）、デバイスは、画像センサから送信されたデータをセーブし始める（５２０）。加えて、システムはタイマを起動する。システムは、次いで、画像センサからのデータをビデオデータとして捕捉し続ける。キャプチャが停止（５３０）されたことを示す、キャプチャのインジケーションからの第２のインジケーションに応答して、システムは、画像センサからのデータをセーブすることを止め、タイマを停止させる（５３５）。

システムは、次いで、タイマの値を所定の時間閾値と比較する（５４０）。所定の時間閾値は、例えば、１秒といった、ソフトウェアプロバイダによって決定されたデフォルト値であってよく、あるいは、それは、ユーザによって決定された設定可能な設定であってよい。タイマの値が所定の閾値に満たない場合は（５４０）、システムは、静止画像が所望であったと決定し、ビデオキャプチャの第１のフレームを静止画像として静止画像フォーマット（例えば、ＪＰＥＧ、等）においてセーブする（５６０）。システムは、任意に、他のフレームを静止画像として選択してよい。タイマの値が所定の閾値よりも大きい場合は（５４０）、システムは、ビデオキャプチャが所望であったと決定する。システムは、次いで、キャプチャデータをビデオファイルとしてビデオファイルフォーマット（例えば、ＭＰＥＧ、等）においてセーブする（５５０）。システムは、次いで、初期化モードへ戻り、キャプチャモードが再び起動されるのを待ってよい。モバイルデバイスが静止画像キャプチャ及びビデオキャプチャのために異なるセンサを備えている場合は、システムは、任意に、静止画像センサからの静止画像をセーブし、ビデオ画像センサからのキャプチャデータをセーブし始めてよい。タイマの値が所定の時間閾値と比較されるとき、所望のデータがセーブされ、一方、不要なデータはセーブされない。例えば、タイマの値が閾時間値を越える場合は、ビデオデータがセーブされ、画像データは捨てられる。

これより、図６を参照すると、本発明に従ってメディアコンテンツ６００に関するメディアコメントを表示する例となる表示デバイスが示されている。この例となる実施形態では、表示デバイス６１０が示されており、例えば、ビデオ又は他のストリーミングメディアを再生することができるコンピュータモニタ又はテレビジョンであってよい。代替的に、表示デバイスは、携帯電話機、タブレット、又は同様のデバイスであってよい。説明のために、ビデオのフレームが示されている。ビデオのフレームを見て分かるように、コメントインジケータ６２０、６３０、６４０、６５０がビデオに重ね合わされて示されている。それらのコメントインジケータは、コメンテータの指示に従って示されてよい。例えば、コメンテータは、ビデオの特定の部分、例えば、本例では、野球選手による特定の投球についてコメントしたいと望んでよい。コメンテータは、また、コメントインジケータの開始時間、停止時間、存続期間、及び／又はメディアコンテンツに関するメディアコメントの特定の位置を示すことが可能であってよい。

コメントは、原メディアコンテンツに重ね合わされたテキストコメント６２０であってよく、付加的なメディアコンテンツ６５０であってよく、あるいは、原メディアコンテンツと同時にフルで又はプレビューモードで再生される付加的なメディアコメントであってよい。例えば、コメンテータは、原メディアコンテンツに対する応答ビデオを作成することを選択してよく、あるいは、原メディアコンテンツに応じてオーディオコメントを記録してよい。コメントが重ね合わされているメディアコンテンツの視聴者は、クリック等によってコメントの１つをアクティブにすることを選択してよく、アクティブ化に応答して、ビデオ応答コンテンツを提示されてよい。ビデオ応答コンテンツが再生された後、視聴者は、コメントがアクティブにされた原メディアコンテンツ内の時点へ戻されてよく、それによって、原メディアコンテンツの視聴を続ける。代替的に、メディアコメントは、原メディアコンテンツの代わりに再生されるオーディオコメントであってよい。よって、コメンテータは、原メディアコンテンツの部分にわたる会話を聞かされてよい。ビデオコメントは、コメントオーディオがアクティブにされていようとなかろうと、より小さいコメントウィンドウにおいて再生可能にされてよい。よって、視聴者が原コンテンツを見ているときに、メディアコメントのピクチャ・イン・ピクチャ（ＰＩＰ）は、より小さいコメントウィンドウにおいて再生される。

それは、多数のコメントが特定のメディアコンテンツ（例えば、ビデオ）について受け取られる場合に、視聴者の立場からすると、わかりにくくなり、又は過度に時間がかかることがある。例えば、メディアコメントが原メディアコンテンツに組み込まれている場合に、視聴者は、再生されているメディアコメントが多すぎるために、原コンテンツを見逃すことがあり、あるいは、原メディアコンテンツのビューは覆い隠される。視聴者は、あらゆる人からのコメントを見たいわけではなく、より個人的に関連したコメントを見るために、特定のグループの寄稿者からのコメントのみを確認し又は見たいことがある。ある時点では、視聴者は、家族又は友人といった１つのグループからのコメントに興味を持っているが、他の時点では、視聴者は、一般的な共同グループへの寄稿者からのコメントのみを見たいことがある。よって、本システムは、ユーザが、所望の時点で所望のコメントを見るために、グループを選択し、優先順位をつけることを可能にするユーザインターフェイスを有する。

メディアコメントインジケータの属性は、ユーザとの関係に基づきスケーリング又は重み付けされてよい。例えば、コメンテータが近しい友人である場合には、インジケータ６２０、６５０は、より目立ち、二次的な友人、すなわち、友人の友人の場合には、コメントインジケータ６３０は、ほんの少し小さくてよい。未知のコメンテータ、又は特定のグループのメンバーは、より一層小さく、又はビデオ６４０に重ね合わされた数値として、示されてよい。数値コメントをアクティブにすることで、そのグループ内のコメンテータによるコメントのリストが視聴者に提示されてよい。コメンテータは、視聴者との関係、原コンテンツの作成者との関係、コメンテータが特定のグループの一員であること、社会的格付けシステム（例えば、好き（いいね）、肯定的な言及、等）に基づき、より目立つようにされてよい。

コメント（例えば、近しい友人からのコメント）の数が増えるにつれて、インジケータのスケールも変更されてよい。例えば、単一のメディアコメントが近しい友人によって提供されている場合に、コメントインジケータは、原メディアコンテンツのフレームサイズの３％を覆うコメントインジケータとして表示されてよい。所定数のメディアコンテンツ（例えば、４つのメディアコンテンツ）が近しい友人から受け取られた場合には、コメントインジケータの夫々のサイズは、原メディアコンテンツのフレームサイズの１％に低減される。より低い優先度のコメントも然るべくスケーリングされ、場合により、いくつかのコメントインジケータは削除され、数値インジケータ６４０がインクリメントされる。

これより図７を参照すると、本発明の他の態様に従ってメディアコンテンツ７００に関するメディアコメントを表示する第２の例となる表示デバイスが示されている。この例となる実施形態では、表示デバイス７１０が示されており、例えば、ビデオ又は他のストリーミングメディアを再生することができるコンピュータモニタ又はテレビジョンであってよい。説明のために、ビデオのフレームが示されている。この例では、コメントはメディアコンテンツの外に位置しているが、前述の実施形態と同様の時間様式において表示されてよい。例えば、原メディアコンテンツが第１のウィンドウで再生されている間、ビデオコメント７２０は、サイドバー等において同時に再生されてよい。このとき、コメントは、視聴者にとって可視的であるが、原メディアコンテンツの部分を覆わない。加えて、テキスト又はオーディオコメント７３０は、更なるコメント７４０のインジケータとともに、原メディアコンテンツと並んで表示されてよい。コメントのタイミングは、上述されたように、コメンテータの指示に従って時間を合わせられてよく、あるいは、原メディアコンテンツの全体の長さにわたって表示されてよい。

コメントは、ビデオにおける特定の時点でコメンテータによって置かれる。コメンテータは、コメントに関してビデオ内の関心のあるオブジェクトを特定してよい。例えば、コメンテータは、この例となる実施形態では、投手の投球フォームが良いことを示してよい。このテキストの解析は、原メディアコンテンツのその部分が野球に関係し、すなわち、より具体的には、投球に関係することを決定するために使用されてよい。テキストの解析は、ビデオに関する感情データをもたらすことができる。例えば、ビデオの好意的な部分及びセクションは、好意的なコメントから決定されてよく、ビデオの好意的でない部分は、好意的でないコメントから決定されてよい。よって、コンテンツプロバイダは、肯定的なコメントに関連する原メディアコンテンツの部分に基づき、原メディアコンテンツのプレビュー又は広告を生成したいと望んでよい。

これより図８を参照すると、メディアコンテンツ再生の例となる再生タイムライン８００が、本発明に従って示されている。原メディアコンテンツのタイムライン８１０が示されており、Ｔ＝０秒からＴ＝６０秒までの６０秒間に中断されることなしに実行される。メディアコメント８２１、８２３、８２５は、開始時間及び存続期間を示しながらタイムライン８１０の下に表されている。開始時間（例えば、コメントＣ１８２１についてはＴ＝１０秒）は、コメンテータによって選択され、コメントの存続期間は、デフォルトの存続期間（例えば、１０秒）であってよく、あるいは、原メディアコンテンツに応じてコメンテータによって任意に選択されてよい。同様に、コメントＣ２８２３は、Ｔ＝２０秒の選択された開始時間を有し、コメントＣ３８２５は、Ｔ＝４０秒の選択された開始時間を有する。上のタイムライン８１０は、原コンテンツの実行時間と、コメントＣ１、Ｃ２及びＣ３８２１、８２３、８２５が表示される時間とを示す。

任意に、視聴者は、原コンテンツの再生に組み込まれた幾つかのコメントを表示することを選択してよい。組み込まれたメディアタイムライン８３０は、コメントＣ１、Ｃ２及びＣ３が再生に組み込まれている原メディアコンテンツの再生タイムラインを示す。よって、この例となる実施形態では、視聴者は、原コンテンツの最初の１０秒を見てよく、次いで、メディアコメントＣ１が視聴者に表示される。コメントＣ１が終了した後、原メディアコンテンツの再生は別の１０秒について再開される。次いで、メディアコメントＣ２が視聴者に表示される。メディアコメントＣ２が完了すると、原メディアコンテンツの再生は別の２０秒について再開され、次いで、メディアコメントＣ３が再生される。メディアコメントＣ３が完結した後、原メディアコンテンツの残りが別の２０秒について再開される。

これより図９を参照すると、本開示に従ってメディアコンテンツにおいてメディアコメントを生成する例となるプロセス９００が示されている。例となるプロセスは、ＩＰネットワーク上のサーバによって、ケーブル、衛星、セルラー若しくはファイバ伝送ネットワークにおけるヘッドエンドによって、又はブロードキャスト信号プロバイダで、実行されてよい。システムは、上述されたように構成されるメディアコンテンツ及びコメントの両方を有する複合メディアファイルを配信するよう動作する。

プロセスは、最初に、第１のメディアコンテンツのリクエストを受けるよう動作する（９１０）。第１のメディアコンテンツは、ビデオファイル、オーディオファイル、又はマルチメディア提示であってよい。リクエストは、モバイルネットワーク、インターネット、ブロードキャストチャネル、等を介して受信されてよい。リクエストは、ユーザが第１のメディアコンテンツを見るよう要求するユーザ入力に応答して、生成されてよい。

第１のメディアコンテンツのリクエストを受信すると、システムは、最初に、第１のメディアコンテンツが利用可能であるかどうかを判定する。第１のメディアコンテンツが利用可能であるとの決定がなされると、システムは、第１のメディアコンテンツに関係があるコメントを検索する（９２０）。そのようなコメントは、コンテンツを以前に見たことがあるコメンテータによって生成されていてよい。コメントは、テキスト、オーディオファイル、ビデオファイル、又はマルチメディア提示であってよい。コメントが存在するとシステムが判断する場合には（９３０）、１つ以上のコメントは第１のメディアコンテンツと結合されて、要求元のデバイスへ送信される（９５０）。コメント及び第１のメディアコンテンツは、コンテンツとともに記憶されているメタデータ、例えば、開始時間、場所、等に応じて部分的に結合される。コメントが見つけられない場合には、システムは、第１のメディアコンテンツを要求元のデバイスへ送信する（９３５）。

これより図１０を参照すると、本開示に従ってメディアコンテンツにおいてメディアコメントを生成する第２の例となるプロセス１０００が示されている。例となるプロセスは、テレビ受信機におけるサーバ、コンピュータ、タブレット、モバイルデバイス、又はネットワーク（例えば、双方向で通信するセルラー、テレビジョン、ケーブル、ファイバ、又はブロードキャストネットワーク）を介して接続される如何なる他のメディアプレーヤーによっても実行されてよい。システムは、上述されたように構成されるメディアコンテンツ及びコメントの両方を有する複合メディアファイルを生成するよう動作する。

システムは、ユーザ入力に応答して第１のメディアコンテンツのリクエストを受けるよう動作する（１０１０）。このユーザ入力は、タッチスクリーン、ボタン、キーボード、又は他のユーザインターフェイスを介して受け取られてよい。リクエストに応答して、システムは、第１のメディアコンテンツのためにサーバ等へリクエストを送信する（１０２０）。システムは、第１のメディアコンテンツを受信及び記憶するよう備えられる。システムは、次いで、第１のメディアコンテンツと関係があるコメントをデータベース等から検索する（１０３０）。この検索は、ローカルメモリ、ローカルデータベース、遠隔データベース、又は遠隔データストレージホストを検索することによって実行されてよい。検索は、代替的に、コメントを遠隔デバイスへ要求することによって実行されてよく、遠隔デバイスは、コメントを検索し、いずれかのコメントが利用可能である場合に少なくとも１つのコメントを提供する。システムは、第１のメディアコンテンツと関係がある如何なるコメントも要求及び受信し、コメントをメモリに記憶するよう更に動作する。

コメントが利用可能であるとシステムが判断する場合には（１０３２）、システムは、ネットワークを介してデータサーバ等にコメントを要求する。システムは、次いで、第１のメディアコンテンツ及び少なくとも１つのコメントを複合メディアコンテンツへとまとめる（１０４０）。次いで、複合メディアコンテンツを含む表示に適した信号が、システムによって生成される（１０５０）。システムは、複合メディアコンテンツを表示するよう動作してよく、あるいは、複合メディアコンテンツは、ユーザへの表示のために他のデバイスへ送信されてよい。コメントが利用可能でない場合には（１０３２）、デバイスは、第１のメディアコンテンツを含む信号を生成するよう動作する。システムは、第１のメディアコンテンツを表示するよう動作してよく、あるいは、第１のメディアコンテンツは、ユーザへの表示のために他のデバイスへ送信されてよい。加えて、システムは、複数のコメント及び第１のメディアコンテンツを単一の複合メディアコンテンツへとまとめてよい。

図示及び上述された要素は、様々な形のハードウェア、ソフトウェア又はそれらの組み合わせにおいて実施されてよいことが理解されるべきである。望ましくは、それらの要素は、プロセッサ、メモリ及び入出力インターフェイスを含み得る１つ以上の適切にプログラミングされた汎用デバイスにおいてハードウェアとソフトウェアとを組み合わせて実施される。本明細書は、本開示の原理を説明する。よって、明らかなように、当業者であれば、ここで明示的に記載又は図示されていなくても、本開示の原理を具現し且つその適用範囲内に含まれる様々な配置を想到可能である。ここで挙げられている全ての例及び条件付き言語は、当該技術を促進させることに本発明者によって寄与される概念及び本開示の原理を読者が理解するのを助けるための情報提供を目的とし、そのような具体的に挙げられている例及び条件に制限されないものとして解釈されるべきである。更に、本開示の原理、態様、及び実施形態、並びにその具体例をここで挙げている全ての記述は、それらの構造上及び機能上の等価物を包含するよう意図される。加えて、そのような等価物は、現在知られている等価物及び将来開発される等価物（すなわち、構造に関わらず、同じ機能を実行する開発されたあらゆる要素）の両方を含むことが意図される。よって、例えば、当業者には当然に、これにより提示されているブロック図は、本開示の原理を具現する実例となる回路構成の概念図を表す。同様に、明らかなように、如何なるフローチャート、フロー図、状態遷移図、擬似コード、等も、コンピュータ可読媒体において実質的に表現され、故にコンピュータ又はプロセッサによって（そのようなコンピュータ又はプロセッサが明示的に示されていようとなかろうと）実行され得る様々なプロセスを表す。

本願は、２０１３年９月１６日付けで出願された米国特許仮出願第６１／８７８２４５号及び２０１４年５月２７日付けで出願された米国特許仮出願第６２／００３２８１号に基づく優先権を主張するものである。なお、それらの米国特許出願は、参照により本願に援用される。

Claims

第１のメディアコンテンツのリクエストを受けるステップと、
前記第１のメディアコンテンツと関係がある第１のコメントを検索するステップと、
前記第１のメディアコンテンツ及び前記第１のコメントを複合メディアコンテンツへとまとめるステップと、
前記複合メディアコンテンツを送信するステップと
を有する方法。
前記第１のコメントは、第２のメディアコンテンツであり、
前記複合メディアコンテンツは、前記第１のメディアコンテンツの上に同時に表示される前記第２のメディアコンテンツを含む、
請求項１に記載の方法。
前記第１のコメントは、開始時間及び存続期間を含むメタデータを含み、
前記開始時間は、前記第１のメディアコンテンツ内の時間と一致する、
請求項１に記載の方法。
前記第１のコメントは、該コメントを生成するコメンテータによって決定された時間及び存続期間で表示される、
請求項１に記載の方法。
第２のコメントを更に有し、前記第１のコメントは、該第１のコメントを生成する第１のコメンテータと前記第１のメディアコンテンツを生成するユーザとの間の第１の関係と、前記第２のコメントを生成する第２のコメンテータと前記第１のメディアコンテンツを生成する前記ユーザとの間の第２の関係とに応じて、前記第２のコメントよりも長く表示される、
請求項１に記載の方法。
前記第１のコメントは、前記複合メディアコンテンツ内のリンクとして表示され、
前記リンクは、前記第１のメディアコンテンツと関係がある第２のメディアコンテンツへ接続する、
請求項１に記載の方法。
前記第１のコメントは、オーディオコンテンツであり、
前記オーディオコンテンツは、前記第１のメディアコンテンツのオーディオ部分の代わりに再生される、
請求項１に記載の方法。
前記第１のコメントは、前記複合メディアコンテンツ内の画像として表示され、
前記画像は、前記第１のメディアコンテンツと関係がある第２のメディアコンテンツへのハイパーリンクを含む、
請求項１に記載の方法。
第２のコメントを更に有し、前記第１のコメントは画像として表示され、前記第２のコメントはテキスト列として表示される、
請求項１に記載の方法。
前記複合メディアコンテンツ内の前記第１のコメントの位置は、ユーザ入力に応じて決定される、
請求項１に記載の方法。
ユーザ入力に応答して第１のメディアコンテンツのリクエストを生成するステップと、
前記第１のメディアコンテンツを受けるステップと、
前記第１のメディアコンテンツと関係がある第１のコメントを検索するステップと、
前記第１のコメントを受けるステップと、
前記第１のメディアコンテンツ及び前記第１のコメントを複合メディアコンテンツへとまとめるステップと、
前記複合メディアコンテンツを含む信号を生成するステップと
を有する方法。
前記第１のコメントは、第２のメディアコンテンツであり、
前記複合メディアコンテンツは、前記第１のメディアコンテンツの上に同時に再生される前記第２のメディアコンテンツを含む、
請求項１１に記載の方法。
前記第１のコメントは、開始時間及び存続期間を含むメタデータを含み、
前記開始時間は、前記第１のメディアコンテンツ内の時間と一致する、
請求項１１に記載の方法。
前記第１のコメントは、該コメントを生成するコメンテータによって決定された時間及び存続期間で表示される、
請求項１１に記載の方法。
第２のコメントを更に有し、前記第１のコメントは、該第１のコメントを生成する第１のコメンテータと前記第１のメディアコンテンツを生成するユーザとの間の第１の関係と、前記第２のコメントを生成する第２のコメンテータと前記第１のメディアコンテンツを生成する前記ユーザとの間の第２の関係とに応じて、前記第２のコメントよりも長く表現される、
請求項１１に記載の方法。
前記第１のコメントは、前記複合メディアコンテンツ内のリンクとして表示され、
前記リンクは、前記第１のメディアコンテンツと関係がある第２のメディアコンテンツへ接続する、
請求項１１に記載の方法。
前記第１のコメントは、オーディオコンテンツであり、
前記オーディオコンテンツは、前記第１のメディアコンテンツのオーディオ部分の代わりに再生される、
請求項１１に記載の方法。
前記第１のコメントは、前記複合メディアコンテンツ内の画像として表示され、
前記画像は、前記第１のメディアコンテンツと関係がある第２のメディアコンテンツへのハイパーリンクを含む、
請求項１１に記載の方法。
第２のコメントを更に有し、前記第１のコメントは画像として表現され、前記第２のコメントはテキスト列として表現される、
請求項１１に記載の方法。
前記複合メディアコンテンツ内の前記第１のコメントの位置は、ユーザ入力に応じて決定される、
請求項１１に記載の方法。
第１のメディアコンテンツのリクエストを受ける入力部と、
前記第１のメディアコンテンツと関係がある第１のコメントを記憶するメモリと、
前記第１のメディアコンテンツ及び前記第１のコメントを複合メディアコンテンツへとまとめるために、前記第１のメディアコンテンツと前記第１のコメントとの間の関係を決定するよう動作するプロセッサと、
前記複合メディアコンテンツを送信する送信器と
を有する装置。
前記第１のコメントは、第２のメディアコンテンツであり、
前記複合メディアコンテンツは、前記第１のメディアコンテンツの上に同時に表現される前記第２のメディアコンテンツを含む、
請求項２１に記載の装置。
前記第１のコメントは、開始時間及び存続期間を含むメタデータを含み、
前記開始時間は、前記第１のメディアコンテンツ内の時間と一致する、
請求項２１に記載の装置。
前記第１のコメントは、該コメントを生成するコメンテータによって決定された時間及び存続期間で表現される、
請求項２１に記載の装置。
前記メモリは、第２のコメントを記憶するよう更に動作し、
前記プロセッサは、前記第２のコメントを前記複合メディアコンテンツにまとめるよう更に動作し、
前記第１のコメントは、該第１のコメントを生成する第１のコメンテータと前記第１のメディアコンテンツを生成するユーザとの間の第１の関係と、前記第２のコメントを生成する第２のコメンテータと前記第１のメディアコンテンツを生成する前記ユーザとの間の第２の関係とに応じて、前記第２のコメントよりも長く表現される、
請求項２１に記載の装置。
前記第１のコメントは、前記複合メディアコンテンツ内のリンクとして表示され、
前記リンクは、前記第１のメディアコンテンツと関係がある第２のメディアコンテンツへ接続する、
請求項２１に記載の装置。
前記第１のコメントは、オーディオコンテンツであり、
前記オーディオコンテンツは、前記第１のメディアコンテンツのオーディオ部分の代わりに再生される、
請求項２１に記載の装置。
前記第１のコメントは、前記複合メディアコンテンツ内の画像として表示され、
前記画像は、前記第１のメディアコンテンツと関係がある第２のメディアコンテンツの要求を生成するために選択され得る、
請求項２１に記載の装置。
前記メモリは、第２のコメントを記憶するよう更に動作し、
前記第１のコメントは画像として表示され、前記第２のコメントはテキスト列として表示される、
請求項２１に記載の装置。
前記複合メディアコンテンツ内の前記第１のコメントの位置は、ユーザ入力に応じて決定される、
請求項２１に記載の装置。
ユーザ入力に応答して制御信号を生成するインターフェイスと、
ユーザ入力に応答して第１のメディアコンテンツのリクエスト生成し、該第１のメディアコンテンツと関係がある第１のコメントのリクエストを生成し、前記第１のメディアコンテンツ及び前記第１のコメントを複合メディアコンテンツへとまとめ、更に、該複合メディアコンテンツを含む信号を生成するよう動作するプロセッサと、
前記第１のメディアコンテンツのリクエスト及び前記第１のコメントのリクエストを送信する送信器と、
前記第１のメディアコンテンツ及び前記第１のコメントを受ける入力部と
を有する装置。
前記複合メディアコンテンツを表示するディスプレイを更に有する
請求項３１に記載の装置。
前記第１のコメントは、第２のメディアコンテンツであり、
前記複合メディアコンテンツは、前記第１のメディアコンテンツの上に同時に再生される前記第２のメディアコンテンツを含む、
請求項３１に記載の装置。
前記第１のコメントは、開始時間及び存続期間を含むメタデータを含み、
前記開始時間は、前記第１のメディアコンテンツ内の時間と一致する、
請求項３１に記載の装置。
前記第１のコメントは、該コメントを生成するコメンテータによって決定された時間及び存続期間で表示される、
請求項３１に記載の装置。
第２のコメントを更に有し、前記第１のコメントは、該第１のコメントを生成する第１のコメンテータと前記第１のメディアコンテンツを生成するユーザとの間の第１の関係と、前記第２のコメントを生成する第２のコメンテータと前記第１のメディアコンテンツを生成する前記ユーザとの間の第２の関係とに応じて、前記第２のコメントよりも長く表現される、
請求項３１に記載の装置。
前記第１のコメントは、前記複合メディアコンテンツ内のリンクとして表示され、
前記リンクは、前記第１のメディアコンテンツと関係がある第２のメディアコンテンツへ接続する、
請求項３１に記載の装置。
前記第１のコメントは、オーディオコンテンツであり、
前記オーディオコンテンツは、前記第１のメディアコンテンツのオーディオ部分の代わりに再生される、
請求項３１に記載の装置。
前記第１のコメントは、前記複合メディアコンテンツ内の画像として表示され、
前記画像は、前記第１のメディアコンテンツと関係がある第２のメディアコンテンツへのハイパーリンクを含む、
請求項３１に記載の装置。
第２のコメントを更に有し、前記第１のコメントは画像として表現され、前記第２のコメントはテキスト列として表現される、
請求項３１に記載の装置。
前記複合メディアコンテンツ内の前記第１のコメントの位置は、ユーザ入力に応じて決定される、
請求項３１に記載の装置。