JP2020126438A - 共有情報処理装置及び制御プログラム - Google Patents

Abstract

【課題】共通の視聴対象をそれぞれ視聴する複数のユーザの間で要素を共有させる仕組みにおいて当該要素を表示する端末における突発的な負荷上昇を抑制する【解決手段】本発明の一形態である共有情報処理装置（例えば、サーバ４）は、視聴対象を視聴しているユーザの端末（例えば、携帯端末３）にて表示させるタイミングが該視聴対象に対し関連付けられる共有要素の中から前記タイミングに基づいて所定数の前記共有要素を要素群として特定する特定手段（例えば、置換処理部６７）と、前記特定手段により特定される前記要素群を前記所定数より少ない数の代替要素に置換する置換手段（例えば、置換処理部６７）と、を備える。【選択図】図９

Description

本発明は、共通の視聴対象をそれぞれ視聴する複数のユーザの間で要素を共有させる仕組みに関する。

再生されるコンテンツに応じて入力されるコメントを複数のユーザ間で共有するコミュニケーションシステムが知られている。例えば、特許文献１に記載のコミュニケーションシステムでは、コンテンツとともに表示させるべきコメントをコメントサーバから当該コンテンツの再生開始前に取得したユーザ端末が、タイムラインが分割された複数の時間区分のそれぞれにおいて表示数が所定数以下になるよう古いコメントを表示対象から除外する。

特開２０１１−１１９８４７号公報

特許文献１に記載のコミュニケーションシステムでは、コンテンツとともに表示されるコメントの時間的な表示数を平準化する処理が、当該コンテンツの再生開始前に実行される。そのため、コンテンツの再生中に追加されるコメントに起因する突発的な負荷上昇には対処できない。

本発明が解決しようとする課題は、共通の視聴対象をそれぞれ視聴する複数のユーザの間で要素を共有させる仕組みにおいて当該要素を表示する端末における突発的な負荷上昇を抑制することである。

上記課題を解決するため本発明は、視聴対象を視聴しているユーザの端末にて表示させるタイミングが該視聴対象に対し関連付けられる共有要素の中から前記タイミングに基づいて所定数の前記共有要素を要素群として特定し、当該要素群を前記所定数より少ない数の代替要素に置換する。

本発明の一形態である共有情報処理装置は、視聴対象を視聴しているユーザの端末にて表示させるタイミングが該視聴対象に対し関連付けられる共有要素の中から前記タイミングに基づいて所定数の前記共有要素要素群として特定する特定手段と、前記特定手段により特定される前記要素群を前記所定数より少ない数の代替要素に置換する置換手段と、を備える。

本発明によれば、共有要素を表示する端末における突発的な負荷上昇が抑制され得る。

動画配信システムの構成図である。（実施例） サーバの電気的構成を示すブロック図である。（実施例） 携帯端末の電気的構成を示すブロック図である。（実施例） 携帯端末の画面の表示態様を示す図である。（実施例） オノマトペ画像を表示している画面を示す図である。（実施例） 第２画像を表示している画面を示す図である。（実施例） 組合せ画像が表示される場合を示すタイミングチャートである。（実施例） 第２画像が置換される場合を示すタイミングチャートである。（実施例） サーバの動画配信に関する機能ブロック図である。（実施例） 携帯端末のオノマトペ表示に関する機能ブロック図である。（実施例） 携帯端末で実行されるオノマトペ表示処理の流れを示すフローチャートである。（実施例） サーバで実行されるオノマトペ表示処理の流れを示すフローチャートである。（実施例） サーバで実行されるオノマトペ表示処理の流れを示すフローチャートである。（実施例） 組合せ画像が表示される場合を示すタイミングチャートである。（変形例２）

［１．実施形態］
［１−１．主要な特徴］
本実施形態は、共通の視聴対象をそれぞれ視聴する複数のユーザの間で要素を共有させる仕組みに関する。本実施形態では、共有させる要素を表示する端末における突発的な負荷上昇を抑制するため、視聴対象を視聴しているユーザの端末にて表示させるタイミングが該視聴対象に対し関連付けられる共有要素の中から前記タイミングに基づいて所定数の前記共有要素を要素群として特定し、当該要素群を前記所定数より少ない数の代替要素に置換する。

「視聴対象」は、ユーザが視覚と聴覚の少なくともいずれかにより把握可能な視聴覚オブジェクトをいう。視聴覚オブジェクトは、映像，音声，これらの組合せを包含する概念である。視聴覚オブジェクトは、信号化されていないオブジェクトと、信号をもとに再生されるオブジェクトを包含する。再生されるオブジェクトの信号は、例えば、記録媒体への記録，搬送波による搬送が可能である。再生されるオブジェクトは、例えば、再生機能を有する装置により映像と音声の少なくともいずれかとして再生される。

視聴対象の「進行」とは、視聴対象の経時的な変遷をいう。変遷は、不変と変化を包含する概念である。不変とは、視覚情報や聴覚情報が一定のまま継続することをいう。変化は、視覚情報や聴覚情報が一定でないことをいう。変化は、例えば、不規則な変化，規則的な変化，周期的な反復，一時的な消失，これらの組合せである。視聴対象が信号化されていないオブジェクトである場合、進行中のタイミング（時点）は時刻情報により特定され得る。視聴対象が信号をもとに再生されるオブジェクトである場合、進行中の時点は時刻情報又は進行開始時点からの経過時間（つまり、タイムライン上の位置）により特定され得る。

視聴対象の「視聴」とは、視聴対象の進行を視覚と聴覚の少なくともいずれかにより把握することをいう。視聴対象が信号化されていないオブジェクトである場合、当該視聴対象は進行とほぼ同時に視聴される。信号化されていないオブジェクトの視聴は、例えば、スポーツの試合を競技場で視聴すること，自然現象（例えば、日食，月食，オーロラ，日の出，日の入り，夕焼け，めずらしい気象現象など）を適当な場所で視聴すること，行事（例えば、お祭り，街頭演説など）を適当な場所で視聴することである。視聴対象が信号をもとに再生されるオブジェクトである場合、当該視聴対象は再生された際に視聴される。再生されるオブジェクトの視聴は、例えば、テレビジョン放送の視聴，ラジオ放送の視聴，オンライン配信される動画の視聴，オンライン配信される音楽の視聴である。

視聴対象を視聴するユーザ（視聴者）は、所定の操作（付加操作）により、当該視聴対象に所定の要素（共有要素）を関連付けることができる。所定の操作は、例えば、入力要素（操作要素）に対するポインティング操作である。入力要素は、例えば、画面内に表示されるボタンである。ポインティング操作は、例えば、タッチパネルに対するタッチ操作，画面内に表示されるポインタの位置決め操作とクリック操作の組合せである。視聴対象に所定の要素が関連付けられる場合には、当該視聴対象の進行中に共有要素を表示させるタイミングが当該視聴対象に対し関連付けられる。視聴対象に関連付けられた要素は、当該視聴対象の進行中に、関連付けされた表示タイミングで画面に表示され得る。

所定の要素は、視聴対象に対するユーザの反応を表す視覚要素である。ユーザの反応は、例えば、ユーザの感情である。視覚要素は、例えば、静止画像，アニメーション画像，動画像，テキスト，これらの組合せである。視聴対象に対するユーザの感情を表す画像は、感情画像と呼ばれることがある。感情画像は、例えば、ユーザの感情を示すようなオノマトペ（擬声語，擬音語，擬態語などともいう。）を図案化した画像である。オノマトペを図案化した画像は、オノマトペ画像と呼ばれることがある。また、所定の要素は、共通の視聴対象を視聴する複数のユーザの間で共有され得る。共有され得る要素は、オンラインで送受され、端末の画面に表示される。共有され得る要素が表示される画面を有する端末は、視聴対象であるオブジェクトを再生する装置と同じ装置でもよいし、異なる装置でもよい。

「タイミングに基づいて」特定される場合、表示のタイミングが近接関係にある所定数の共有要素が要素群として特定され得る。２つの共有要素について表示のタイミングが近接関係にあるとは、一方が画面に表示されるタイミングと他方が画面に表示されるタイミングの時間差が所定の閾値以下であることをいう。３つ以上の共有要素について表示のタイミングが近接関係にあるとは、３つ以上の共有要素の中から任意に選択される２つの共有要素について表示のタイミングが近接関係にあることをいう。なお、表示のタイミングについて近接関係の有無を判定する場合、各共有要素の表示が開始されてから終了するまでの間の一時点が表示のタイミングとして採用される。表示のタイミングとして採用される時点は、例えば、始点，終点，所定の基準点である。

「代替要素」とは、共有要素を２つ以上含む要素群（置換対象）の代わりに視聴対象に関連付けられる視覚情報をいう。代替要素は、置換対象と共通の視覚情報でもよいし、置換対象と表示態様が相違する視覚情報でもよい。表示態様は、例えば、表示時間，表示サイズ，表示色，付加的な視覚情報の有無，動きの有無である。表示態様の変化により、要素の重複数をユーザに示してもよい。具体的には、重複数が多いほど派手（リッチ）になるように表示態様を変化させるとよい。派手とは、例えば、表示時間が長い，表示サイズが大きい，表示色が濃い，付加的な視覚情報の数が多い，動きが大きい等である。また、表示態様の変化により、要素の重複数をユーザに示してもよい。具体的には、重複数を示す視覚情報を代替要素に付加するとよい。重複数を示す視覚情報は、例えば、重複数に相当する数を表示するアイコン，重複数に相当する個数のアイコンである。

［１−２．付記］
本発明は、下記〔Ａ〕から下記〔Ｃ〕までの形態を少なくとも包含する。

〔Ａ〕視聴対象を視聴しているユーザの端末にて表示させるタイミングが該視聴対象に対し関連付けられる共有要素の中から前記タイミングに基づいて所定数の前記共有要素を要素群として特定する特定手段と、前記特定手段により特定される前記要素群を前記所定数より少ない数の代替要素に置換する置換手段と、を備える共有情報処理装置。

〔Ｂ〕視聴対象を視聴しているユーザの端末にて表示させるタイミングが該視聴対象に対し関連付けられる共有要素の中から前記タイミングに基づいて所定数の前記共有要素を要素群として特定する特定機能と、前記特定機能により特定される要素群を前記所定数より少ない数の代替要素に置換する置換機能と、を情報処理装置のコンピュータに実現させる制御プログラム。なお、当該制御プログラムは、記録媒体に非一時的に記録されていてもよい。

〔Ｃ〕視聴対象を視聴しているユーザの端末にて表示させるタイミングが該視聴対象に対し関連付けられる共有要素の中から前記タイミングに基づいて所定数の前記共有要素を要素群として特定する特定段階と、前記特定段階において特定される前記要素群を前記所定数より少ない数の代替要素に置換する置換段階と、を含む、情報処理装置の制御方法。

上記〔Ａ〕の「情報処理装置」には、下記の技術的限定を加えてもよい。また、同様の技術的限定を、上記〔Ｂ〕の「制御プログラム」及び上記〔Ｃ〕の「情報処理装置の制御方法」にそれぞれ加えてもよい。

（１）前記特定手段が、前記共有要素に付加された付加属性に基づいて前記要素群を特定し、前記置換手段が、前記要素群に含まれる複数の共有要素のうち少なくともいずれかに付加されている前記付加属性を引き継ぐ前記代替要素を前記共有要素として前記視聴対象に付加する。「付加属性に基づいて」特定される場合、付加属性が共通性を有する所定数の共有要素が要素群として特定され得る。共通性を有するとは、同一又は関連性が高いことをいう。これにより、置換後の代替要素がさらに代替要素に置換され得る。

（２）前記特定手段が、前記視聴対象に前記共有要素を関連付けたユーザが属するユーザグループと前記視聴対象に関連付けられた前記共有要素が属する要素グループとの少なくともいずれかを特定可能な前記付加属性に基づいて前記要素群を特定する。これにより、時間的に重なりやすい複数の共有要素が代替要素に置換される。

なお、視聴対象に共有要素を関連付けることができるユーザは、少なくとも１つのユーザグループに属することができる。各ユーザは、いずれかのユーザグループに自発的に加入することができる。また、各ユーザは、属性や状況に応じていずれかのユーザグループに自動的に加入することがある。視聴対象に関連付けられる共有要素は、少なくとも１つの要素グループに属することができる。各共有要素は、少なくとも１つの要素グループに予め振り分けられている。

（３）前記特定手段が、前記ユーザグループと前記要素グループの両方を特定可能な前記付加属性に基づいて前記要素群を特定する。これにより、時間的に重なりやすい複数の共有要素が代替要素に置換される。

（４）前記置換手段が、前記特定手段により特定される要素群に含まれる前記所定数の前記共有要素の種別が同一である場合に該要素群を該種別の重複数に応じた前記代替要素に置換する。これにより、負荷が過度に上昇しないように視覚的な演出が施される。

（５）前記特定手段が、所定の発動条件を満たす場合に限り前記組を特定する。これにより、突発的な負荷上昇が発生しやすい状況に限って代替要素への置換が発動する。

「発動条件」とは、置換処理（所定数の共有要素を所定数より少ない数の代替要素に置換する処理）を発動させるか否かを判定するための条件をいう。発動条件は、近接関係にある共有要素が属するグループの要素数に関する条件として設定されるのが好適である。要素数に関する条件は、例えば、要素数が所定の上限値に達し又はこれを超えていることの真偽である。所定の上限値は、固定値であってもよいし、変動値であってもよい。変動値は、端末の処理能力に応じて設定されるのが好ましい。端末の処理能力は、情報の表示に関する処理能力でもよいし、情報の受信に関する処理能力でもよい。情報の表示に関する処理能力は、例えば、端末の制御処理装置のクロック周波数である。情報の受信に関する処理能力は、例えば、端末の通信回線の速度である。

（６）前記特定手段が、前記タイミングが近接する複数の前記共有要素を含む近接要素グループの要素数が発動条件を満たさない場合を除き、該近接要素グループに含まれる前記所定数の前記共有要素を前記要素群として特定する。これにより、突発的な負荷上昇が発生しにくい状況では代替要素への置換を発動させない。

（７）前記特定手段が、前記端末の処理能力に応じて変動する前記発動条件を満たさない場合を除き、前記近接要素グループに含まれる前記所定数の前記共有要素を前記要素群として特定する。これにより、突発的な負荷上昇が発生しにくい状況かどうかを柔軟に判定し得る。

［２．実施例］
以下に、本発明の実施例について、図面を参照して説明する。本実施例は、動画（視聴対象）の表示画面にユーザ（視聴者）の感情を表す画像（反応を表す画像）を表示させる仕組みに関する。本実施例では、共有情報処理装置をサーバとし、情報処理装置（第１装置，第２装置）を携帯端末、いわゆるスマートフォンとして説明する。なお、携帯端末は、スマートフォンに限らず、タブレット端末やノートパソコン等であってもよい。また、情報処理装置は、デスクトップパソコンであってもよい。実施例に係る各プログラムは、共有情報処理装置や情報処理装置に記憶されるが、これに限らず、ＣＤ−ＲＯＭ（Compact Disk Read Only Memory）等の光ディスクや、ＵＳＢ（Universal Serial Bus）フラッシュメモリ等の可搬型の半導体メモリ等の記憶媒体に記憶されてもよい。

［２−１．特徴］
本実施例では、第１の携帯端末（第１装置）の画面（第１画面）に表示される動画（視聴対象）を視聴中の第１ユーザ（本人）により当該動画に第１画像（第１要素）を付加するために第１の携帯端末に対してなされた付加操作（第１操作）の操作情報と、第２の携帯端末（第２装置）の画面（第２画面）に表示される上記動画を視聴中の第２ユーザ（他人）により当該動画に第１画像（第２要素）を付加するために第２の携帯端末に対してなされた付加操作（第２操作）の操作情報と、が各携帯端末からサーバ（第１指示手段，共有情報処理装置）に提供される。サーバは、娯楽性を向上させるため、提供を受けた操作情報に応じた第１操作と第２操作の組合せに基づく組合せ画像（第３要素）を、第１画面及び第２画面にそれぞれ表示させる。

また、本実施例では、携帯端末における突発的な負荷上昇を抑制するため、動画の再生中に当該動画を視聴しているユーザの携帯端末にて表示させるタイミングが当該動画に対し関連付けられる第２画像（共有要素）の中から表示タイミングの近接関係（タイミング）並びに主体及び客体の共通性（付加属性）に基づいて２つ以上（所定数）の第２画像を画像群（要素群）として特定し、当該画像群に含まれる第２画像を無効化しつつ当該付加属性を引き継ぐ１つ（所定数より少ない数）の新たな第２画像（代替要素）を当該動画に付加する置換処理を実行する。主体とは動画に第２画像を付加したユーザをいい、主体に共通性があるとは主体が同一のユーザグループに属することをいう。各ユーザは、少なくともいずれかのユーザグループに属している。また、客体とは動画に付加された第２画像（要素）の種類をいい、客体に共通性があるとは客体が同一の要素グループに属することをいう。各要素は、少なくともいずれかの要素グループに属している。

［２−２．動画配信システム］
実施例に係るサーバは、動画配信システムに含まれ、携帯端末に動画を配信する。実施例に係る携帯端末は、動画配信システムに含まれ、サーバから動画が配信される。

［２−２−１．動画配信システムの全体構成］
図１は、実施例に係る動画配信システム１の概略構成図である。動画配信システム１は、通信回線２、複数の携帯端末３、及びサーバ４を含んで構成される。

通信回線２は、コンピュータネットワークを形成するものであり、例えば、電気事業者によって提供される広域通信回線である。

携帯端末３は、例えば、スマートフォンやタブレット端末、ノートパソコン等の情報処理端末である。携帯端末３は、画像を表示するタッチパネルディスプレイ３ａ、音を出力するスピーカー３ｂ、音が入力されるマイク３ｃ、及び被写体を撮像するカメラ３ｄ等を備える。携帯端末３は、サーバ４から配信される動画を表示させるために、一例として、専用のアプリケーションソフトウエア（以下「動画視聴アプリ」という。）がインストールされる。

サーバ４は、通信回線２を介して、複数の携帯端末３へコンテンツを配信する共有情報処理装置である。実施例に係るコンテンツは、一例として動画である。動画は、例えばアニメーションやドラマ等のようにストーリーが存在し、ストーリーに沿って物語が進行するものや、ミュージックビデオや音楽のライブ動画、各種スポーツ動画等であり、特に限定されない。なお、実施例に係る動画は、一例としてアニメーションである。また、サーバから配信されるコンテンツも動画に限らず、ユーザが視聴可能なものであれば、連続した静止画の集合等、他のサービスであってもよい。

さらに、ここでいう視聴とは、ユーザが視覚及び聴覚の少なくとも一方でコンテンツを認識することであり、コンテンツは、上記に加え、例えば、音のない動画等であってもよいし、画像のない音等であってもよい。

動画が配信される複数の携帯端末３は、一例として、グループ５としてサーバ４に登録（以下「グループ登録」という。）される。サーバ４は、グループ登録された携帯端末３に対して同時に動画を配信する。すなわち、グループ登録された複数の携帯端末３は、サーバ４から配信された動画を同じタイミングで、換言すると同期させてタッチパネルディスプレイ３ａに表示する。これにより、グループ登録された携帯端末３の各ユーザは、同時に動画を視聴することとなる。

なお、動画の配信は、予め定められた日時であってもよいし、グループ５毎に任意のタイミングであってもよい。任意のタイミングで動画が配信される場合には、例えば、ホストとなる携帯端末３がサーバ４へ動画の配信要求を行い、当該配信要求を受け付けたサーバ４は、グループ５を構成する携帯端末３へ動画の配信を行う。

図１では、グループ５を構成する携帯端末３を４つとしているが、これは一例であり、グループ５は複数の携帯端末３で構成されていればその台数は限定されない。また、グループ５を構成する携帯端末３の種類も限定されず、スマートフォンやタブレット端末、ノートパソコン等が混在してもよい。

［２−２−２．サーバの構成］
図２は、実施例に係るサーバ４の電気的構成を示すブロック図である。

実施例に係るサーバ４は、サーバ４全体の動作を司る主制御部であるＣＰＵ（Central Processing Unit）２０、各種プログラム及び各種データ等が予め記憶されたＲＯＭ（Read Only Memory）２２、ＣＰＵ２０による各種プログラムの実行時のワークエリア等として用いられるＲＡＭ（Random Access Memory）２４、各種プログラム及び各種データを記憶する記憶手段としてのＨＤＤ（Hard Disk Drive）２６を備えている。

ＨＤＤ２６は、登録されたグループ５に関する情報や、携帯端末３に配信する動画（動画データ）、その他各種情報を記憶する。なお、記憶手段は、ＨＤＤ２６に限らず、例えば、フラッシュメモリ等の半導体メモリ等の他の記憶媒体であってもよい。

さらに、サーバ４は、キーボード及びマウス等で構成されて各種操作の入力を受け付ける操作入力部２８、各種画像を表示する例えば液晶ディスプレイ装置等のモニタ３０、通信回線２を介して携帯端末３等の他の情報処理装置等と接続され、他の情報処理装置等との間で各種データの送受信を行う外部インタフェース３２を備えている。

これらＣＰＵ２０、ＲＯＭ２２、ＲＡＭ２４、ＨＤＤ２６、操作入力部２８、モニタ３０、及び外部インタフェース３２は、システムバス３４を介して相互に電気的に接続されている。従って、ＣＰＵ２０は、ＲＯＭ２２、ＲＡＭ２４、及びＨＤＤ２６へのアクセス、操作入力部２８に対する操作状態の把握、モニタ３０に対する画像の表示、並びに外部インタフェース３２を介した他の情報処理装置等との各種データの送受信等を各々行なうことができる。

［２−２−３．携帯端末の電気的構成］
図３は、携帯端末３の電気的構成を示す機能ブロック図である。携帯端末３は、図１に示される構成に加え、主制御部４０、主記憶部４２、補助記憶部４４、通信部４６、及び操作ボタン４８を備える。

主制御部４０は、例えば、ＣＰＵ、マイクロプロセッサ、ＤＳＰ（Digital Signal Processor）等であり、携帯端末３の全体の動作を制御する。

主記憶部４２は、例えば、ＲＡＭやＤＲＡＭ（Dynamic Random Access Memory）等で構成されており、主制御部４０による各種プログラムに基づく処理の実行時のワークエリア等として用いられる。

補助記憶部４４は、例えば、フラッシュメモリ等の不揮発性メモリであり、画像等の各種データ及び主制御部４０の処理に利用されるプログラム等を保存する。補助記憶部４４に記憶されるプログラムは、例えば、携帯端末３の基本的な機能を実現するためのＯＳ（Operating System）、各種ハードウェアを制御するためのドライバ、電子メールやウェブブラウジング、その他各種機能を実現するためのプログラム等である。また、補助記憶部４４には、サーバ４から配信された動画を再生してタッチパネルディスプレイ３ａに表示させるための動画視聴アプリ等のアプリケーションソフトが予め記憶されている。

通信部４６は、例えばＮＩＣ（Network Interface Controller）であり、通信回線２に接続する機能を有する。なお、通信部４６は、ＮＩＣに代えて又はＮＩＣと共に、無線ＬＡＮ（Local Area Network）に接続する機能、無線ＷＡＮ（Wide Area Network）に接続する機能、例えばBluetooth（登録商標）等の近距離の無線通信、及び赤外線通信等を可能とする機能を有してもよい。

操作ボタン４８は、携帯端末３の側面に設けられ、携帯端末３を起動又は停止させるための電源ボタンやスピーカー３ｂが出力する音のボリューム調整ボタン等である。

これら主制御部４０、主記憶部４２、補助記憶部４４、通信部４６、タッチパネルディスプレイ３ａ、スピーカー３ｂ、マイクロフォン３ｃ、カメラ３ｄ、及び操作ボタン４８は、システムバス４９を介して相互に電気的に接続されている。従って、主制御部４０は、主記憶部４２及び補助記憶部４４へのアクセス、タッチパネルディスプレイ３ａに対する画像の表示、ユーザによるタッチパネルディスプレイ３ａや操作ボタン４８に対する操作状態の把握、マイクロフォン３ｃへの音の入力、スピーカー３ｂからの音の出力、カメラ３ｄに対する制御、及び通信部４６を介した各種通信網や他の情報処理装置へのアクセス等を行える。

［２−３．オノマトペ表示］
実施例に係る携帯端末３は、サーバ４から配信された動画をタッチパネルディスプレイ３ａに表示しながら、ユーザの操作に応じた画像（詳細を後述するオノマトペ画像）も表示可能とする。なお、以下の説明において、オノマトペ画像をタッチパネルディスプレイ３ａに表示させる機能をオノマトペ表示機能といい、タッチパネルディスプレイ３ａを画面３ａともいう。

オノマトペ表示機能は、一例として、実施例に係る動画視聴アプリが有する機能の一つである。なお、一例として、動画視聴アプリを用いて画面３ａに表示される動画のすべてに対してオノマトペ表示が可能ではなく、オノマトペ表示が可能な動画は予め定められている。

［２−３−１．画面構成］
図４から図６は、実施例に係る動画視聴アプリが起動している携帯端末３の画面３ａの表示態様を示す。画面３ａには、配信動画表示領域５０Ａ、第１画像表示領域５０Ｂ、及び第２画像表示領域５０Ｃが設定されている。

配信動画表示領域５０Ａは、サーバ４から配信される動画を表示する領域である。第１画像表示領域５０Ｂは、ユーザの操作に応じた第１画像５１（図５参照）を表示する領域である。第２画像表示領域５０Ｃは、他のユーザの操作によって他の携帯端末３に表示された第１画像５１に基づいた第２画像５２（図６参照）を表示する領域である。なお、詳細を後述するように、第２画像５２は、他の携帯端末３の第１画像表示領域５０Ｂに表示された第１画像５１の縮小画像である。また、実施例に係る第１画像表示領域５０Ｂ及第２画像表示領域５０Ｃは、一例として、配信動画表示領域５０Ａを挟んで対向する位置に設けられる。

ここで、第１画像５１は、動画を視聴しているユーザの感情を示す感情画像を含む画像である。実施例に係る感情画像は、一例として、ユーザの感情を示すような擬声語（擬音語や擬態語ともいう。）を図案化した画像、換言するとオノマトペ画像である。オノマトペ画像には、例えば、“スゲェ”、“ヤバイ”、“ブラボー”等がある。なお、図案化とは、例えば擬声語を示す文字を装飾的に描いたものである。

また、第１画像５１には、オノマトペ画像以外にも動画に出演するキャラクタ等を示すキャラクタ画像や、キャラクタのセリフを示すセリフ画像、ユーザ自身が入力したテキスト等、その他様々が画像が含まれてもよい。

また、第１画像５１は、動画のシーンに応じて異なってもよい。例えば、楽しげなシーン、悲しげなシーン、キャラクタ同士の対決シーン等に応じて、ユーザがシーンに共感して選択する可能性が高いオノマトペ画像やキャラクタ画像が表示可能とされてもよい。

また、表示可能な第１画像５１は、ユーザによって異なってもよい。例えば、配信される動画と関連するゲーム等のサービスによって特定のアイテムを取得する等によって、表示可能な第１画像５１の種類が増えてもよい。また、例えば、所定の対価（例えば、通貨，仮想通貨，ポイント等の金銭的価値）の負担を条件に、表示可能な第１画像５１の種類が増えてもよい。

実施例に係る第１画像表示領域５０Ｂには、ユーザによって操作され、各々異なる第１画像５１に対応する操作部である複数の表示ボタン５３Ａ〜５３Ｄが表示される。これにより、ユーザは、動画を視聴しながら表示ボタン５３Ａ〜５３Ｄを操作することで、第１画像５１を第１画像表示領域５０Ｂに表示させることができる。なお、表示ボタン５３Ａ〜５３Ｄの操作とは、一例として表示ボタン５３Ａ〜５３Ｄを指示体でタッチする（押す）ことである。実施例に係る指示体は、一例としてユーザの指である。また、以下の説明において、表示ボタン５３Ａ〜５３Ｄを区別して説明しない場合には、末尾のアルファベットの表記を省略する。

図４から図６の例では、４つの表示ボタン５３Ａ〜５３Ｄが第１画像表示領域５０Ｂの下部において横方向に一列に表示されている。そして、表示ボタン５３Ａが、“スゲェ”を図案化したオノマトペ画像に対応し、表示ボタン５３Ｂが、“ヤバイ”を図案化したオノマトペ画像に対応し、表示ボタン５３Ｃが、“ブラボー”を図案化したオノマトペ画像に対応する。さらに、表示ボタン５３Ｄは、キャラクタ画像に対応する。なお、表示ボタン５３は対応するオノマトペ画像やキャラクタ画像等を、ユーザが直感的に認識可能なデザインとされている。

このように、第１画像表示領域５０Ｂに複数の表示ボタン５３が表示されることによって、ユーザは、動画に対する自身の反応（感情）に最も合う第１画像５１を簡易に画面３ａに表示させることができる。また、第１画像５１にユーザの感情を示すオノマトペ画像が含まれることによって、ユーザは、動画を視聴した自身の感情を画面３ａに表示させることができる。

なお、図４から図６の例では、第１画像表示領域５０Ｂに４種類の表示ボタン５３が表示されているが、これは一例であり、表示ボタン５３の数及び種類はこれに限られない。また、表示ボタン５３は、動画のシーン等に応じて異なる第１画像５１を表示可能なように適宜切り替えて表示されてもよい。

また、表示ボタン５３の配列も一例であり、例えば第１画像表示領域５０Ｂの右側又は左側にまとめて表示されてもよいし、第１画像表示領域５０Ｂの下部において横方向に２列で表示されてもよい。さらに、例えばユーザが画面３ａの下部を左又は右方向へスワイプ操作することで、異なる種類の第１画像５１を表示させるための表示ボタン５３が新たに表示されてもよい。

［２−３−２．第１画像の表示］
図５を参照して、第１画像５１の表示態様について詳細に説明する。図５の例では、ユーザによって表示ボタン５３Ｃが操作されて、“ブラボー”が図案化されたオノマトペ画像が画面３ａに表示されている。

実施例に係るオノマトペ表示機能は、画面３ａに動画が表示された状態で、オノマトペ画像（第１画像５１）を画面３ａに表示させるためのユーザの操作を受け付ける。すなわち、ユーザは、動画を視聴しながら、表示ボタン５３を操作することで、動画の視聴によって抱いた感情に対応するオノマトペ画像を画面３ａに表示させる。

そして実施例に係るオノマトペ画像は、ユーザによる表示ボタン５３の操作態様に応じて変化しながら、動画を表示している画面３ａに表示される。実施例に係るオノマトペ画像は、一例として、ユーザによる表示ボタン５３の操作態様に応じて、第１画像表示領域５０Ｂから配信動画表示領域５０Ａに伸長するように表示される。

このように、ユーザは動画を視聴しながら携帯端末３を操作することで画面３ａに表示するオノマトペ画像を変化させることができる。従って、ユーザは、動画の視聴によって抱いた感情を、動画を視聴しながら簡易に画面に表示できる。

また、図５の例では、オノマトペ画像が第１画像表示領域５０Ｂを越えて配信動画表示領域５０Ａに重畳して表示されている。このように、実施例に係るオノマトペ表示機能は、オノマトペ画像をユーザの操作態様に応じて第１画像表示領域５０Ｂを超えて配信動画表示領域５０Ａに重畳させるので、ユーザは、視聴している動画に対してより感情移入し易くなり、動画の視聴に対する娯楽性がより高められる。

なお、図５においてオノマトペ画像は、配信動画表示領域５０Ａも超えて第２画像表示領域５０Ｃにも重畳されている。しかしながら、これは一例であり、オノマトペ画像は、第２画像表示領域５０Ｃに重畳不可とされてもよい。

次に、表示ボタン５３の操作態様に応じて変化するオノマトペ画像の詳細を説明する。

実施例に係る第１画像５１は、一例として、ユーザによる表示ボタン５３の操作の継続時間に応じて表示態様が変化する。表示ボタン５３の操作の継続時間とは、例えば、表示ボタン５３を継続して押し続けた時間（以下「長押し時間」という。）である。

実施例に係るオノマトペ表示機能は、ユーザが表示ボタン５３を押すと、表示ボタン５３の位置の近傍を起点としてオノマトペ画像の表示を開始する。表示ボタン５３の位置の近傍を起点としたオノマトペ画像の表示とは、例えば、オノマトペ画像の下端が表示ボタン５３の位置とほぼ一致するように、オノマトペ画像が表示されることである。

そして、オノマトペ画像は、表示ボタン５３に対する長押し時間に応じて第１画像表示領域５０Ｂから配信動画表示領域５０Ａに向かって伸長（以下「伸長表示」という。）する。

伸長表示は、例えば、オノマトペ画像が長細く又は拡大して表示されるものである。なお、伸長表示は、例えば、文字数や文字の種類等、形態を変えながら、オノマトペ画像が伸長するものでもよい。例えば、オノマトペ画像が“ブラボー”の場合には、長押し時間に応じて“ブラ”と“ボー”との間に“ァ”が増加するように伸長してもよいし、長押し時間に応じて“ブラボ”と“ー”との間に“ォ”が増加するように伸長してもよい。

すなわち、ユーザは、視聴している動画に対してより強い感情を抱いた場合には、この感情に対応するオノマトペ画像を表示させるための表示ボタン５３を押し続ける。これにより、オノマトペ画像は、第１画像表示領域５０Ｂから配信動画表示領域５０Ａへ向かって伸長表示され、オノマトペ画像がより目立つように画面３ａに表示される。

このように、第１画像５１に含まれるオノマトペ画像が、ユーザによる操作態様に応じて変化することで、ユーザは、コンテンツに対する自身の反応（感情）をより娯楽性高く画面３ａに表示できる。

また、第１画像５１は、ユーザによる操作態様に応じて、第１画像表示領域５０Ｂから配信動画表示領域５０Ａに向かって伸長するように表示されるので、ユーザは、コンテンツに対する自身の反応（感情）をより娯楽性高く画面３ａに表示できる。

なお、ユーザによる表示ボタン５３の操作（長押し操作）が終了すると、オノマトペ画像の画面３ａへの表示は停止される。オノマトペ画像の表示の停止は、例えば、表示されているオノマトペ画像が瞬間的に画面３ａから消えてもよいし、伸長されたオノマトペ画像が表示ボタン５３に向かって縮小して画面３ａから消えてもよい。

また、図５の例では、オノマトペ画像を表示させるために、ユーザによって操作されている表示ボタン５３Ｃの周囲が強調表示されている。これにより、ユーザは自身が操作している表示ボタン５３Ｃを簡易に認識でき、かつオノマトペ表示に関する娯楽性がより高くなる。

また、実施例に係るオノマトペ画像以外の第１画像５１であるキャラクタ画像等は、変化することなく画面３ａに表示されるが、これに限らず、オノマトペ画像以外の第１画像５１も、ユーザによる表示ボタン５３の操作態様に応じて変化しながら、動画を表示している画面３ａに表示されてもよい。

［２−３−３．第２画像の表示］
図６を参照して、第２画像５２の表示態様について詳細に説明する。なお、第２画像５２は、上述のように、他のユーザの操作によって他の携帯端末３に表示された第１画像５１の縮小画像である。

実施例に係るオノマトペ表示機能は、他のユーザが他の携帯端末３に第１画像５１を表示させたタイミングから略時間遅れなく、第２画像表示領域５０Ｃに第２画像５２を表示させる。これにより、ユーザは、同じ動画を視聴している他のユーザの反応を動画を視聴しながら知ることができる。

また、第２画像５２が第１画像５１のように配信動画表示領域５０Ａに重畳して表示されると、ユーザは第２画像５２が動画の視聴に邪魔となり、煩わしく感じる可能性がある。そこで、第２画像５２は、他のユーザの操作態様にかかわらず第２画像表示領域５０Ｃを超えて配信動画表示領域５０Ａに重畳して表示されない。これにより、ユーザは、煩わしさを感じることなく視聴している動画に対する他のユーザの反応を確認することができる。

なお、上述のように第１画像５１は配信動画表示領域５０Ａへの重畳も可能とされているが、これはユーザ自身の意思で行われているので、配信動画表示領域５０Ａへの第１画像５１の重畳によってユーザが煩わしさを感じることは無い。

また、画面３ａは、第１画像表示領域５０Ｂと第２画像表示領域５０Ｃとが異なる領域となるように設定されているので、ユーザが表示させた第１画像５１と他のユーザが表示させた第２画像５２とが混在して表示されることがない。これにより、ユーザは、自身が表示させた第１画像５１と他のユーザが表示させた第２画像５２とを簡易に分けて認識できる。

また、実施例に係る他のユーザとは、一例として、ユーザと同じグループに登録している他のユーザである。すなわち、ユーザがグループ登録せずに動画を視聴している場合には、第２画像表示領域５０Ｃに第２画像５２が表示されることはない。なお、これに限らず、グループ登録の有無にかかわらず、動画を視聴している全ての他のユーザの操作による第２画像５２が第２画像表示領域５０Ｃに表示されてもよい。

また、実施例に係る第２画像表示領域５０Ｃには、複数の他のユーザの操作による複数の第２画像５２が表示される。そして、実施例に係る第２画像表示領域５０Ｃは、一例として、他のユーザ毎に第２画像５２を表示する位置が定められていない。すなわち、第２画像表示領域５０Ｃには、複数の他のユーザの操作による複数の第２画像５２がランダムな位置に混在して表示される。さらに、第２画像５２は、第２画像表示領域５０Ｃ内で上下左右方向に移動しながら表示されてもよい。なお、これに限らず、第２画像表示領域５０Ｃ内において、他のユーザ毎に第２画像５２を表示する位置が定められてもよい。

また、第２画像５２は、当該第２画像５２とされた第１画像５１を自身の携帯端末３に表示させた他のユーザを示す識別画像（以下「ユーザアイコン」という。）５４が隣接して表示される。これにより、ユーザは、第２画像表示領域５０Ｃに表示されている第２画像５２がどのユーザによるものかを認識できる。なお、図６の例では、ユーザアイコン５４が円の中心に一文字のアルファベットが表示されたものであるが、これは一例であり、ユーザアイコン５４はユーザ毎に設定された画像であったり、ユーザのイニシャルであってもよく、ユーザアイコン５４のデザインは限定されない。

また、図６に示される第２画像５２は、オノマトペ画像が横書きで表示されているが、これは第２画像表示領域５０Ｃのサイズ（縦横比）に対応して設定されており、第２画像５２はオノマトペ画像が縦書きで表示されてもよい。

また、第２画像５２は配信動画表示領域５０Ａに重畳されないものの、他のユーザによる操作態様に対応して第２画像表示領域５０Ｃ内で変化（例えば伸長）しながら表示されてもよい。なお、第２画像５２は、配信動画表示領域５０Ａに重畳しなければ、第２画像表示領域５０Ｃから第１画像表示領域５０Ｂに重畳してもよい。

［２−３−４．組合せ画像表示］
実施例に係る携帯端末３は、ユーザによる第１画像５１を表示させるための操作と他のユーザによる第１画像５１を表示させるための操作との組み合わせに応じた組合せ画像を画面３ａに表示させる組合せ画像表示機能を有する。

これにより、携帯端末３は、動画に対するユーザと他のユーザとの反応をより娯楽性高く画面に表示できる。また、一人のユーザによる操作では表示されない画像が他のユーザによる操作との組み合わせによって表示されるので、携帯端末３は、より多くのユーザに対してコンテンツの視聴を促すことができる。

また、組合せ画像は、画面３ａに表示されている動画に重畳して表示される。すなわち、組合せ画像は、第１画像表示領域５０Ｂだけではなく、配信動画表示領域５０Ａや第２画像表示領域５０Ｃに重畳して表示される。これにより、ユーザは、組合せ画像が表示されたことを簡易に認識でき、かつ動画を視聴することによる娯楽性がより高まる。

なお、組合せ画像が画面３ａに表示される場合は、それが組合せ画像であることをユーザが認識可能なように表示される。例えば、他のユーザが同じタイミングで表示操作したことが認識されるように、他のユーザのユーザＩＤが組合せ画像と共に画面３ａに表示されてもよい。

図７は、組合せ画像が画面３ａに表示される場合を示すタイミングチャートである。

実施例に係る組合せ画像表示機能は、ユーザの操作と他のユーザの操作のタイミングが所定時間（以下「組合せ期間」という。）内の場合に、組合せ画像を画面３ａに表示させる。すなわち、組合せ期間内に複数のユーザが第１画像５１の表示操作を行う場合は、同じシーンを視聴したことによるユーザの反応であると解される。このため、組合せ画像表示機能は、動画のシーンに応じた複数のユーザの反応に基づいて組合せ画像を表示することになるので、動画を視聴することによるユーザの娯楽性がより高まる。

なお、組合せ期間の始期は、あるユーザが第１画像５１の表示操作を開始したタイミングである。すなわち、図７（Ａ）に示されるように、ユーザＡによる表示操作の開始タイミングを始期とした組合せ期間内にユーザＢが表示操作を行った場合、ユーザＡ，Ｂの携帯端末３の画面３ａに組合せ画像が表示される。

組合せ画像の表示期間は、一例として、ユーザによる表示操作が終了するまでとする。図７（Ａ）の例では、ユーザＢの表示操作が開始されてから終了するまでユーザＡ，Ｂの携帯端末３の画面３ａに組合せ画像が表示される。

図７（Ｂ）の例では、組合せ期間内であるものの、その開始タイミングとなったユーザＡの表示操作が終了した後に、ユーザＣによる表示操作が行われた場合を示す。図７（Ｂ）の例では、ユーザＢの表示操作が開始されてからユーザＣの表示操作が終了するまでユーザＡ，Ｂ，Ｃの携帯端末３の画面３ａに組合せ画像が表示される。

なお、図７に示される組合せ画像の表示態様は一例であり、これに限られない。例えば、組合せ期間の概念はなく、ユーザの表示操作と他のユーザの表示操作とが重なったタイミングで組合せ画像が画面３ａに表示されてもよい。また、組合せ画像毎に表示時間が予め定められ、当該表示時間が経過したタイミングで組合せ画像の表示が終了してもよい。

また、実施例に係る組合せ画像は、第１画像５１の替わりに画面３ａに表示される。図７（Ａ）の例では、まず、ユーザＡの表示操作に応じた第１画像５１がユーザＡの携帯端末３の画面３ａに表示されるが、ユーザＢの表示操作が開始されると共に当該第１画像５１の表示が終了し、ユーザＡの携帯端末３の画面３ａに組合せ画像が表示される。一方、ユーザＢの携帯端末３にはユーザＢ自身が表示させようとした第１画像５１は画面３ａに表示されずに、組合せ画像が表示される。このように、組合せ画像が第１画像５１の替わりに画面３ａに表示されることで、ユーザ自身が表示させようとした第１画像５１とは異なる画像が画面３ａに表示されるので、動画を視聴するユーザの娯楽性がより高まる。

また、実施例に係る組合せ画像は、ユーザが選択した第１画像５１と他のユーザが選択した第１画像５１が予め設定された画像である場合に、画面３ａに表示される。これにより、ユーザ自身による画像選択に応じてユーザ自身も予期しない組合せ画像が表示される可能性があるので、動画を視聴することによる娯楽性がより高まる。

例えば、組合せ画像は、ユーザが選択した第１画像５１と他のユーザが選択した第１画像５１とが同じ場合に画面３ａに表示される。すなわち、動画を視聴しているユーザ同士が同じ第１画像５１を選択する場合は、ユーザ同士が同様の感情を生じている可能性が高い。このため、組合せ画像が表示されることで、ユーザは、動画の視聴によって他のユーザと共感したことを認識できる。より具体的には、例えば、ユーザが選択した第１画像５１と他のユーザが選択した第１画像５１とが同じ第１画像５１である場合、組合せ画像として当該第１画像５１を拡大した画像が画面３ａに表示される。なお、これに限らず、組合せ画像として表示ボタン５３の操作では表示されない特殊な画像が表示されてもよい。

また、ユーザが選択した第１画像５１と他のユーザが選択した第１画像５１とが異なる第１画像５１であっても、その組み合わせが予め設定された組合せである場合、組合せ画像が表示されてもよい。この場合、例えば、組合せ画像として表示ボタン５３の操作では表示されない特殊な画像が表示される。

なお、実施例に係る組合せ画像表示機能では、組合せ画像が表示されないユーザの携帯端末３の第２画像表示領域５０Ｃには、他のユーザの画面３ａに表示された組合せ画像に基づく第２画像が表示されない。しかしながら、これに限らず、組合せ画像が表示されないユーザの携帯端末３の第２画像表示領域５０Ｃに他のユーザの画面３ａに表示された組合せ画像に基づく第２画像が表示されてもよい。

［２−４．置換処理］
実施例に係るサーバ４は、第２画像の中から表示のタイミングが近接する２つの第２画像５２を画像群として特定し、当該画像群を１つの新たな第２画像５２に置換する単位処理を画像群が特定されなくなるまで繰り返す置換処理機能を有する。これにより、携帯端末３において動画の再生中に表示される第２画像５２の数が削減され、携帯端末３における突発的な負荷上昇が抑制され得る。

図８は、第２画像が置換される場合を示すタイミングチャートである。

前提として、動画のタイムラインは複数の区間に分割されている。各区間の長さは、一例として、組合せ期間の長さと同じとする。実施例に係る置換処理機能は、一例として、表示期間の始期が同じ区間にそれぞれ含まれる複数の第２画像５２の中から主体及び客体に共通性がある２つの第２画像５２を画像群として特定し、当該画像群に含まれる２つの第２画像５２をそれぞれ無効化しつつ１つの新たな第２画像５２を動画のタイムラインに関連付ける単位処理を、画像群が特定されなくなるまで繰り返す。

第２画像５２には、主体（当該第２画像を動画に付加したユーザのユーザＩＤ及び当該ユーザが属するユーザグループ），客体（当該第２画像の種類及び当該種類が属する要素グループ），表示期間，合成回数，ステータス等を特定可能な属性（第２画像表示情報）が付加されている。客体と合成回数により種類が決まる。種類により第２画像５２の図柄が決まる。図柄の外観には、合成回数を示す数字が表示されるなど、合成回数が反映されているのが好ましい。図８（Ａ）に示されるように、第２画像Ａの表示期間の始期と第２画像Ｂの表示期間の始期が、いずれもタイムライン上の第ｎ区間（ｎは適当な自然数）に含まれる場合がある。そして、第２画像Ａの種類と第２画像Ｂの客体が同一あるものとする。このとき、置換処理機能は、第２画像Ａと第２画像Ｂを画像群として特定し、第２画像Ａと第２画像Ｂのステータスをそれぞれ無効化するとともに、１つの新たな第２画像Ｃを動画のタイムラインに関連付ける。

置換後の第２画像５２（第２画像Ｃ）は、置換前の第２画像５２（第２画像Ａ及び第２画像Ｂ）の付加属性を引き継ぐ。置換後の第２画像５２は、一例として、主体及び客体をそのまま引き継ぐ。置換後の第２画像５２の合成回数は、一例として、置換前の各第２画像５２の合成回数の合計値である。置換後の第２画像５２の表示期間は、一例として、早い方の始期から遅い方の終期までの期間である。図８（Ａ）に示されるように、第２画像Ｃの表示期間は、第２画像Ａの始期から第２画像Ｂの終期までの期間に相当する。

置換前の第２画像５２は、無効化され動画との関連付けが解かれる。一方、置換後の第２画像５２は、他の第２画像５２とともに画像群を形成し新たな第２画像５２に置換され得る。図８（Ｂ）に示されるように、第２画像Ｃの表示期間の始期と第２画像Ｄの表示期間の始期が、いずれもタイムライン上の第ｎ区間（ｎは適当な自然数）に含まれている。そして、第２画像Ｃを付加したユーザと第２画像Ｄを付加したユーザは同一のユーザグループに属し、第２画像Ｃの種類と第２画像Ｄの種類が同一であるものとする。このとき、置換処理機能は、第２画像Ｃと第２画像Ｄを画像群として特定し、第２画像Ｃと第２画像Ｄのステータスをそれぞれ無効化するとともに、１つの新たな第２画像Ｅを動画のタイムラインに関連付ける。第２画像Ｅの表示期間は、第２画像Ｃの始期から第２画像Ｄの終期までの期間である。

［２−５．機能ブロック］
次に、実施例に係る組合せ画像表示及び置換処理を、機能ブロック図を用いて説明する。なお、携帯端末３における組合せ画像表示に関する機能は、オノマトペ表示機能に含まれ、サーバ４における組合せ画像表示及び置換処理に関する機能は、それぞれ動画配信機能に含まれる。

［２−５−１．サーバの動画配信機能に関する機能ブロック］
図９は、実施例に係るサーバ４の動画配信機能に関する機能ブロック図である。

サーバ４が備えるＣＰＵ２０は、グループ登録部６０、動画配信部６１、第１画像表示情報受信制御部６２、第２画像表示情報生成部６３、第２画像表示情報送信制御部６４、組合せ画像情報生成部６５、組合せ画像情報送信制御部６６、及び置換処理部６７を備える。ＣＰＵ２０が備える各機能は、ＨＤＤ２６に記憶されているプログラムによって実現される。

グループ登録部６０は、複数の携帯端末３で構成されるグループ５の登録を受け付ける。なお、グループ５の登録は、一例として、ユーザＩＤの登録によって行われる。

動画配信部６１は、携帯端末３からの要求に応じて携帯端末３へ動画を配信する。

第１画像表示情報受信制御部６２は、外部インタフェース３２を介して携帯端末３から受信した第１画像表示情報を受け付け、第１画像表示情報を対応する動画に関連付けてＨＤＤ２６に記憶させる。

第１画像表示情報は、携帯端末３の画面３ａに表示された第１画像５１に関する情報であり、第１画像５１が携帯端末３に表示されたタイミングで携帯端末３からサーバ４へ送信される。第１画像表示情報は、例えば、表示された第１画像５１の種類、第１画像５１を表示させたユーザを示すユーザＩＤ、第１画像５１を表示させるために行われたユーザの操作態様、第１画像５１が表示されたときの動画開始からの経過時間等である。

第２画像表示情報生成部６３は、受信した第１画像表示情報に基づいて第２画像表示情報を生成し、第２画像表示情報を対応する動画に関連付けてＨＤＤ２６に記憶させる。

第２画像表示情報は、第２画像表示領域５０Ｃに表示させる第２画像５２に関する情報であり、第２画像５２の種類、第２画像５２の元となる第１画像５１を自身の携帯端末３に表示させたユーザのユーザＩＤ、表示期間，合成回数，ステータス等が含まれる。

第２画像表示情報送信制御部６４は、第２画像表示情報を携帯端末３へ送信するように外部インタフェース３２を制御する。第２画像表示情報の送信先は、第１画像表示情報を送信した携帯端末３とは異なる他の携帯端末３である。

組合せ画像情報生成部６５は、受信した第１画像表示情報に基づいて組合せ判定を行う。そして、組合せ画像情報生成部６５は、組合せ判定の結果に応じて組合せ画像を示す組合せ画像情報を生成し、組合せ画像情報をＨＤＤ２６に記憶させる。

組合せ画像情報は、画面３ａに表示させる組合せ画像に関する情報であり、組合せ画像の種類、同じタイミングで表示操作を行った複数のユーザのユーザＩＤ等が含まれる。

また、組合せ判定は、第１画像表示情報毎に行われ、当該第１画像表示情報により示される第１画像５１の表示操作が他のユーザによる第１画像５１の表示操作の開始タイミングを基準とした組合せ期間内であるか否かを判定する。

組合せ画像情報送信制御部６６は、外部インタフェース３２を制御して、組合せ画像情報を携帯端末３へ送信するように外部インタフェース３２を制御する。なお、組合せ画像情報が送信される携帯端末３は、組合せ画像情報に含まれるユーザＩＤに対応する複数の携帯端末３である。

置換処理部６７は、置換処理を実行する。

［２−５−２．携帯端末のオノマトペ表示に関する機能ブロック］
図１０は、実施例に係る携帯端末３のオノマトペ表示に関する機能ブロック図である。

携帯端末３が備える主制御部４０は、画像表示制御部７０、表示領域設定部７１、第１画像表示操作受付部７２、操作状態判定部７３、第１画像表示情報生成部７４、第１画像表示情報送信制御部７５、及び第２画像表示情報受信制御部７６、及び組合せ画像情報受信制御部７７を備える。主制御部４０が備える各機能は、補助記憶部４４に記憶されているプログラムによって実現される。

画像表示制御部７０は、画像データに基づいた画像を表示するようにタッチパネルディスプレイ３ａを制御する。実施例に係る画像表示制御部７０は、サーバ４から配信された動画を配信動画表示領域５０Ａに表示させ、ユーザの操作に応じて第１画像５１を第１画像表示領域５０Ｂに表示させ、他のユーザが他の携帯端末３に表示させた第１画像５１に基づいた第２画像５２を第２画像表示領域５０Ｃに表示させる。さらに、実施例に係る画像表示制御部７０は、ユーザの操作態様に応じて第１画像５１を第１画像表示領域５０Ｂを超えて配信動画表示領域５０Ａに重畳して表示させる。

表示領域設定部７１は、サーバ４から動画が配信された場合における画面３ａの表示態様として、配信動画表示領域５０Ａ、第１画像表示領域５０Ｂ、及び第２画像表示領域５０Ｃの位置及びサイズ（縦横の長さ）を設定する。なお、これらの位置及びサイズは予め定められているが、ユーザが任意に設定してもよい。

第１画像表示操作受付部７２は、ユーザによる表示ボタン５３の操作を、画面３ａが動画を表示している状態で受け付ける。すなわち、第１画像表示操作受付部７２は、複数の表示ボタン５３のうちユーザが操作した表示ボタン５３を認識し、当該表示ボタン５３に対応した第１画像５１を、画像表示制御部７０を介して画面３ａに表示させる。なお、第１画像表示操作受付部７２は、操作状態判定部７３による判定結果に応じて第１画像５１の表示態様が変化するように、第１画像５１を画面３ａに表示させる。

操作状態判定部７３は、ユーザによる表示ボタン５３の操作状態を判定する。ここでいう操作状態は、例えば、表示ボタン５３の長押し時間を含む操作態様である。

第１画像表示情報生成部７４は、ユーザの操作によって画面３ａに表示された第１画像５１に応じた第１画像表示情報を生成する。

第１画像表示情報送信制御部７５は、第１画像表示情報をサーバ４へ送信するように通信部４６を制御する。

第２画像表示情報受信制御部７６は、通信部４６を介してサーバ４から受信した第２画像表示情報を画像表示制御部７０へ出力する。

組合せ画像情報受信制御部７７は、通信部４６を介してサーバ４から受信した組合せ画像情報を画像表示制御部７０へ出力する。これにより画像表示制御部７０は、組合せ画像を動画を表示している画面３ａに表示させる。なお、実施例に係る画像表示制御部７０は、ユーザによる表示ボタン５３の操作に応じた第１画像５１の替わりに、組合せ画像を画面３ａに表示させる。

［２−６．処理フロー］
次に、携帯端末３及びサーバ４における実施例に係るオノマトペ表示処理の流れをフローチャートを用いて説明する。

［２−６−１．携帯端末におけるオノマトペ表示に関するフロー］
図１１は、携帯端末３が備える主制御部４０によって実行されるオノマトペ表示処理の流れを示すフローチャートである。オノマトペ表示処理を実行するためのプログラムは補助記憶部４４の所定領域に予め記憶されている。オノマトペ表示処理は、一例として、携帯端末３がサーバ４から配信される動画の再生を開始した場合に実行が開始され、動画の再生が終了すると共に終了する。

ステップＳ１００では、トリガの発生を検出する。本実施例におけるトリガは、第１トリガ（ユーザによる表示ボタン５３の操作の受付け）と第２トリガ（第２画像表示情報の受信）のいずれかである。本実施例に係る携帯端末３は、トリガの発生が検出される度に、画面の表示内容を更新する。第１トリガと第２トリガは、並列的に発生し得る。したがって、一方のトリガの発生に応じた処理の実行中に、他方のトリガの発生に応じた処理が実行されることがある。また、複数の第２トリガが、並列的に発生し得る。したがって、一の第２トリガの発生に応じた処理の実行中に、他の第２トリガの発生に応じた処理が実行されることがある。

ステップＳ１０２において、検出されたトリガが第１トリガの場合はステップＳ１０６へ移行し、検出されたトリガが第２トリガの場合はステップＳ１０４へ移行する。

ステップＳ１０４では、第２画像表示情報により示される第２画像５２を、画像表示制御部７０が第２画像表示領域５０Ｃに表示させ、処理を終了する。

ステップＳ１０６では、ユーザが操作した表示ボタン５３に対応した第１画像５１を、画像表示制御部７０が第１画像表示領域５０Ｂに表示させる。なお、第１画像５１は、予め携帯端末３に記憶されていてもよいし、ユーザによって表示ボタン５３が操作される毎にサーバ４からダウンロードされてもよい。

ステップＳ１０８では、第１画像表示領域５０Ｂに表示された第１画像５１に対応する第１画像表示情報を、第１画像表示情報生成部７４が生成する。

ステップＳ１１０では、第１画像表示情報送信制御部７５が通信部４６を制御して第１画像表示情報をサーバ４へ送信する。

ステップＳ１１２では、ユーザによる表示ボタン５３の操作が終了したか否かを操作状態判定部７３が判定する。肯定判定の場合はステップＳ１２０へ移行し、否定判定の場合はステップＳ１１４へ移行する。

ステップＳ１１４では、通信部４６を介して組合せ画像情報を受信したか否かを組合せ画像情報受信制御部７７が判定し、肯定判定の場合はステップＳ１１８へ移行し、否定判定の場合はステップＳ１１６へ移行する。

ステップＳ１１６では、ユーザによる表示ボタン５３の操作が終了するまで画像表示制御部７０が第１画像５１（オノマトペ画像）を伸長表示させ、ステップＳ１１２へ戻る。

ステップＳ１１８では、画像表示制御部７０が組合せ画像情報により示される組合せ画像を画面３ａに表示させ、ステップＳ１１２へ戻る。

ステップＳ１２０では、画像表示制御部７０が第１画像５１の表示を終了し、処理を終了する。

なお、図１１に示されるフローチャートでは、第１画像５１の表示と共に第１画像表示情報が生成され、第１画像表示情報がサーバ４へ送信されるが、これに限らず、第１画像５１の表示が終了した後に第１画像表示情報がサーバ４へ送信されてもよい。また、第１画像表示情報送信制御部７５は、第１画像５１の表示を開始したタイミングで第１画像５１の表示開始を示す第１画像表示情報をサーバ４へ送信し、第１画像５１の表示が終了したタイミングで第２画像５２の表示終了を示す第１画像表示情報をサーバ４へ送信してもよい。これにより、サーバ４は、第１画像５１の表示開始を示す第１画像表示情報と表示終了を示す第１画像表示情報の受信間隔において、第１画像５１（オノマトペ画像）が伸長表示されていることを認識できる。

［２−６−２．サーバにおけるオノマトペ表示に関するフロー］
図１２は、サーバ４が備えるＣＰＵ２０によって実行されるオノマトペ表示処理の流れを示すフローチャートである。オノマトペ表示処理を実行するためのプログラムはＨＤＤ２６の所定領域に予め記憶されている。オノマトペ表示処理は、一例として、サーバ４が携帯端末３へ動画を配信している場合に実行が開始され、動画の配信が終了すると共に終了する。

ステップＳ２００では、第１画像表示情報を携帯端末３から受信したか否かを第１画像表示情報受信制御部６２が判定する。肯定判定の場合はステップＳ２０２へ移行し、否定判定の場合は待ち状態となる。

ステップＳ２０２では、受信した第１画像表示情報を第１画像表示情報受信制御部６２がＨＤＤ２６に記憶させる。

ステップＳ２０４では、組合せ画像情報生成部６５が組合せ判定を行い、肯定判定の場合はステップＳ２０８へ移行し、否定判定の場合はステップＳ２０６へ移行する。すなわち、組合せの対象となる第１画像５１の表示操作が組合せ期間内に複数のユーザによって行われた場合に、肯定判定とされステップＳ２０８へ移行する。一方、組合せの対象となる第１画像５１の表示操作が組合せ期間内に複数のユーザによって行われなかった場合、否定判定とされステップＳ２０６へ移行する。

ステップＳ２０６では、受信した第１画像表示情報に基づいて第２画像表示情報生成部６３が第２画像表示情報を生成し、ＨＤＤ２６に記憶させる。

ステップＳ２０８では、組合せ画像情報生成部６５が組合せの対象となる第１画像５１の表示操作に応じた組合せ画像を示す組合せ画像情報を生成する。

ステップＳ２１０では、組合せ画像情報送信制御部６６が外部インタフェース３２を制御して組合せ画像情報を送信しステップＳ２００へ戻る。なお、組合せ画像情報の送信先は、組合せの対象となる第１画像表示情報を送信してきた複数の携帯端末３、すなわち組合せ画像情報に含まれる複数のユーザＩＤに対応する携帯端末３である。

図１３は、サーバ４が備えるＣＰＵ２０によって実行されるオノマトペ表示処理の流れを示すフローチャートである。図１３に示されるフローは、動画のタイムラインにおける区間の終期が到来する度に、表示期間の始期が当該区間に含まれる第２画像表示情報を対象とする。

ステップＳ３００では、置換処理部６７が判定を行い、肯定判定の場合はステップＳ３０２へ移行し、否定判定の場合はステップＳ３０４へ移行する。すなわち、主体及び客体に共通性がある第２画像表示情報が存在する場合に、肯定判定とされステップＳ３０２へ移行する。一方、主体及び客体に共通性がある第２画像表示情報が存在しない場合に、否定判定とされステップＳ３０４へ移行する。

ステップＳ３０２では、置換処理部６７が置換処理を行う。置換処理の単位処理では、置換処理部６７が、主体及び客体に共通性がある２つの第２画像表示情報を画像群として特定し、当該画像群に含まれる２つの第２画像表示情報のステータスをそれぞれ無効化するとともに、１つの新たな第２画像表示情報を生成する。ステップＳ３０２では、この単位処理が、主体及び客体に共通性がある２つの第２画像表示情報が存在しない状態になるまで繰り返される。

ステップＳ３０４では、第２画像表示情報送信制御部６４が外部インタフェース３２を制御して、第１画像表示情報を送信してきた携帯端末３とは異なる携帯端末３へ、対象区間に含まれる全ての第２画像表示情報を送信する。したがって、第２画像表示情報に基づく第２画像５２の携帯端末３における表示期間は、動画に関連付けられている表示期間より遅れることになる。

以上説明したように、実施例に係る携帯端末３は、第１の携帯端末３の画面３ａに表示される動画を視聴中の第１ユーザにより当該動画に第１画像５１を付加するために第１の携帯端末３に対してなされた付加操作の操作情報と、第２の携帯端末３の画面３ａに表示される上記動画を視聴中の第２ユーザにより当該動画に第１画像５１を付加するために第２の携帯端末３に対してなされた付加操作の操作情報と、が各携帯端末３からサーバ４に提供される。サーバ４は、娯楽性を向上させるため、第１ユーザによる付加操作と第２ユーザによる付加操作の組合せに基づく組合せ画像を、第１の携帯端末３の画面３ａ及び第２の携帯端末３の画面３ａにそれぞれ表示させる。これにより、一人のユーザによる操作では表示されない画像が他のユーザによる操作との組み合わせによって表示されるので、携帯端末３はより多くのユーザに対して動画の視聴を促すことができる。

また、実施例に係るサーバ４は、動画の再生中に当該動画を視聴するユーザの携帯端末３にて表示させるタイミングが当該動画に対し関連付けられる第２画像５２の中から表示タイミングが近接しかつ主体及び客体に共通性がある２つ以上の第２画像５２を１つの新たな第２画像５２に置換する。これにより、携帯端末３に表示させる第２画像５２の数が削減されるので、サーバ４は携帯端末３における突発的な負荷上昇を抑制することができる。

［３．変形例］
本発明の技術的範囲は上記実施例に記載の範囲には限定されない。発明の要旨を逸脱しない範囲で上記実施例に多様な変更又は改良を加えることができ、該変更又は改良を加えた形態も本発明の技術的範囲に含まれる。

また、上記実施例で説明した各種処理の流れも一例であり、本発明の主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよい。

［３−１．変形例１（サーバを介さずに画像を共有する）］
上記実施例では、サーバ４が携帯端末３から第１画像表示情報を受信し、第１画像表示情報に基づいて生成した第２画像表示情報を他の携帯端末３へ送信し、他の携帯端末３は第２画像表示情報により示される第２画像５２を第２画像表示領域５０Ｃに表示する形態について説明したが、本発明はこれに限られない。

例えば、サーバ４を経由せずに複数の携帯端末３同士が第１画像表示情報を送受信することで、携帯端末３は第２画像５２を第２画像表示領域５０Ｃに表示してもよい。すなわち、携帯端末３は、他の携帯端末３から第１画像表示情報を受信すると、第１画像表示情報から他の携帯端末３に表示された第１画像５１に関する情報を読み出し、当該情報に基づく第２画像５２を第２画像表示領域５０Ｃに表示する。

［３−２．変形例２（動画を単独で視聴する）］
上記実施例は、動画を同時に視聴している複数のユーザの間で当該動画に対する感情を表す画像を共有させる場合を例として説明されている。これに対し、ある動画を先に視聴したユーザの当該動画に対する感情を表す画像は、当該動画を後から視聴するユーザに共有され得る。これにより、先に視聴した第１ユーザによる付加操作と後から視聴する第２ユーザによる付加操作の組合せに応じて組合せ画像を表示可能である。

以下では、第１の携帯端末３（第１装置）を使用する第１ユーザがある動画（視聴対象）を視聴するタイミングが、第２の携帯端末３（第２装置）を使用する第２ユーザが当該動画を視聴するタイミングより後である場合を考える（図１３（Ａ））。この場合、第１ユーザによる付加操作と第２ユーザによる付加操作は、実時間においては近接関係にない場合がある。ただし、動画の進行軸（タイムライン）上において両者は近接関係にある（図１３（Ｂ））。第１ユーザと第２ユーザは、本人と他人でもよいし、過去の本人と現在の本人でもよい。

変形例２では、第２の携帯端末３の画面３ａ（第２画面）に表示される動画を視聴中の第２ユーザにより当該動画に第１画像（第２要素）を付加するために第２の携帯端末３ａに対してなされた付加操作（第２操作）の操作情報が、第２の携帯端末３ａからサーバ４（第２指示手段，共有情報処理装置）に提供される。サーバ４は、第２ユーザによる付加操作に基づいて第２画像（第２要素）を当該付加操作に応じたタイミングで表示させる第２画像表示情報（第２指示）を、同じ動画を視聴しようとする第１ユーザが使用する第１の携帯端末３に予め送信しておく。

第１の携帯端末３は、娯楽性を向上させるため、第１の携帯端末３の画面３ａ（第１画面）に表示される動画を視聴中の第１ユーザにより当該動画に第１画像（第１要素）を付加するために第１の携帯端末３ａに対してなされた付加操作（第１操作）を受け付けた場合に、受け付けた付加操作（第１操作）と第２画像表示情報に係る付加操作（第２操作）の組合せに基づく組合せ画像（第３要素）を、第１の携帯端末３の画面３ａに表示させる。なお、変形例２では、第２の携帯端末３においてなされた第２操作のタイミングが先に分かっているので、第１の携帯端末３において第１操作を受け付けた後に遅滞なく、受け付けた付加操作（第１操作）と第２画像表示情報に係る付加操作（第２操作）の組合せに基づく組合せ画像（第３要素）を、第１の携帯端末３の画面３ａに表示させることも可能である。

［３−３．変形例３（組合せ画像が表示される場合に第１画像を表示しない）］
上記実施例では、組合せ画像が表示される場合にも第１画像が表示される。これに対し、組合せ画像が表示される場合に第１画像が表示されないようにしてもよい。

具体的には、携帯端末３の画像表示制御部７０（第２制御手段）は、第１画像表示操作受付部７２（第１受付手段）により付加操作が受け付けてから所定期間（組合せ期間）が経過するまで、組合せ画像情報の受信を待機する。そして、画像表示制御部７０は、所定時間内に組合せ画像情報を受信した場合には受信した組合せ画像情報に基づいて組合せ画像（第３要素）を表示させ、所定期間内に組合せ画像情報を受信しなかった場合には受け付けた付加操作に基づいて第１画像（第１要素）を表示させる。

［３−４．変形例４（組合せ画像が表示される場合にも第２画像を表示する）］
上記実施例では、組合せ画像が表示される場合には第２画像が表示されない。これに対し、組合せ画像が表示される場合にも第２画像が表示されるようにしてもよい。具体的には、サーバ４が、第１画像情報を受信した場合に、組み合わせる表示操作の有無に関わらず第２画像表示情報を生成し、携帯端末３に送信するとよい。

［３−５．変形例５（置換処理の発動を限定する）］
上記実施例では、所定期間（組合せ期間）ごとに単位処理が繰り返され、置換対象となる複数の第２画像表示情報が１つの第２画像表示情報に置換される。これに対し、携帯端末３において突発的な負荷上昇が発生しにくい状況で、置換処理を省略することとしてもよい。

具体的には、サーバ４の置換処理部６７（特定手段）は、表示タイミングが近接する複数の第２画像表示情報（共有要素）を含む近接要素グループの要素数が発動条件を満たさない場合に、当該近接要素グループに含まれる２つ（所定数）の第２画像表示情報を画像群（要素群）として特定する単位処理（置換処理）を省略する。発動条件は、例えば、要素数が所定の閾値以上であることである。発動条件は、携帯端末３の処理能力に応じて柔軟に変動させてもよい。例えば、グループ５に属する複数の携帯端末３のうち能力が低い方の端末の処理能力に合わせて、所定の閾値を設定するとよい。なお、処理能力とは、例えば、携帯端末３の表示処理の能力（ＤＳＰのクロック周波数）や受信処理の能力（通信回線の速度）である。

１ 動画配信システム
２ 通信回線
３ 携帯端末（「第１装置」，「第２装置」，「情報処理装置」の一例）
３ａ 画面（「第１画面」，「第２画面」の一例）
４ サーバ（「第１指示手段」，「第２指示手段」，「共有情報処理装置」の一例）
５ グループ（「情報処理システム」の一例）
５０Ａ 配信動画表示領域
５０Ｂ 第１画像表示領域
５０Ｃ 第２画像表示領域
５１ 第１画像
５２ 第２画像（「共有要素」，「代替要素」の一例）
５３ 表示ボタン
６０ グループ登録部
６１ 動画配信部
６２ 第１画像受信情報受信制御部
６３ 第２画像表示情報生成部
６４ 第２画像表示情報送信制御部
６５ 組合せ画像情報生成部
６６ 組合せ画像情報送信制御部
６７ 置換処理部（「特定手段」，「置換手段」の一例）
７０ 画像表示制御部（「第１制御手段」，「第２制御手段」，「第３制御手段」，「表示制御手段」の一例）
７１ 表示領域設定部
７２ 第１画像表示操作受付部（「第１受付手段」，「第２受付手段」の一例）
７３ 操作状態判定部
７４ 第１画像表示情報生成部
７５ 第１画像表示情報送信制御部（「第１提供手段」，「第２提供手段」の一例）
７６ 第２画像表示情報受信制御部（「第３受付手段」の一例）
７７ 組合せ画像情報受信制御部

Claims (8)

1. 視聴対象を視聴しているユーザの端末にて表示させるタイミングが該視聴対象に対し関連付けられる共有要素の中から前記タイミングに基づいて所定数の前記共有要素を要素群として特定する特定手段と、
   前記特定手段により特定される前記要素群を前記所定数より少ない数の代替要素に置換する置換手段と、
   を備える共有情報処理装置。
2. 前記特定手段が、前記共有要素に付加された付加属性に基づいて前記要素群を特定し、
   前記置換手段が、前記要素群に含まれる複数の共有要素のうち少なくともいずれかに付加されている前記付加属性を引き継ぐ前記代替要素を前記共有要素として前記視聴対象に付加する、
   請求項１に記載の共有情報処理装置。
3. 前記特定手段が、前記視聴対象に前記共有要素を関連付けたユーザが属するユーザグループと前記視聴対象に関連付けられた前記共有要素が属する要素グループとの少なくともいずれかを特定可能な前記付加属性に基づいて前記要素群を特定する、
   請求項２に記載の共有情報処理装置。
4. 前記特定手段が、前記ユーザグループと前記要素グループの両方を特定可能な前記付加属性に基づいて前記要素群を特定する、
   請求項３に記載の共有情報処理装置。
5. 前記置換手段が、前記特定手段により特定される要素群に含まれる前記所定数の前記共有要素の種別が同一である場合に該要素群を該種別の重複数に応じた前記代替要素に置換する、
   請求項２から請求項４までのいずれかに記載の共有情報処理装置。
6. 前記特定手段が、前記タイミングが近接する複数の前記共有要素を含む近接要素グループの要素数が発動条件を満たさない場合を除き、該近接要素グループに含まれる前記所定数の前記共有要素を前記要素群として特定する、
   請求項１から請求項５までのいずれかに記載の共有情報処理装置。
7. 前記特定手段が、前記端末の処理能力に応じて変動する前記発動条件を満たさない場合を除き、前記近接要素グループに含まれる前記所定数の前記共有要素を前記要素群として特定する、
   請求項６に記載の共有情報処理装置。
8. 視聴対象を視聴しているユーザの端末にて表示させるタイミングが該視聴対象に対し関連付けられる共有要素の中から前記タイミングに基づいて所定数の前記共有要素を要素群として特定する特定機能と、
   前記特定機能により特定される要素群を前記所定数より少ない数の代替要素に置換する置換機能と、
   を情報処理装置のコンピュータに実現させる制御プログラム。