JP6805642B2 - 表示システム - Google Patents

Description

本発明は、表示システムに関する。

従来、複数の異なる画面を合成した１つの画面を投影（表示の一態様）する技術が知られている。

例えば特許文献１には、各分割領域（分割画面）に対する投影対象の割り当て等の操作を簡単に行うことを目的として、分割画面の分割数と同一数であって、各分割画面と一意に対応付けられた操作領域を備えた操作ウィンドウを表示させて、それぞれに対応する投影対象をリストの中から選択する技術が開示されている。

しかしながら、特許文献１に開示された技術では、分割画面に対する投影対象（表示対象）を明示的に選択するための操作が必要な上、そのためのユーザーインターフェースを操作用端末に表示させる必要がある。

本発明は、上記に鑑みてなされたものであって、表示対象を明示的に選択するための操作やユーザーインターフェースが不要な表示システムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明は、複数の情報処理装置と、表示制御装置と、表示装置とを備える表示システムであって、前記表示制御装置は、前記複数の情報処理装置の各々から、前記情報処理装置の状態に応じて変化する端末情報を受信する端末情報受信手段と、前記端末情報受信手段により受信された前記端末情報に基づいて、表示対象となる１以上の前記情報処理装置を決定する決定手段と、前記決定手段により決定された１以上の前記情報処理装置に対して、前記情報処理装置が生成すべき表示映像のサイズを特定可能な制御信号を送信する制御信号送信手段と、を備え、前記複数の情報処理装置の各々は、前記端末情報を生成する端末情報生成手段と、前記端末情報生成手段により生成された前記端末情報を前記表示制御装置へ送信する端末情報送信手段と、前記制御信号を受信する制御信号受信手段と、前記制御信号受信手段により受信された前記制御信号に従って、前記情報処理装置に表示された端末映像を変換して得られる前記表示映像を生成する表示映像生成手段と、前記表示映像生成手段により生成された前記表示映像を前記表示装置へ送信する表示映像送信手段と、を備え、前記表示装置は、前記複数の情報処理装置の各々から前記表示映像を受信する表示映像受信手段と、前記表示映像受信手段により受信された１以上の前記表示映像を合成した合成映像を生成する映像合成手段と、前記映像合成手段により生成された合成映像を表示する表示手段と、を備える表示システムである。

本発明によれば、表示対象を明示的に選択するための操作やユーザーインターフェースが不要な表示システムを提供することができるという有利な効果を奏する。

図１は、表示システムの構成の一例を示す図である。 図２は、表示システムの利用形態を表すイメージ図である。 図３は、表示制御装置（端末）のハードウェア構成の一例を示す図である。 図４は、表示装置のハードウェア構成の一例を示す図である。 図５は、表示システムが有する機能の一例を示す図である。 図６は、各端末の端末情報の一例を示す図である。 図７は、合成映像の一例を示す図である。 図８は、各端末の端末情報の一例を示す図である。 図９は、合成映像の一例を示す図である。 図１０は、表示システムの動作手順の一例を示すシーケンス図である。 図１１は、従来手法で用いられるリモコンの一例を説明するための図である。 図１２は、従来手法の一例を説明するための図である。 図１３は、従来手法の一例を説明するための図である。 図１４は、各端末の端末情報の一例を示す図である。 図１５は、合成画面の一例を示す図である。 図１６は、各端末の端末情報の一例を示す図である。 図１７は、合成画面の一例を示す図である。 図１８は、合成画面の一例を示す図である。 図１９は、変形例の表示システムの構成の一例を示す図である。 図２０は、変形例の表示システムの構成の一例を示す図である。 図２１は、変形例の表示システムが有する機能の一例を示す図である。 図２２は、合成映像の一例を示す図である。 図２３は、合成映像の一例を示す図である。 図２４は、レイアウトのバリエーションの一例を示す図である。 図２５は、レイアウトのバリエーションの一例を示す図である。 図２６は、レイアウトのバリエーションの一例を示す図である。 図２７は、レイアウトのバリエーションの一例を示す図である。 図２８は、レイアウトのバリエーションの一例を示す図である。 図２９は、レイアウトのバリエーションの一例を示す図である。 図３０は、レイアウトのバリエーションの一例を示す図である。 図３１は、レイアウトのバリエーションの一例を示す図である。 図３２は、各端末の端末情報の一例を示す図である。 図３３は、各端末の端末情報の一例を示す図である。 図３４は、レイアウトの遷移の一例を示す図である。 図３５は、各端末の端末情報の一例を示す図である。 図３６は、各端末の端末情報の一例を示す図である。 図３７は、レイアウトの遷移の一例を示す図である。

以下、添付図面を参照しながら、本発明に係る表示システムの実施形態を詳細に説明する。以下では、本発明が適用される表示装置として、画像投射装置の一例であるプロジェクタを例に挙げて説明するが、これに限られるものではない。

図１は、本実施形態の表示システム１の構成の一例を示す図である。図１に示すように、表示システム１は、表示制御装置１０と、複数（図１の例では４つであるが、これに限られない）の端末（情報処理装置の一例）２０Ａ〜２０Ｄと、表示装置３０とを備え、これらは例えばインターネットなどのネットワーク４０を介して相互に接続されている。以下の説明では、端末２０Ａ〜端末２０Ｄを互いに区別しない場合は単に「端末２０」と称する場合がある。

図２は、本実施形態の表示システム１の利用形態を表すイメージ図である。デフォルトの状態（初期状態）において、表示装置３０には、全画面を４つに分割して得られるとともに４つの端末２０と１対１に対応する４つの分割画面が表示される。図２の例では、左上の分割画面には端末２０Ａに表示された映像（画像だけでなく音声を含んでもよい）が割り当てられ、右上の分割画面には端末２０Ｂに表示された映像が割り当てられ、左下の分割画面には端末２０Ｃに表示された映像が割り当てられ、右下の分割画面には端末２０Ｄに表示された映像が割り当てられているが、これに限られるものではない。例えば端末２０Ｃを操作して後述の特定の条件を満たすと、表示制御装置１０は、端末２０Ｃに対して、全画面に対応するサイズの映像を表示装置３０へ転送するよう後述の制御信号を送信し、この制御信号を受信した端末２０Ｃは、全画面に対応するサイズの表示映像を生成して表示装置３０へ送信する。そして、表示装置３０は、端末２０Ｃから受信した表示映像を表示する。この例では、表示装置３０はプロジェクタであるので、端末２０Ｃから受信した表示映像をスクリーンなどの投影面に投影（ここでは「表示」に含まれる概念）する。つまり、端末２０Ｃから受信した全画面に対応するサイズの表示映像を表示する。

本実施形態では、表示制御装置１０は、例えばＰＣ（Personal Computer）で構成される。端末２０は、例えばＰＣ、スマートフォン、タブレット端末などで構成される。図３は、表示制御装置１０のハードウェア構成の一例を示す図である。ここでは、端末２０のハードウェア構成も表示制御装置１０のハードウェア構成と同様に考えることができる。

図３に示すように、表示制御装置１０（端末２０）は、ＣＰＵ１０１と、ＲＯＭ１０２と、ＲＡＭ１０３と、通信Ｉ／Ｆ１０４と、入力部１０５と、表示部１０６とを備え、これらはバスを介して接続される。ＣＰＵ１０１は、表示制御装置１０の動作を統括的に制御する。ＲＯＭ１０２は、プログラム等の各種のデータを記憶する不揮発性のメモリである。ＲＡＭ１０３は、ＣＰＵ１０１が実行する各種の処理の作業領域（ワークエリア）として機能する揮発性のメモリである。通信Ｉ／Ｆ１０４は、ネットワーク４０と接続するためのインタフェースである。入力部１０５は、ユーザによる操作の入力に用いられるデバイスであり、例えばマウスやキーボードなどで構成される。表示部１０６は各種の情報を表示するデバイスであり、例えば液晶型ディスプレイ装置などで構成される。

図４は、表示装置３０のハードウェア構成の一例を示す図である。前述したように、本実施形態では、表示装置３０はプロジェクタで構成される。図４に示すように、表示装置３０は、ＣＰＵ３０１と、記憶部３０２と、入力部３０３と、通信Ｉ／Ｆ３０４と、投影部３０５とを備え、これらはバスを介して接続される。

ＣＰＵ３０１は、記憶部３０２に記憶されているプログラムを実行し、表示装置３０の動作を統括的に制御する。記憶部３０２は、ＣＰＵ３０１が実行するプログラムやプログラムの実行に必要なデータを記憶するＲＯＭやＨＤＤ、及びＣＰＵ３０１のワークエリアなどとして機能するＲＡＭなどにより構成される。入力部３０３は、表示装置３０に対する各種入力を行うものであり、タッチパネル、及びキースイッチなどが挙げられる。通信Ｉ／Ｆ３０４は、表示装置３０をネットワーク４０に接続するためのインタフェースである。投影部３０５は、投影対象の映像をスクリーンなどの投影面に投影する。投影部３０５は、例えば投影レンズ等の投影用の光学系を含む。

図５は、表示システム１に含まれる各装置（表示制御装置１０、端末２０、表示装置３０）が有する機能の一例を示す図である。なお、図５の例では、本実施形態に関する主な機能のみを例示しているが、各装置が有する機能は、これらに限られるものではない。

まず、表示制御装置１０が有する機能を説明する。図５に示すように、表示制御装置１０は、端末情報受信手段１１１と、決定手段１１２と、制御信号送信手段１１３とを有する。端末情報受信手段１１１は、複数の端末２０の各々から、該端末２０の状態に応じて変化する端末情報を受信する。端末情報は、端末２０の活発度合いに応じた値を示す情報である。例えば端末情報は、端末２０に表示された映像の画像変化量、端末２０が出力する音量（例えば映像の音量）、および、端末２０の操作量（マウスカーソル等の入力部１０５による操作量）のうちの何れかである。ここでは、端末２０に表示された映像の変化量（画像変化量）を端末情報とする場合を例に挙げて説明するが、これに限られるものではない。後述するように、各端末２０は、定期的に端末情報を生成して表示制御装置１０へ送信する。

決定手段１１２は、端末情報受信手段１１１により受信された端末情報に基づいて、表示対象となる１以上の端末２０を決定する。本実施形態では、決定手段１１２は、表示システム１に含まれる複数の端末２０のうち端末情報が閾値以上の端末２０を、表示対象の端末２０として決定する。また、この例では、決定手段１１２は、表示対象として決定した端末２０の数に応じて、その決定した各端末２０の表示映像（表示装置３０に表示する映像）のサイズを決定する。例えば決定手段１１２は、表示対象として決定した端末２０の数が１つの場合は、表示対象として決定した端末２０の表示映像のサイズを全画面に対応するサイズに決定し、表示対象として決定した端末２０の数が２以上の場合は、表示対象として決定した２以上の端末２０の各々の表示映像のサイズを、表示システム１に含まれる端末２０の数（この例では４つ）で全画面サイズを分割して得られる分割画面の１つに対応するサイズに決定する。この例では、全画面を４分割して得られる４つの分割画面の１つの分割画面のサイズに決定されるという具合である。

制御信号送信手段１１３は、決定手段１１２により決定された１以上の端末２０に対して、該端末２０が生成すべき表示映像のサイズを特定可能な制御信号を送信する。例えば決定手段１１２により決定された端末２０の数が１つの場合、制御信号送信手段１１３は、生成すべき表示映像のサイズは全画面に対応するサイズであることを特定可能な制御信号（例えば全画面に対応する解像度を指定する信号などでもよい）を、該１つの端末２０へ送信する。また、例えば決定手段１１２により決定された端末２０の数が複数（この例では２以上かつ４以下）の場合、制御信号送信手段１１３は、生成すべき表示映像のサイズは全画面に対応するサイズの１／４であることを特定可能な制御信号（例えば全画面の１／４に対応する解像度を指定する信号などでもよい）を、各端末２０へ送信する。

以上の表示制御装置１０が有する機能（端末情報受信手段１１１、決定手段１１２、制御信号送信手段１１３）は、ＣＰＵ１０１がＲＯＭ１０２等に格納されたプログラムを実行することにより実現されるが、これに限らず、例えば表示制御装置１０が有する機能のうちの少なくとも一部が専用のハードウェア回路で実現されてもよい。

次に、端末２０が有する機能を説明する。図５に示すように、端末２０は、端末映像生成手段２１１と、操作受付手段２１２と、端末情報生成手段２１３と、端末情報送信手段２１４と、制御信号受信手段２１５と、表示映像生成手段２１６と、表示映像送信手段２１７とを有する。説明の便宜上、図５では、１つの端末２０のみが例示されているが、他の端末２０が有する機能についても同様である。

端末映像生成手段２１１は、端末２０に表示（表示部１０６に表示）され、かつ、端末２０のユーザが視聴する端末映像を生成する。操作受付手段２１２は、端末２０のユーザによる各種の操作（マウス等の入力部１０５を用いた操作）を受け付ける。

端末情報生成手段２１３は、上述の端末情報を生成する。この例では、端末情報生成手段２１３は、定期的に（所定の周期で）上述の端末情報を生成する。なお、これに限らず、例えば端末映像に変化（画像変化）が生じるたびに、端末映像の画像変化量を示す端末情報を生成することもできる。

端末情報送信手段２１４は、端末情報生成手段２１３により生成された端末情報を表示制御装置１０へ送信する。この例では、端末情報送信手段２１４は、端末情報生成手段２１３により端末情報が生成されるたびに、その生成された端末情報を表示制御装置１０へ送信する。

制御信号受信手段２１５は、表示制御装置１０から上述の制御信号を受信する。表示映像生成手段２１６は、制御信号受信手段２１５により受信された制御信号に従って、自装置の端末映像を変換して得られる表示映像を生成する。この例では、表示映像生成手段２１６は、受信した制御信号に従って、生成すべき表示映像のサイズ（解像度であると考えてもよい）と音量を決定する。例えば受信した制御信号が、全画面に対応する解像度を指定する信号である場合、表示映像のサイズおよび音量は端末映像と同じサイズおよび音量に決定することができる。また、例えば受信した制御信号が、全画面の１／４に対応する解像度を指定する信号である場合、表示映像のサイズは端末映像の１／４、音量は「０」に決定することができる。

表示映像送信手段２１７は、表示映像生成手段２１６により生成された表示映像を表示装置３０に送信する。以上の端末２０が有する機能（端末映像生成手段２１１、操作受付手段２１２、端末情報生成手段２１３、端末情報送信手段２１４、制御信号受信手段２１５、表示映像生成手段２１６、表示映像送信手段２１７）は、ＣＰＵ１０１がＲＯＭ１０２等に格納されたプログラムを実行することにより実現されるが、これに限らず、例えば表示制御装置１０が有する機能のうちの少なくとも一部が専用のハードウェア回路で実現されてもよい。

次に、表示装置３０が有する機能を説明する。図５に示すように、表示装置３０は、表示映像受信手段３１１と、映像合成手段３１２と、表示手段３１３とを有する。表示映像受信手段３１１は、複数の端末２０の各々から表示映像を受信する。映像合成手段３１２は、表示映像受信手段３１１により受信された１以上の表示映像を合成した合成映像を生成する。表示映像受信手段３１１により、全画面の１／４に対応するサイズの表示映像が複数（この例では２以上かつ４以下）受信された場合、その受信された複数の表示映像を、４つの分割画面のうちの何れに割り当てるかは、映像合成手段３１２が所定のアルゴリズムに従って決定することもできる。表示手段３１３は、映像合成手段３１２により生成された合成映像を表示する。この例では、表示手段３１３は、映像合成手段３１２により生成された合成映像をスクリーンなどの投影面に投影する。以上の表示装置３０が有する機能（表示映像受信手段３１１、映像合成手段３１２、表示手段３１３）は、ＣＰＵ３０１が記憶部３０２等に格納されたプログラムを実行することにより実現されるが、これに限らず、例えば表示装置３０が有する機能のうちの少なくとも一部が専用のハードウェア回路で実現されてもよい。

例えば図６に示すように、端末２０Ａ、２０Ｂおよび２０Ｃの３つの端末の端末情報が閾値以上の場合、合成映像は図７のような態様になる。図７の例では、端末２０Ａ、１０Ｂおよび１０Ｃの各々の画面（表示映像）が割り当てられる分割画面のサイズは、全画面の１／４のサイズとなり、４つの分割画面のうちの１つの分割画面は表示映像が割り当てられない状態（未割り当て）となる。また、例えば図８に示すように、１つの端末２０（図８の例では端末２０Ｃ）の端末情報が閾値以上の場合、合成映像は図９のような態様になるという具合である。図９の例では、端末２０Ｃの画面（表示映像）が割り当てられる分割画面のサイズは、全画面に対応するサイズとなる。

図１０は、本実施形態の表示システム１の動作手順の一例を示すシーケンス図である。図１０に示すように、端末２０の操作受付手段２１２は、ユーザの操作を受け付ける（ステップＳ１）。操作受付手段２１２は、受け付けた操作に応じた情報（操作情報）を端末映像生成手段２１１へ渡す（ステップＳ２）。端末映像生成手段２１１は、操作受付手段２１２から受け取った操作情報（例えばページを切り替える操作等を示す情報など）を元に、端末映像を生成し（ステップＳ３）、生成した端末映像を端末情報生成手段２１３へ渡す（ステップＳ４）。端末情報生成手段２１３は、端末映像生成手段２１１から端末映像を受け取るたびに、前回の端末映像からの画像変化量を示す端末情報を生成し（ステップＳ５）、生成した端末情報を端末情報送信手段２１４へ渡す（ステップＳ６）。なお、ここでは、端末情報の一例として画像変化量を例に挙げて説明するが、端末情報の態様はこれに限られるものではなく、上述したように、例えば端末２０が出力する音量や端末２０の操作量を端末情報として採用することもできる。端末情報送信手段２１４は、表示制御装置１０に対して、定期的に端末情報を送信する（ステップＳ７）。例えば端末情報送信手段２１４は、一定期間が経過するたびに、最新の端末情報を表示制御装置１０へ送信することもできるし、端末情報生成手段２１３から端末情報を受け取るたびに、その受け取った端末情報を表示制御装置１０へ送信することもできる。この例では、各端末２０は、一定期間が経過するたびに、最新の端末情報を表示制御装置１０へ送信する場合を例に挙げて説明する。

表示制御装置１０の端末情報受信手段１１１は、各端末２０から受信した端末情報を決定手段１１２へ渡す（ステップＳ８）。決定手段１１２は、各端末２０の端末情報に基づいて、表示対象となる１以上の端末２０を決定し、表示対象となる１以上の端末２０が生成すべき表示映像のサイズを決定する（ステップＳ９）。この決定方法は上述したとおりである。決定手段１１２は、ステップＳ９の結果を制御信号送信手段１１３へ通知する（ステップＳ１０）。この通知を受けた制御信号送信手段１１３は、表示対象として決定した１以上の端末２０に対して、上述の制御信号を送信する（ステップＳ１１）。

表示制御装置１０からの制御信号を受信した端末２０の制御信号受信手段２１５は、その受信した制御信号を表示映像生成手段２１６へ渡す（ステップＳ１２）。表示映像生成手段２１６は、制御信号受信手段２１５から渡された制御信号に従って、端末映像を変換して得られる表示映像を生成する（ステップＳ１３）。具体的な内容は上述したとおりである。表示映像生成手段２１６は、ステップＳ１３で生成した表示映像を、表示映像送信手段２１７へ渡す（ステップＳ１４）。表示映像送信手段２１７は、表示映像生成手段２１６から渡された表示映像を、表示装置３０へ送信する（ステップＳ１５）。

表示対象として決定された各端末２０から表示映像を受信した表示装置３０の表示映像受信手段３１１は、その受信した各端末２０の表示映像を映像合成手段３１２へ渡す（ステップＳ１６）。映像合成手段３１２は、各端末２０の表示映像を合成した合成映像を生成し（ステップＳ１７）、生成した合成映像を表示手段３１３へ渡す（ステップＳ１８）。表示手段３１３は、映像合成手段３１２から受け取った合成映像を投影面に投影する（ステップＳ１９）。

ここで、利用シーンの一例として、ある会議において複数人が関連のない報告を順次行う場面を想定する。例えば端末２０ＡのユーザＡ、端末２０ＢのユーザＢ、端末２０ＣのユーザＣが関連のない報告を順次行う場合を想定する。

まず、表示装置３０（プロジェクタ）が起動すると、表示装置３０は、予め定められた待機画面をスクリーンに投影する。その後、ユーザＡの端末２０Ａは、表示装置３０を利用した投影を開始するための操作（投影開始操作）を受け付けると、投影開始操作を受け付けたことを示す情報を表示制御装置１０へ送信する。この段階では、表示制御装置１０は、端末２０Ａ以外の端末２０から、投影開始操作を受け付けたことを示す情報を受信していないので、端末２０Ａを表示対象として決定するとともに、端末２０Ａの表示映像のサイズを全画面に対応するサイズに決定する。そして、端末２０Ａに対して、その決定したサイズを特定可能な制御信号を送信する。この制御信号を受信した端末２０Ａは、制御信号に従って、自装置の端末映像を変換して得られる表示映像を生成し、その生成した表示映像を表示装置３０へ送信する。表示装置３０は、端末２０Ａから受信した表示映像（全画面に対応するサイズ）をスクリーンに投影する。

その後、ユーザＢの端末２０Ｂは、表示装置３０を利用した投影を開始する操作を受け付けると、投影開始操作を受け付けたことを示す情報を表示制御装置１０へ送信する。この情報を受信した表示制御装置１０は、表示対象として端末２０Ｂを追加決定する。この段階で、表示対象として決定した端末２０の数が２以上になるので、表示対象として決定した端末２０Ａおよび端末２０Ｂの各々の表示映像のサイズを、全画面の１／４に対応するサイズに決定する。そして、端末２０Ａおよび端末２０Ｂの各々に対して、その決定したサイズ（全画面の１／４サイズ）を特定可能な制御信号を送信する。この制御信号を受信した端末２０Ａおよび端末２０Ｂは、制御信号に従って、自装置の端末映像を変換して得られる表示映像（全画面の１／４サイズ）を生成し、その生成した表示映像を表示装置３０へ送信する。表示装置３０は、端末２０Ａおよび端末２０Ｂの各々から受信した表示映像（全画面の１／４サイズ）を、４つの分割画面の何れかにそれぞれ割り当てて得られる合成映像をスクリーンに投影する。

さらにその後、ユーザＣの端末２０Ｃは、表示装置３０を利用した投影を開始する操作を受け付けると、投影開始操作を受け付けたことを示す情報を表示制御装置１０へ送信する。この情報を受信した表示制御装置１０は、表示対象として端末２０Ｃを追加決定する。表示制御装置１０は、表示対象として決定した端末２０Ａ、端末２０Ｂおよび端末２０Ｃの各々の表示映像のサイズを、全画面の１／４に対応するサイズに決定する。そして、端末２０Ｃに対して、その決定したサイズ（全画面の１／４サイズ）を特定可能な制御信号を送信する。なお端末２０Ａおよび端末２０Ｂに対しては、その決定したサイズを特定可能な制御信号を送信済みであるが、再度送信してもよい。この制御信号を受信した端末２０Ｃは、制御信号に従って、自装置の端末映像を変換して得られる表示映像（全画面の１／４サイズ）を生成し、その生成した表示映像を表示装置３０へ送信する。表示装置３０は、端末２０Ｃから受信した表示映像（全画面の１／４サイズ）を、４つの分割画面のうち、端末２０Ａの表示映像および端末２０Ｂの表示映像が割り当てられていない何れかの分割画面に割り当ててスクリーンに投影する。

次に、ユーザＡが、スライド形式の端末映像のページを切り替える操作を行いながら（ページめくりを行いながら）、報告を開始する。端末２０Ａは、ユーザＡの操作に応じて、単位時間（例えば１秒）あたりにページを切り替える操作が行われた回数を示す情報を端末情報として生成し、その生成した端末情報を表示制御装置１０へ送信する。ここでは、端末２０Ａは一定の周期ごとに上記端末情報を算出し、上記端末情報を算出するたびに、その算出した端末情報を表示制御装置１０へ送信する。操作に即座に反応するよう、上記端末情報の算出期間を短くすることが好ましい。

この例では、ユーザＡによる報告が行われている間、表示制御装置１０は、ユーザＡの端末２０Ａのみから上記端末情報を受信することになるので、端末２０Ａを表示対象として決定するとともに、端末２０Ａの表示映像のサイズを全画面に対応するサイズに決定する。そして、端末２０Ａに対して、その決定したサイズを特定可能な制御信号を送信する。この制御信号を受信した端末２０Ａは、制御信号に従って、自装置の端末映像（スライド形式の映像）を変換して得られる表示映像を生成し、その生成した表示映像を表示装置３０へ送信する。表示装置３０は、端末２０Ａから受信した表示映像（全画面に対応するサイズ）をスクリーンに投影する。したがって、ユーザＡによる報告が行われている間は、端末２０Ａの映像が、全画面に対応するサイズでスクリーンに投影され続ける。また、この例では、端末２０Ａの映像の投影が全て終了すると、表示装置３０は、スクリーンに投影する画像を４つの分割画面に戻し、４つの分割画面のうち２つの分割画面の各々には端末２０Ｂの表示映像または端末２０Ｃの表示映像が割り当てられ、残りの２つの分割画面は未割り当ての状態となる。

次に、ユーザＢが、スライド形式の端末映像のページを切り替える操作を行いながら（ページめくりを行いながら）、報告を開始する。上記と同様に、ユーザＢによる報告が行われている間は、端末２０Ｂの映像が、全画面に対応するサイズでスクリーンに投影され続ける。また、この例では、端末２０Ｂの映像の投影が全て終了すると、表示装置３０は、スクリーンに投影する画像を、まだ投影が終了していない端末２０Ｃの映像（全画面に対応するサイズ）に切り替える。

次に、ユーザＣが、スライド形式の端末映像のページを切り替える操作を行いながら（ページめくりを行いながら）、報告を開始する。上記と同様に、ユーザＣによる報告が行われている間は、端末２０Ｃの映像が、全画面に対応するサイズでスクリーンに投影され続ける。また、この例では、全ての端末２０の映像の投影が終了すると、表示装置３０は、スクリーンに投影する画像を、上述の待機画面に切り替える。

次に、利用シーンの別の例として、ある会議において複数人が一つの議題に関連する報告を入れ替わり行う場面を想定する。この例では、会議開始時に会議の報告者が投影を開始することで議題が明らかになり、報告順序を決めることを前提とする。表示装置３０の起動から、各端末２０が投影開始操作を受け付けるまでの流れは前述の利用シーンの場合と同様である。以下では、報告順序は、ユーザＡ→ユーザＢ→ユーザＣとする。

まず、ユーザＡが、スライド形式の端末映像のページを切り替える操作を行いながら（ページめくりを行いながら）、全体報告の一部の報告を開始する。端末２０Ａは、ユーザＡの操作に応じて、単位時間（例えば１秒）あたりにページを切り替える操作が行われた回数を示す情報を端末情報として生成し、その生成した端末情報を表示制御装置１０へ送信する。この例では、ユーザＡによる報告が行われている間、表示制御装置１０は、ユーザＡの端末２０Ａのみから上記端末情報を受信することになるので、端末２０Ａを表示対象として決定するとともに、端末２０Ａの表示映像のサイズを全画面に対応するサイズに決定する。そして、端末２０Ａに対して、その決定したサイズを特定可能な制御信号を送信する。この制御信号を受信した端末２０Ａは、制御信号に従って、自装置の端末映像（スライド形式の映像）を変換して得られる表示映像を生成し、その生成した表示映像を表示装置３０へ送信する。表示装置３０は、端末２０Ａから受信した表示映像（全画面に対応するサイズ）をスクリーンに投影する。したがって、ユーザＡによる報告が行われている間は、端末２０Ａの映像が、全画面に対応するサイズでスクリーンに投影され続ける。

次に、ユーザＢが、スライド形式の端末映像のページを切り替える操作を行いながら（ページめくりを行いながら）、報告（全体報告の一部の詳細報告１）を開始する。上記と同様に、ユーザＢによる報告が行われている間は、端末２０Ｂの映像が、全画面に対応するサイズでスクリーンに投影され続ける。次に、ユーザＣが、スライド形式の端末映像のページを切り替える操作を行いながら（ページめくりを行いながら）、報告（全体報告の一部の詳細報告２）を開始する。上記と同様に、ユーザＣによる報告が行われている間は、端末２０Ｃの映像が、全画面に対応するサイズでスクリーンに投影され続ける。

ユーザＣの報告の後に、ユーザＢが詳細報告１を振り替えるために、マウスカーソルを移動する操作を行った場合を想定する。この場合、端末２０Ｂは、ユーザＢの操作に応じて、単位時間（例えば１秒）あたりのマウスカーソルの移動回数を示す情報を端末情報として生成し、その生成した端末情報を表示制御装置１０へ送信する。つまり、端末情報は、単位時間（例えば１秒）あたりにページを切り替える操作が行われた回数を示す情報であってもよいし、単位時間（例えば１秒）あたりのマウスカーソルの移動回数を示す情報であってもよいし、これらの組み合わせでもよい。この場合、表示制御装置１０は、ユーザＢの端末２０Ｂのみから上記端末情報を受信することになるので、端末２０Ｂを表示対象として決定するとともに、端末２０Ｂの表示映像のサイズを全画面に対応するサイズに決定する。そして、端末２０Ｂに対して、その決定したサイズを特定可能な制御信号を送信する。この制御信号を受信した端末２０Ｂは、制御信号に従って、自装置の端末映像を変換して得られる表示映像を生成し、その生成した表示映像を表示装置３０へ送信する。表示装置３０は、端末２０Ｂから受信した表示映像（全画面に対応するサイズ）をスクリーンに投影する。したがって、ユーザＢによる詳細報告１の振り返りが行われている間は、端末２０Ｂの映像が、全画面に対応するサイズでスクリーンに投影される。

その後、再びユーザＡが全体報告の残りの報告を行うために、ページめくりを行った場合を想定する。この場合、端末２０Ａは、ユーザＡの操作に応じて、単位時間（例えば１秒）あたりにページを切り替える操作が行われた回数を示す情報を端末情報として生成し、その生成した端末情報を表示制御装置１０へ送信する。この場合、表示制御装置１０は、ユーザＡの端末２０Ａのみから上記端末情報を受信することになるので、端末２０Ａを表示対象として決定するとともに、端末２０Ａの表示映像のサイズを全画面に対応するサイズに決定する。そして、端末２０Ａに対して、その決定したサイズを特定可能な制御信号を送信する。この制御信号を受信した端末２０Ａは、制御信号に従って、自装置の端末映像を変換して得られる表示映像を生成し、その生成した表示映像を表示装置３０へ送信する。表示装置３０は、端末２０Ａから受信した表示映像（全画面に対応するサイズ）をスクリーンに投影する。したがって、ユーザＡによる報告が行われている間は、端末２０Ａの映像が、全画面に対応するサイズでスクリーンに投影される。

さらに、利用シーンの別の例として、学校の教室で教師が与えた問題に対して生徒が回答している際に、進捗がおもわしくない生徒を指導する場面を想定する。授業開始時に全ての生徒の端末２０は表示制御装置１０に接続され、表示装置３０は、全画面を端末２０の台数で分割して得られるとともに複数の端末２０と１対１に対応する複数の分割画面をスクリーンに投影する。

次に、教師が生徒に対して問題を与える。例えば算数の２つの問題（例えば１つは基本問題、１つは標準問題）を与えてもよい。解答時間序盤（第１の期間）においては、大部分の生徒は基本問題の解答を始める。つまり、大部分の生徒の端末２０の活発度は高くなる（操作量等が増大するため）が、一部の生徒は未解答の状態であるために該生徒の端末２０の活発度は低い状態となる。そこで、この例では、第１の期間においては、表示制御装置１０は、活発度が低い端末２０を表示対象として決定する。したがって、未解答の生徒の端末２０の映像がスクリーンに投影され、教師はその生徒をフォローする（例えば何が分からないのかを聞いた上で説明する）。すなわち、表示制御装置１０の決定手段１１２は、表示システム１に含まれる複数の端末２０のうち端末情報が閾値未満の端末２０を、表示対象の端末２０として決定することもできる。この例では、端末情報として、タブレットなどで構成される端末２０の単位時間（例えば１分）あたりのストローク数（タッチペンなどの入力デバイスの移動量）を採用することもできる。

続いて、解答時間中盤（第１の期間の後の第２の期間）においては、大部分の生徒は基本問題の解答を終え、標準問題を考え始める。そして、第１の期間において基本問題を未解答だった一部の生徒は、基本問題の解答を始める。つまり、該一部の生徒の端末２０の活発度は高くなるので、この例では、第２の期間においては、表示制御装置１０は、活発度が高い端末２０を表示対象として決定する。したがって、該一部の生徒の端末２０の映像がスクリーンに投影され、教師はその生徒の回答に注目する（例えば正しく理解できているかを確認する）。

続いて、解答時間中盤（第１の期間の後の第２の期間）においては、大部分の生徒は基本問題の解答を終え、標準問題を考え始める。そして、第１の期間において基本問題を未解答だった一部の生徒は、基本問題の解答を始める。つまり、該一部の生徒の端末２０の活発度は高くなるので、この例では、第２の期間においては、表示制御装置１０は、活発度が高い端末２０を表示対象として決定する。したがって、該一部の生徒の端末２０の映像がスクリーンに投影され、教師はその生徒の回答に注目する（例えば正しく理解できているかを確認する）。

続いて、解答時間終盤（第２の期間の後の第３の期間）においては、大部分の生徒は標準問題を解答し、一部の生徒は基本問題を解答するが、ごく一部の生徒は、基本問題を未回答の状態である。つまり、ごく一部の生徒は未解答の状態であるために該生徒の端末２０の活発度は低い状態となる。そこで、この例では、第３の期間においては、表示制御装置１０は、活発度が低い端末２０を表示対象として決定する。したがって、未解答の生徒の端末２０の映像がスクリーンに投影され、教師はその生徒をフォローする。

以上に説明したように、本実施形態では、表示制御装置１０は、各端末２０から受信した端末情報に基づいて、表示対象となる１以上の端末２０を決定し、その決定した１以上の端末２０に対して、端末２０が生成すべき表示映像のサイズを特定可能な制御信号を送信する。表示対象として決定された各端末２０は、表示制御装置１０から受信した制御信号に従って表示映像を生成し、生成した表示映像を表示装置３０へ送信する。表示装置３０は、各端末２０から受信した表示映像を合成した合成映像を表示する。これにより、表示対象を明示的に選択するための操作やユーザーインターフェースを必要とせずに、表示対象となる端末２０を自動的に決定するとともに、その決定した端末２０の表示映像を表示する仕組みを実現できる。

いま、図１１のようなリモコンによる操作で、表示映像を選択する従来手法の例（対比例）を想定する。図１２（Ａ）のように、表示装置３０が４つの分割画面を表示している場合において、ユーザはリモコンのボタン５０を押下して、選択カーソルを端末２０Ａの画面（分割画面）に移動させる（図１２（Ｂ））。そして、ユーザはリモコンの選択ボタン５１を押下して、端末２０Ａの画面を選択する（図１２（Ｃ））。次に、ユーザはリモコンのボタン５０を押下して、選択カーソルを端末２０Ｃの画面（分割画面）に移動させる（図１２（Ｄ））。そして、ユーザはリモコンの選択ボタン５１を押下して、端末２０Ｃの画面を選択する（図１２（Ｅ））。ユーザがリモコンの表示ボタン５２を押下すると、表示装置３０は、端末２０Ａの画面と端末２０Ｂの画面とを合成した合成映像を表示する（図１２（Ｆ））。この従来手法では、選択ボタン５１と表示ボタン５２を使って、画面の選択と表示切替を行う必要があるので、ボタン操作の学習が必要となる。これに対して、以上に説明した本実施形態では、端末２０の活発度に応じて、表示対象の端末２０を自動的に決定するので、ボタン操作の学習等が不要になる。

また、上述の従来手法において、図１３（Ａ）のように、表示装置３０が、縦方向と横方向とが直交しないレイアウト（非直交レイアウト）で３つの分割画面を表示している場合を想定する。図１３（Ｂ）のように、選択カーソルが端末２０Ａの画面に位置している状態でユーザが下方向のボタン５０を押下すると、選択カーソルは端末２０Ｃの画面に移動する（図１３（Ｃ））。この状態から、選択カーソルを端末２０Ｂの画面に移動させるためには、ユーザは上方向のボタン５０を押下して選択カーソルを端末２０Ａの画面に移動させた後（図１３（Ｄ）、右方向のボタン５０を押下して選択カーソルを端末２０Ｂの画面に移動させる（図１３（Ｅ））。この従来手法では操作が直感的ではないという問題があるが、以上に説明した本実施形態では、端末２０の活発度に応じて、表示対象の端末２０を自動的に決定するので、上記問題は発生しない。

以上、本発明の実施形態を説明したが、上述の実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。本発明は、上述の実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上述の実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。

また、上述した実施形態の表示システム１（表示制御装置１０、複数の端末２０、表示装置３０等）で実行されるプログラムは、インストール可能な形式または実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよいし、インターネット等のネットワーク経由で提供または配布するように構成してもよい。また、各種プログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。

以下、変形例を記載する。各変形例は、上述の実施形態と任意に組み合わせることもできるし、変形例同士を任意に組み合わせることもできる。

（１）変形例１
例えば表示制御装置１０の決定手段１１２は、端末情報が大きい端末２０ほど表示映像のサイズが大きくなるよう、表示対象の端末２０の表示映像のサイズを決定する形態であってもよい。例えば、任意の時点ｔ１において、図１４に示すように、端末２０Ａ、端末２０Ｂおよび端末２０Ｃの３つの端末２０の端末情報が閾値以上であり、端末２０Ａおよび端末２０Ｂの端末情報が端末２０Ｃの端末情報よりも大きい値を示す場合を想定する。この場合、図１５に示すように、端末２０Ａおよび端末２０Ｂの画面（表示映像）が割り当てられる分割画面のサイズは全画面の１／４となる一方、端末２０Ｃの画面が割り当てられる分割画面（図１５の例では左下の分割画面）のサイズは、全画面の１／４よりも小さいサイズとなる。

その後、時間の経過とともに、端末２０Ａおよび端末２０Ｂの端末情報が小さくなり、端末２０Ｃの端末情報が大きくなり、時点ｔ１よりも後の時点ｔ２において、図１６に示すように、端末２０Ｃの１つのみの端末情報が閾値以上である場合を想定する。この場合、図１７に示すように、端末２０Ｃの画面（表示映像）が割り当てられる分割画面のサイズは全画面に対応するサイズとなる。時点ｔ２に至るまでに、図１８に示すように、端末２０Ｃの画面は図１５に比べて徐々に大きくなり、端末２０Ａおよび２０Ｂの各々の画面は図１５に比べて徐々に小さくなっていく。

（２）変形例２
例えば図１９に示すように、端末２０は、除外信号送信手段２１８をさらに有し、表示制御装置１０は、除外信号受信手段１１４をさらに有する形態であってもよい。除外信号送信手段２１８は、端末２０のユーザの操作に応じて、端末２０に表示された端末映像を表示対象から除外することを指示する除外信号を表示制御装置１０へ送信する。除外信号受信手段１１４は、各端末２０から除外信号を受信する。この例では、表示制御装置１０の決定手段１１２は、除外信号受信手段１１４により受信された除外信号の送信元の端末２０を表示対象から除外する。

（３）変形例３
例えば上述の表示制御装置１０が設けられずに、表示装置３０が、上述の表示制御装置１０が有する機能（端末情報受信手段１１１、決定手段１１２、制御信号送信手段１１３等）を有する形態であってもよい。

（４）変形例４
例えば表示システム１は、図２０に示す形態であってもよい。図２０の例では、端末２０は、端末映像生成手段２１１と、操作受付手段２１２と、端末映像送信手段２２１とを備える。

端末映像送信手段２２１は、端末２０に表示された端末映像（端末映像生成手段２１１により生成された端末映像）を、表示制御装置１０および表示装置３０の各々に送信する。この例では、端末映像送信手段２２１は、一定期間が経過するたびに、最新の端末映像を、表示制御装置１０および表示装置３０の各々に送信する。

図２０の例では、表示制御装置１０は、端末映像受信手段１２１と、端末情報生成手段１２２と、決定手段１１２と、制御信号送信手段１２３とを有する。端末映像受信手段１２１は、第１の端末映像受信手段の一例であり、複数の端末２０の各々から端末映像を受信する。

端末情報生成手段１２２は、端末映像受信手段１２１により受信された複数の端末２０の各々の端末映像に基づいて、複数の端末２０ごとに、端末映像の画像変化量を示す端末情報を生成する。つまり、この例では、表示制御装置１０が各端末２０の端末情報を生成する機能を有している。

決定手段１１２は、端末情報生成手段１２２により生成された端末情報に基づいて、表示対象となる１以上の端末２０を決定する。この決定方法は上述した実施形態で説明した内容と同様である。制御信号送信手段１２３は、決定手段１１２により決定された１以上の端末２０の各々の表示映像（表示装置３０に表示する映像）のサイズを特定可能な制御信号を表示装置３０へ送信する。この例では、制御信号は、決定手段１１２により決定された１以上の端末２０ごとに、該端末２０の表示映像のサイズを特定可能な情報（例えば解像度を指定する情報など）を対応付けた情報を含む信号であるが、これに限られるものではない。

図２０の例では、表示装置３０は、端末映像受信手段３２１と、制御信号受信手段３２２と、表示映像生成手段３２３と、映像合成手段３１２と、表示手段３１３とを有する。端末映像受信手段３２１は、第２の端末映像受信手段の一例であり、複数の端末２０の各々から端末映像を受信する。制御信号受信手段３２２は、表示制御装置１０から制御信号を受信する。

表示映像生成手段３２３は、制御信号受信手段３２２により受信された制御信号に従って、端末映像受信手段３２１により受信された端末映像のうち、表示制御装置１０の決定手段１１２により決定された１以上の端末２０が送信してきた端末映像ごとに（この例では制御信号受信手段３２２により受信された制御信号に含まれる１以上の端末映像ごとに）、該端末映像を変換して表示映像を生成する。つまり、この例では、表示装置３０が表示対象の端末２０の表示映像を生成する機能を有している。

映像合成手段３１２は、表示映像生成手段３２３により生成された表示映像を合成した合成映像を生成する。表示手段３１３は、映像合成手段３１２により生成された合成映像を表示する。

（５）変形例５
図２１は、本変形例の表示システム１が有する機能の一例を示す図である。図２１に示すように、表示制御装置１０は、レイアウト決定手段１１５をさらに有する。レイアウト決定手段１１５は、決定手段１１２により決定された端末２０（表示対象として決定された端末２０）の数に応じて、合成映像のレイアウトを決定する。より具体的には、レイアウト決定手段１１５は、決定手段１１２により決定された端末２０の数と、端末映像の映像特性とに応じて、合成映像のレイアウトを決定する。

制御信号送信手段１１３は、決定手段１１２により決定された１以上の端末２０に対して、レイアウト決定手段１１５により決定されたレイアウトに応じた制御信号を送信する。つまり、制御信号送信手段１１３は、決定手段１１２により決定された１以上の端末２０に対して、該端末２０が生成すべき表示映像のサイズを特定可能な制御信号を送信する。各端末２０が生成すべき表示映像のサイズは、レイアウト決定手段１１５により決定されたレイアウトに基づいて決定することができる。この制御信号を受信した端末２０の表示映像生成手段２１６は、その受信した制御信号に基づいて、表示映像の解像度を決定することができる。つまり、表示映像の解像度はレイアウトに合わせて決定されるので、合成映像の画質を維持しつつデータ通信量（画像の転送等で発生するデータ通信量）を抑えることができる。

また、制御信号送信手段１１３は、レイアウト決定手段１１５により決定されたレイアウトを示すレイアウト信号を表示装置３０へ送信し、表示装置３０の映像合成手段３１２は、表示制御装置１０から受信したレイアウト信号と、表示映像受信手段３１１で受信した表示映像と、に基づいて、合成映像を生成する。

ここで、分割画面の数が１（全画面）、４（＝２×２）、９（＝３×３）の３つのパターンのレイアウトに制限すると、例えば表示対象の端末２０の数が２つの場合、合成映像は図２２（Ａ）のようになり、バランスが悪い上に余白が多くなってしまう。また、例えば図２２（Ｂ）のように、単純に分割画面を並べただけのレイアウトでは余白が多くなり、例えば図２２（Ｃ）のように、余白を埋めるために分割画面を引き延ばすレイアウトでは、違和感（この例では、縦方向に不自然に伸びている）を感じさせてしまう。

そこで、レイアウト決定手段１１５は、決定手段１１２により決定された端末２０（表示対象として決定された端末２０）の数に応じた最適なレイアウト（余白を基準範囲内に抑え、バランスや見え方を含めて違和感を与えないレイアウト）を決定する。この例では、表示対象の端末２０の数と、最適なレイアウトとの対応関係を示すレイアウト情報が予め規定されており（記憶部３０２等の記憶装置に保存）、レイアウト決定手段１１５は、このレイアウト情報を参照して、決定手段１１２により決定された端末２０の数に対応付けられたレイアウトを決定することができる。さらに言えば、ここでの上記レイアウト情報は、表示対象の端末２０の数と、映像特性と、最適なレイアウトとの対応関係を示す情報である。映像特性の例としては、例えば映像の奥行きの有無、映像の並び（縦並びまたは横並び）、重なりの有無などが考えられる。レイアウト決定手段１１５は、レイアウト情報を参照して、決定手段１１２により決定された端末２０の数と映像特性との組み合わせに対応付けられたレイアウトを決定することができる。なお、映像特性（奥行きの有無等）は、映像に含まれる資料の特性（例えば図形問題の解答、作文の作成情報）から決定してもよいし、ユーザの指定に応じて決定してもよい。

以下、レイアウトのバリエーションの例を挙げて説明する。図２３（Ａ）は、表示対象の端末２０の数が「２」、映像特性として、奥行きは無で映像の並びは横並び（縦長映像向け）である場合のレイアウトの一例を示す図である。図２３（Ｂ）は、表示対象の端末２０の数が「２」、映像特性として、奥行きは有で映像の並びは横並び（縦長映像向け）である場合のレイアウトの一例を示す図である。なお、ここでは、奥行き有の場合は、現実世界でディスプレイ等の表示部を斜めから見た際の見え方に合わせることで、違和感を与えないことを狙っている（他の例についても同様）。図２３（Ｃ）は、表示対象の端末２０の数が「２」、映像特性として、奥行きは無で映像の並びは縦並び（横長映像向け）である場合のレイアウトの一例を示す図である。図２３（Ｄ）は、表示対象の端末２０の数が「２」、映像特性として、奥行きは有で映像の並びは縦並び（横長映像向け）である場合のレイアウトの一例を示す図である。

なお、表示対象の端末２０の数が「２」、映像特性として、奥行きは有で映像の並びは横並び（縦長映像向け）である場合のレイアウトの別の例として、図２４（Ａ）のように２つの分割画面が平行に配置（図２３（Ｂ）では向かい合うように配置）される形態であってもよい。また、表示対象の端末２０の数が「２」、映像特性として、奥行きは有で映像の並びは縦並び（横長映像向け）である場合のレイアウトの別の例として、図２４（Ｂ）のように２つの分割画面が平行に配置（図２３（Ｄ）では向かい合うように配置）される形態であってもよい。

図２５は、表示対象の端末２０の数が「４」、映像特性として奥行きは無である場合のレイアウトの一例を示す図である。図２６（Ａ）は、表示対象の端末２０の数が「３」、映像特性として奥行きは無で、図２５に示す４つの分割画面のうち下の２つの分割画面のうちの何れか（この例では端末２０Ｄの画面）を非表示とする場合のレイアウトの一例を示す図である。図２６（Ｂ）は、表示対象の端末２０の数が「３」、映像特性として奥行きは無で、図２５に示す４つの分割画面のうち上の２つの分割画面のうちの何れか（この例では端末２０Ｂの画面）を非表示とする場合のレイアウトの一例を示す図である。

図２７（Ａ）は、表示対象の端末２０の数が「５」、映像特性として、奥行きは無で重なりは無である場合のレイアウトの一例を示す図である。図２７（Ｂ）は、表示対象の端末２０の数が「５」、映像特性として、奥行きは有、重なりは無、映像の並びは横並びである場合のレイアウトの一例を示す図である。図２７（Ｃ）は、表示対象の端末２０の数が「５」、映像特性として、奥行きは無で重なりは有である場合のレイアウトの一例を示す図である。図２７（Ｄ）は、表示対象の端末２０の数が「５」、映像特性として、奥行きは有、重なりは無、映像の並びは横並びである場合のレイアウトの一例を示す図である。

図２８（Ａ）は、表示対象の端末２０の数が「６」、映像特性として、奥行きは無で映像の並びは横並びである場合のレイアウトの一例を示す図である。図２８（Ｂ）は、表示対象の端末２０の数が「６」、映像特性として、奥行きは無で映像の並びは縦並びである場合のレイアウトの一例を示す図である。

図２９（Ａ）は、図２８（Ａ）のレイアウトに、端末２０Ｇの画面（分割画面）が追加された場合のレイアウトの一例を示す図である。つまり、表示対象の端末２０の数が「７」、映像特性として、奥行きは無で映像の並びは横並びである場合のレイアウトの一例を示す図である。図２９（Ｂ）は、図２８（Ｂ）のレイアウトに、端末２０Ｇの画面（分割画面）が追加された場合のレイアウトの一例を示す図である。つまり、表示対象の端末２０の数が「７」、映像特性として、奥行きは無で映像の並びは縦並びである場合のレイアウトの一例を示す図である。

図３０（Ａ）は、図２９（Ａ）のレイアウトに、端末２０Ｈの画面（分割画面）が追加された場合のレイアウトの一例を示す図である。つまり、表示対象の端末２０の数が「８」、映像特性として、奥行きは無で映像の並びは横並びである場合のレイアウトの一例を示す図である。図３０（Ｂ）は、図２９（Ｂ）のレイアウトに、端末２０Ｈの画面（分割画面）が追加された場合のレイアウトの一例を示す図である。つまり、表示対象の端末２０の数が「８」、映像特性として、奥行きは無で映像の並びは縦並びである場合のレイアウトの一例を示す図である。図３１は、表示対象の端末２０の数が「９」、映像特性として奥行きは無である場合のレイアウトの一例を示す図である。表示対象の端末２０の数が１０以上である場合も同様にして最適なレイアウトを決めることができる。

また、本実施形態のレイアウト決定手段１１５は、決定手段１１２により決定された端末２０の数が変化した場合は、合成映像のレイアウトが段階的に切り替わるよう、合成映像のレイアウトを決定する。

例えば図３２に示すように、端末２０Ａ、端末２０Ｂ、端末２０Ｃ、および、端末２０Ｄの４つの端末２０の端末情報が閾値以上である状態から、図３３に示すように、端末２０Ａ、端末２０Ｂ、および、端末２０Ｃの３つの端末２０の端末情報が閾値以上である状態に変化した場合を想定する。この場合、レイアウト決定手段１１５は、図３４に示すように、端末２０Ｄの画面が徐々に画面外へ移動して消える（フェードアウトでもよい）一方、端末２０Ｃの画面（端末２０Ｂの画面でもよい）が徐々に中央へ移動するよう（つまり、４つの分割画面のレイアウトから３つの分割画面のレイアウトへ段階的に切り替わるよう）、レイアウトを決定する。

また、例えば図３５に示すように、端末２０Ａ、端末２０Ｂ、端末２０Ｃ、および、端末２０Ｄの４つの端末２０の端末情報が閾値以上である状態から、図３６に示すように、端末２０Ａ、端末２０Ｂ、端末２０Ｃ、端末２０Ｄ、および、端末２０Ｅの５つの端末２０の端末情報が閾値以上である状態に変化した場合を想定する。この場合、レイアウト決定手段１１５は、図３７に示すように、端末２０Ａ、２０Ｂ、２０Ｃ、２０Ｄの各々の画面が徐々に小さくなる一方、端末２０Ｅの画面が徐々に画面外から中央へ移動（フェードインでもよい）するよう（つまり、４つの分割画面のレイアウトから５つの分割画面のレイアウトへ段階的に切り替わるよう）、レイアウトを決定する。

表示対象の端末２０の数が変わる際には、レイアウトを瞬時に切り替えてしまうと、画面の対応関係がわからなくなるため望ましくない。そのため、本実施形態では、レイアウトを徐々に切り替える。また、図３２〜図３４の例では、表示対象の端末２０の数が４から３に切り替わる例を示しているが、３から４に切り替わる場合は、上記とは逆の動きで実現できる。また、図３２〜図３４の例では、端末２０Ｄの画面が消える例を示しているが、例えば端末２０Ｂの画面が消える場合は、端末２０Ａの画面が右に移動する。このように、直前のレイアウトや非表示となる画面の位置に応じて、切り替え後のレイアウトを決める。こうすることで、滑らかな切り替えが実現できる。また、図３５〜図３７の例では、表示対象の端末２０の数が４から５に切り替わる例を示しているが、図３２〜図３４の例と同様に、追加される端末２０Ｅの画面の表示位置などに基づく一定のルールに従うことで、滑らかな切り替えを実現できる。

１ 表示システム
１０ 表示制御装置
２０ 端末
３０ 表示装置
４０ ネットワーク
１１１ 端末情報受信手段
１１２ 決定手段
１１３ 制御信号送信手段
１１４ 除外信号受信手段
１１５ レイアウト決定手段
２１１ 端末映像生成手段
２１２ 操作受付手段
２１３ 端末情報生成手段
２１４ 端末情報送信手段
２１５ 制御信号受信手段
２１６ 表示映像生成手段
２１７ 表示映像送信手段
３１１ 表示映像受信手段
３１２ 映像合成手段
３１３ 表示手段

特開２０１４−０４４７３８号公報

Claims (14)

1. 表示制御装置と、複数の情報処理装置と、表示装置とを備える表示システムであって、
   前記表示制御装置は、
   前記複数の情報処理装置の各々から、前記情報処理装置の状態に応じて変化する端末情報を受信する端末情報受信手段と、
   前記端末情報受信手段により受信された前記端末情報に基づいて、表示対象となる１以上の前記情報処理装置を決定する決定手段と、
   前記決定手段により決定された前記情報処理装置の数に応じて、合成映像のレイアウトを決定するレイアウト決定手段と、
   前記決定手段により決定された１以上の前記情報処理装置に対して、前記レイアウト決定手段により決定されたレイアウトに応じた制御信号を送信する制御信号送信手段と、を備え、
   前記複数の情報処理装置の各々は、
   前記端末情報を生成する端末情報生成手段と、
   前記端末情報生成手段により生成された前記端末情報を前記表示制御装置へ送信する端末情報送信手段と、
   前記制御信号を受信する制御信号受信手段と、
   前記制御信号受信手段により受信された前記制御信号に従って、前記情報処理装置に表示された端末映像を変換して得られる表示映像を生成する表示映像生成手段と、
   前記表示映像生成手段により生成された前記表示映像を前記表示装置へ送信する表示映像送信手段と、を備え、
   前記表示装置は、
   前記複数の情報処理装置の各々から前記表示映像を受信する表示映像受信手段と、
   前記表示映像受信手段により受信された１以上の前記表示映像を合成した合成映像を生成する映像合成手段と、
   前記映像合成手段により生成された合成映像を表示する表示手段と、を備える、
   表示システム。
2. 前記端末情報は、前記情報処理装置の活発度合いに応じた値を示す情報である、
   請求項１に記載の表示システム。
3. 前記端末情報は、前記情報処理装置に表示された映像の画像変化量、前記情報処理装置が出力する音量、および、前記情報処理装置の操作量のうちの何れかである、
   請求項２に記載の表示システム。
4. 前記決定手段は、前記複数の情報処理装置のうち前記端末情報が閾値以上の前記情報処理装置を、表示対象の前記情報処理装置として決定する、
   請求項１乃至３のうちの何れか１項に記載の表示システム。
5. 前記決定手段は、表示対象として決定した前記情報処理装置の数に応じて、その決定した各前記情報処理装置の前記表示映像のサイズを決定する、
   請求項４に記載の表示システム。
6. 前記決定手段は、表示対象として決定した前記情報処理装置の数が１つの場合は、表示対象として決定した前記情報処理装置の前記表示映像のサイズを全画面に対応するサイズに決定し、表示対象として決定した前記情報処理装置の数が２以上の場合は、表示対象として決定した２以上の前記情報処理装置の各々の前記表示映像のサイズを、前記表示システムに含まれる前記情報処理装置の数で前記全画面に対応するサイズを分割して得られる分割画面の１つに対応するサイズに決定する、
   請求項５に記載の表示システム。
7. 前記決定手段は、前記端末情報が大きい前記情報処理装置ほど前記表示映像のサイズが大きくなるよう、表示対象の前記情報処理装置の前記表示映像のサイズを決定する、
   請求項４に記載の表示システム。
8. 前記複数の情報処理装置の各々は、
   ユーザの操作に応じて、前記情報処理装置に表示された前記端末映像を表示対象から除外することを指示する除外信号を前記表示制御装置へ送信する除外信号送信手段をさらに備え、
   前記表示制御装置は、
   前記除外信号を受信する除外信号受信手段をさらに備え、
   前記決定手段は、前記除外信号受信手段により受信された前記除外信号の送信元の前記情報処理装置を表示対象から除外する、
   請求項１乃至７のうちの何れか１項に記載の表示システム。
9. 前記レイアウト決定手段は、前記決定手段により決定された前記情報処理装置の数と、前記端末映像の映像特性とに応じて、前記合成映像のレイアウトを決定する、
   請求項１に記載の表示システム。
10. 前記制御信号送信手段は、前記レイアウト決定手段により決定されたレイアウトを示すレイアウト信号を前記表示装置へ送信し、
    前記表示装置の前記映像合成手段は、前記表示制御装置から受信した前記レイアウト信号に基づいて、前記合成映像を生成する、
    請求項９に記載の表示システム。
11. 前記制御信号を受信した前記情報処理装置の前記表示映像生成手段は、その受信した前記制御信号に基づいて、前記表示映像の解像度を決定する、
    請求項９又は１０に記載の表示システム。
12. 前記レイアウト決定手段は、前記決定手段により決定された前記情報処理装置の数が変化した場合は、前記合成映像のレイアウトが段階的に切り替わるよう、前記合成映像のレイアウトを決定する、
    請求項９乃至１１のうちの何れか１項に記載の表示システム。
13. 複数の情報処理装置と、表示装置とを備える表示システムであって、
    前記複数の情報処理装置の各々は、
    前記情報処理装置の状態に応じて変化する情報を示す端末情報を生成する端末情報生成手段と、
    前記端末情報生成手段により生成された前記端末情報を前記表示装置へ送信する端末情報送信手段と、
    前記表示装置から制御信号を受信する制御信号受信手段と、
    前記制御信号受信手段により受信された前記制御信号に従って、前記情報処理装置に表示された端末映像を変換して得られる表示映像を生成する表示映像生成手段と、
    前記表示映像生成手段により生成された前記表示映像を前記表示装置へ送信する表示映像送信手段と、を備え、
    前記表示装置は、
    前記複数の情報処理装置の各々から前記端末情報を受信する端末情報受信手段と、
    前記端末情報受信手段により受信された前記端末情報に基づいて、表示対象となる１以上の前記情報処理装置を決定する決定手段と、
    前記決定手段により決定された前記情報処理装置の数に応じて、合成映像のレイアウトを決定するレイアウト決定手段と、
    前記決定手段により決定された１以上の前記情報処理装置に対して、前記レイアウト決定手段により決定されたレイアウトに応じた前記制御信号を送信する制御信号送信手段と、
    前記複数の情報処理装置の各々から前記表示映像を受信する表示映像受信手段と、
    前記表示映像受信手段により受信された１以上の前記表示映像を合成した合成映像を生成する映像合成手段と、
    前記映像合成手段により生成された合成映像を表示する表示手段と、を備える、
    表示システム。
14. 表示制御装置と、複数の情報処理装置と、表示装置とを備える表示システムであって、
    前記複数の情報処理装置の各々は、
    前記情報処理装置に表示された端末映像を、前記表示制御装置および前記表示装置の各々に送信する端末映像送信手段を備え、
    前記表示制御装置は、
    前記複数の情報処理装置の各々から前記端末映像を受信する第１の端末映像受信手段と、
    前記第１の端末映像受信手段により受信された前記複数の情報処理装置の各々の前記端末映像に基づいて、前記複数の情報処理装置ごとに、前記端末映像の画像変化量を示す端末情報を生成する端末情報生成手段と、
    前記端末情報生成手段により生成された前記端末情報に基づいて、表示対象となる１以上の前記情報処理装置を決定する決定手段と、
    前記決定手段により決定された前記情報処理装置の数に応じて、合成映像のレイアウトを決定するレイアウト決定手段と、
    前記決定手段により決定された１以上の前記情報処理装置に対して、前記レイアウト決定手段により決定されたレイアウトに応じた制御信号を送信する制御信号送信手段と、を備え、
    前記表示装置は、
    前記複数の情報処理装置の各々から前記端末映像を受信する第２の端末映像受信手段と、
    前記表示制御装置から前記制御信号を受信する制御信号受信手段と、
    前記制御信号受信手段により受信された前記制御信号に従って、前記第２の端末映像受信手段により受信された前記端末映像のうち、前記決定手段により決定された１以上の前記情報処理装置が送信してきた前記端末映像ごとに、該端末映像を変換して表示映像を生成する表示映像生成手段と、
    前記表示映像生成手段により生成された前記表示映像を合成した合成映像を生成する合成映像生成手段と、
    前記合成映像生成手段により生成された前記合成映像を表示する表示手段と、を備える、
    表示システム。

Images