JP2009053836A - 表示システム - Google Patents

Abstract

【課題】複数の画像入力装置から画像が同時に入力されたとき、これらの画像を合成して表示する。
【解決手段】画像入力装置が画像を制御装置に送信すると、制御装置は、この画像入力装置に対応するレイヤに画像を保存する。他の画像入力装置から入力された画像は、異なるレイヤに保存される。制御装置は、各画像入力装置からの画像をレイヤ毎に個別に管理する。複数の画像が同時に入力されたとき、それぞれ別のレイヤに保存される。制御装置は、レイヤを重ね合わせることにより画像を合成して、画像を表示装置および各画像入力装置に送信する。表示装置および各画像入力装置は、同じ画像を表示する。
【選択図】図４

Description

本発明は、複数の端末装置から入力された画像を表示装置において表示する表示システムに関する。

従来、電子黒板では、ユーザがホワイトボードにペンで文字や絵等を書くと、ホワイトボードが光学的に走査され、画像が読み取られる。入力された画像は、記録シートに印刷される。例えば、電子黒板を会議に使用すると、書き込まれた画像が議事録として、会議終了後に印刷されて出力される。議事録は、コピーされて、会議の参加者に配布される。あるいは、印刷された議事録が、パーソナルコンピュータに入力され、電子化される。

また、大型ディスプレイを用いた電子会議システムが提案されている。特許文献１には、ホワイトボードとパーソナルコンピュータとがネットワークを通じて接続された電子会議システムが記載されている。パーソナルコンピュータに接続された小型ディスプレイやホワイトボードに電子ペンで画像が書き込まれると、各ディスプレイに画像が表示され、この画像が電子化されて保存される。

また、特許文献２では、大型ディスプレイを使う会議システムにおいて、ホストコンピュータと複数の携帯端末とが無線通信可能とされ、ホストコンピュータは、携帯端末からの描画コマンドにしたがって、ディスプレイに画像を表示する。
特開２０００−５６７４７号公報 特開２００５−４９９９３号公報

上記の会議システムにおいては、ユーザが画像入力装置を操作することにより、画像が入力され、この画像がディスプレイに表示される。しかし、ユーザがある画像入力装置から画像を入力中に、ホストコンピュータが他の画像入力装置からの入力を受け付けると、現在入力中の画像が無効とされる。入力していたユーザは、画像を入力できなくなってしまう。その結果、ユーザの混乱を招き、会議の進行に支障を来たすおそれがある。

本発明は、上記に鑑み、複数の画像入力装置から画像を入力できる表示システムの提供を目的とする。

本発明は、画像を表示する表示装置と、表示装置を制御する制御装置と、画像を入力する複数の画像入力装置とが通信可能に接続され、制御装置は、各画像入力装置から同時に入力された画像を合成して、表示装置に表示させるものである。

各画像入力装置から同時に画像が入力したとき、制御装置は、それぞれの画像を受け取る。ここで、制御装置は、各画像入力装置から入力された画像を個別に管理する。したがって、画像入力装置毎に画像が管理されるので、制御装置に同時に画像が入力しても、制御装置は、複数の画像を間違いなく処理できる。そして、制御装置は、複数の画像を合成し、１つの画像として表示装置に出力する。表示装置は、合成された画像を表示する。

画像入力装置が表示部を有している場合、制御装置は、合成した画像を各画像入力装置に出力する。画像入力装置は、合成された画像を表示する。したがって、表示システムにおいて、同じ画像が表示される。

画像入力装置は、自装置において入力した画像を変更可能とされ、他の画像入力装置によって入力された画像に対して変更不可とされる。画像入力装置毎に画像が個別に管理されるので、画像入力装置は、他の画像入力装置の画像にアクセスできない。そのため、他の画像入力装置によって、自装置の画像が変更されることはない。

同時に画像の入力を可能とし、外部から画像を変更されないようにするために、制御装置は、入力された画像を載せるレイヤを有し、アクセスしてきた画像入力装置毎にレイヤを設定し、各レイヤを重ね合わせて画像を合成する。すなわち、レイヤは、画像が描かれた仮想的なシートであり、入力された画像毎にレイヤが存在する。制御装置は、このレイヤに基づいて、画像を個別に管理する。すなわち、制御装置は、画像入力装置のＩＤをレイヤと関連付けて登録し、画像入力装置から入力された画像を関連するレイヤに描いて、画像を管理する。

また、表示装置は、画像を入力可能とされ、入力した画像を表示する。すなわち、表示装置は、入力した画像を制御装置に出力し、制御装置は、表示装置からの画像を画像入力装置からの画像と合成する。合成された画像が表示装置に出力され、表示装置は、自装置で入力した画像を含めて他の画像も表示する。

本発明によると、複数の画像入力装置から画像が入力されても、全ての画像を受け取って表示させることができる。会議に本システムを使用するとき、ユーザは、他のユーザが画像を入力中であっても、画像を入力でき、入力待ちの時間がなくなる。これによって、会議を効率よくスムーズに進めることができる。

本実施形態の表示システムを図１に示す。表示システムは、表示装置１と、表示装置１を制御する制御装置２と、複数の画像入力装置とから構成され、これらが通信可能に接続される。

表示装置１は、タッチパネル付きのモニタとされ、センサ部３、画像表示部４およびインターフェース部５を備えている。センサ部３は、赤外線センサを用いて、赤外線遮断検出方式によりタッチペン６あるいは指の近接を検出する。例えば、タッチペン６がタッチパネルに接触すると、センサ部３は接触位置を検出し、位置情報を制御装置２に出力する。なお、センサ部３は、感圧式あるいは静電式のものであってもよい。

画像表示部４は、制御装置２からの指示によりモニタを駆動して、モニタの画面に画像を表示させる。インターフェース部５は、ケーブルを介して制御装置２と接続され、制御装置２との間でデータの送受信を行う。

図２に示すように、ユーザがモニタ７の画面上に文字や絵等の画像を描く操作を行う。すなわち、タッチパネル８に点線で示すような軌跡が生じる。センサ部３がこの軌跡を検出して、位置情報を制御装置２に出力する。制御装置２は、位置情報に基づいて画像を生成する。制御装置２が画像を表示装置１に出力すると、ユーザの描いた画像がモニタ７の画面に実線のように表示される。

制御装置２は、パーソナルコンピュータからなり、インターフェース部１０、画像生成部１１、通信部１２および制御部１３を備えている。インターフェース部１０は、表示装置１との間でデータの送受信を行う。画像生成部１１は、制御部１３の指示にしたがって、表示装置１において表示するための画像を生成する。通信部１２は、画像入力装置と適宜の通信方式により通信を行う。

画像入力装置は、表示システムにおいて、画像を入力するための機器である。例えば、スキャナ２０、通信端末２１、リムーバブルメディア２２、端末装置２３があげられる。スキャナ２０は、原稿から画像を読み取る。そして、スキャナ２０は、通信部１２を通じて画像を制御装置２に送信する。なお、スキャナ２０の代わりに、コピー、プリント、スキャン、ファクシミリ通信を行う画像処理装置であってもよい。

通信端末２１は、赤外線、ブルートゥース（登録商標）等の無線通信を行う機器であって、例えば携帯電話、携帯情報端末（ＰＤＡ）である。通信端末２１は、通信部１２と無線通信することにより、記憶している写真等の画像を制御装置２に送信する。

リムーバルメディア２２は、画像を記憶可能なメモリカード、ＩＣカード、ＤＶＤ等の光ディスク、磁気ディスク等である。リーダライタ、ディスクドライブといった通信部１２は、リムーバルメディア２２に保存されている画像を読み出す。

端末装置２３は、ノートパソコンのような携帯可能なパーソナルコンピュータである。端末装置２３は、制御装置２にＬＡＮ等のネットワークにより接続され、制御装置２とＴＣＰ／ＩＰといった所定の通信プロトコルにより有線あるいは無線の通信を行う。端末装置２の制御部は、保存している画像あるいは作成した画像を制御装置２に送信する。

通信端末２１および端末装置２３は、画像を表示する表示部を備えている。通信端末２１および端末装置２３は、画像を入力するためのアプリケーションソフトウェアを搭載している。アプリケーションソフトウェアが起動されると、各端末２１、２３の制御部は、表示部に画像を表示させて、画像の作成や変更を行う。そして、通信端末２１および端末装置２３は、この画像を制御装置２に送信する。なお、送信した画像は、ＲＡＭ等のメモリに記憶される。このようにして、画像が通信端末２１および端末装置２３から制御装置２に入力される。

また、通信端末２１および端末装置２３は、画像に対して操作を行う操作部を備えている。操作部は、例えばマウス等のポインティングデバイスであり、表示されている画像にクリック、ドラッグ等の操作をしたとき、この操作情報が制御装置２に送信される。表示部がタッチパネルを備えている場合、タッチペンや指によって操作したとき、同様に操作情報が制御装置２に送信される。また、ユーザがタッチパネルに画像を描くと、この操作に応じて画像が生成され、表示部のモニタに画像が表示される。

制御装置２の制御部１３は、メモリに格納されたプログラムにしたがって、表示装置１の動作を制御する。すなわち、制御部１３は、画像を表示装置１に表示するホワイトボードモード（透明ボードモード）を実行する。なお、ホワイトボードモードがオフのとき、制御部１３は、ハードディスク装置等の記憶部に保存されている画像を読み出して、表示装置１に送信する。表示装置１は、この画像を表示する。そして、制御部１３は、表示装置１に表示された画像に対する操作に応じた処理を実行する。

ホワイトボードモードがオンのとき、制御部１３は、表示装置１の画面上に指定された位置に、画像を表示するように指示を出す。この指示により、画像生成部１１は、表示する画像を生成し、制御部１３は、インターフェース部１０を通じて表示装置１に画像を送信する。

この表示するための画像は、画像入力装置から入力される。制御装置２に画像が入力されたとき、制御部１３は、表示条件を設定し、画像生成部１１は、表示条件に応じて画像の処理を行う。例えば、入力された複数の画像の中から必要な画像の選択、オブジェクトの種類の選択、画像の回転、伸縮等の変形といった設定および画像処理が行われる。処理後の画像が表示装置１に送信され、画像が表示される。

ここで、複数の画像入力装置から同時に画像が制御装置２に入力されたとき、制御部１３は、複数の画像を合成して、合成後の画像を表示させる。そのために、制御部１３は、各画像入力装置から入力された画像を個別に管理する。すなわち、入力された画像を載せるための複数のレイヤが設けられ、各レイヤは、それぞれの画像入力装置と関連付けられる。レイヤは、画像が描かれた仮想的なシートであり、ＲＡＭ等のメモリ上に形成される。

レイヤには、それぞれレイヤＩＤが付与され、制御部１３は、画像入力装置毎にレイヤを個別に管理する。すなわち、図３に示すように、画像入力装置が有する端末ＩＤとレイヤＩＤとを一覧にした管理テーブルが作成される。管理テーブルは、メモリに保存される。端末ＩＤは、画像入力装置のＩＰアドレスあるいはＭＡＣアドレスとされる。なお、端末ＩＤは、これに限るものではなく、各画像入力装置を識別できるユニークなＩＤであればよい。

画像入力装置から画像が入力すると、制御部１３は、受け取った画像をメモリに保存する。このとき、メモリに形成されたレイヤに画像が保存される。制御部１３は、このレイヤに関連付けて画像入力装置の端末ＩＤを管理テーブルに登録する。なお、表示装置１から画像が入力された場合も、同様にレイヤが割り当てられる。

入力された複数の画像を表示するとき、制御部１３は、レイヤを重ね合わせることによって、複数の画像を合成して、１つの画像として表示装置１に出力する。合成された画像が、表示装置１に表示される。また、制御部１３は、表示部を備えた画像入力装置、すなわち通信端末２１および端末装置２３に合成された画像を出力する。各画像入力装置の表示部にも、表示装置と同じ画像が表示される。

画像入力装置のうち、通信端末２１および端末装置２３は、入力した画像を変更することができる。変更後の画像が制御装置２に入力されると、制御部１３は、該当するレイヤに保存されている画像を更新する。そして、新しく画像を合成して、表示装置１および画像入力装置に出力する。

このように、複数の画像を合成して表示するホワイトボードモードは、表示装置１を会議用のディスプレイとして使用する場合に実行される。ホワイトボードモードを実行するために、制御装置２および画像入力装置に、専用ソフトウェアが搭載される。なお、専用ソフトウェアを搭載する画像入力装置は、表示部を有するものであり、例えば通信端末２１および端末装置２３とされる。

まず、制御装置２は、専用ソフトウェアを起動して、ホワイトボードモードを実行可能とする。会議に参加するユーザは、画像入力装置を操作して、専用ソフトウェアを起動する。この起動により、画像入力装置は、制御装置２にアクセスして、ログインする。制御装置２の制御部１３は、画像入力装置のログインを許可すると、この画像入力装置の端末ＩＤを取得する。このとき、制御部１３は、画像入力装置に１つのレイヤを割り当て、そのレイヤＩＤを端末ＩＤに関連付けて管理テーブルに登録する。制御部１３は、画像入力装置の登録をログイン順に行う。

ここで、制御部１３は、管理テーブルを画面に表示させる。これにより、画像入力装置に割り当てたレイヤを変更することができる。また、表示された管理テーブルを閲覧することにより、会議に参加しているユーザあるいは画像入力装置を認識することができる。制御装置２は、ログインした複数の画像入力装置からの画像を受信可能となる。

図４に示すように、ＩＤ００１の画像入力装置において、三角形の画像が生成されたとき、画像入力装置は、画像を含むパケットを制御装置２に送信する。制御装置２の制御部１３は、パケットのヘッダ情報から送信元の画像入力装置を識別する。そして、管理テーブルを参照して、ＩＤ００１の画像入力装置に対応するＬ１のレイヤを特定し、このレイヤに画像を保存する。

他の画像入力装置あるいは表示装置１から画像の入力がないとき、制御装置２の制御部１３は、画像を表示装置１に送信する。表示装置１は、モニタの画面に画像入力装置が入力した画像を表示する。また、制御部１３は、ログインしている画像入力装置に画像を送信する。

画像入力装置は、画像を受信すると、専用ソフトウェアが動作して、表示部に画像を表示する。複数の画像入力装置は、表示装置１に表示されている画像と同じ画像を表示する。

次に、ＩＤ００２の画像入力装置が四角形の画像を生成すると、画像を含むパケットが制御装置２に送信される。制御装置２の制御部１３は、送信元の画像入力装置を識別し、入力された画像を当該画像入力装置に対応するＬ２のレイヤに保存する。２つの画像入力装置から入力された画像は別々に管理される。

そして、制御部１３は、画像生成部１１に画像を合成するように指示する。画像生成部１１は、２つのレイヤを重ね合わせて画像を合成する。制御部１３は、合成された画像を表示装置１および各画像入力装置に送信する。表示装置１および各画像入力装置には、合成された画像が表示される。

その後、ＩＤ００２の画像入力装置において、ユーザが画像を変更する、例えば画像の一部を消去するといった操作を行う場合、画像入力装置の制御部は、制御装置２から合成された画像をダウンロードする。画像入力装置の画面には、自装置において入力した画像（自画像）と他の画像入力装置の画像（他画像）とが表示される。ユーザが自画像に対して操作したとき、画像入力装置の制御部は、操作に応じて画像を変更する。変更された画像は、メモリに記憶されるとともに制御装置２に送信される。

一方、ユーザが他画像に対して操作したとき、画像入力装置の制御部は、この操作を無効とする。そのため、他画像の変更は不可能とされる。すなわち、制御部は、メモリに記憶されている画像に基づいて、自画像と他画像とを認識し、自画像に対する操作を検出すると、画像の変更を許容し、他画像に対する操作を検出すると、画像の変更を禁止する。

画像が変更されると、制御装置２の制御部１３は、この画像入力装置に対応するレイヤに画像を上書きして保存する。そして、制御部１３は、変更後の画像を合成して、表示装置１および各画像入力装置に送信する。表示装置１および各画像入力装置には、変更された画像が表示される。

また、画像の送信にパケット通信を利用することにより、制御装置２は、同時に複数の画像入力装置と通信が可能となる。複数の画像入力装置が制御装置２に画像を同時に送信したとき、制御装置２の制御部１３は、受信したパケットを順に画像入力装置毎に処理して、該当するレイヤに画像を保存する。したがって、複数の画像入力装置からの画像を同時に制御装置２に入力することができる。

上記の表示システムを会議や打ち合わせに適用することにより、参加しているユーザが同時に画像を書き込んだ場合であっても、その入力が無効にされることはない。したがって、入力した画像がすぐに表示され、会議等の進行がスムーズになる。また、自己の画像は他のユーザによって変更できないので、入力中の画像が他のユーザにより消去されたり、改変されることを防止できる。これによって、ユーザは他のユーザの意見を考慮しながら、すぐに書き込むことができ、効率のよい会議を実現することができる。

なお、本発明は、上記実施形態に限定されるものではなく、本発明の範囲内で上記実施形態に多くの修正および変更を加え得ることは勿論である。表示装置と制御装置とを一体化してもよい。また、制御装置や画像入力装置にカメラを設けて、本表示システムをＴＶ会議に適用してもよい。制御装置と画像入力装置が離れた位置にあるとき、ＶＰＮによって通信可能に接続して、ＴＶ会議を行う。

制御装置に、入力された画像に対する権限を与える。これにより、制御装置は、入力された画像を変更することができる。制御装置において、画像が変更されたとき、制御装置は、この画像を入力した画像入力装置に、変更後の画像を送信する。画像入力装置は、記憶している画像を変更された画像に更新する。

本発明の表示システムの全体構成図 画面に画像を描いたときの表示の仕組みを説明するための図 レイヤに関する管理テーブルを示す図 画像の入力と表示の流れを示す図

符号の説明

１ 表示装置
２ 制御装置
７ モニタ
８ タッチパネル
２０ スキャナ
２１ 通信端末
２２ リムーバルメディア
２３ 端末装置

Claims (8)

1. 画像を表示する表示装置と、表示装置を制御する制御装置と、画像を入力する複数の画像入力装置とが通信可能に接続され、制御装置は、各画像入力装置から同時に入力された画像を合成して、表示装置に表示させることを特徴とする表示システム。
2. 制御装置は、各画像入力装置から入力された画像を個別に管理することを特徴とする請求項１記載の表示システム。
3. 制御装置は、合成した画像を各画像入力装置に出力し、画像入力装置は、合成された画像を表示することを特徴とする請求項２記載の表示システム。
4. 画像入力装置は、自装置において入力した画像を変更可能とされ、他の画像入力装置によって入力された画像に対して変更不可とされたことを特徴とする請求項３記載の表示システム。
5. 制御装置は、入力された画像を載せるレイヤを有し、アクセスしてきた画像入力装置毎にレイヤを設定し、各レイヤを重ね合わせて画像を合成することを特徴とする請求項１〜４のいずれかに記載の表示システム。
6. 制御装置は、画像入力装置のＩＤをレイヤと関連付けて登録し、画像入力装置から入力された画像を関連するレイヤに描いて、画像を管理することを特徴とする請求項５記載の表示システム。
7. 表示装置は、画像を入力可能とされ、入力した画像を表示することを特徴とする請求項５記載の表示システム。
8. 表示装置は、入力した画像を制御装置に出力し、制御装置は、表示装置からの画像を画像入力装置からの画像と合成することを特徴とする請求項７記載の表示システム。

Images