JP2021124771A - 通信端末、通信システム、表示方法、及びプログラム - Google Patents

Abstract

【課題】遠隔会議中に一方の拠点内で複数の利用者が相談する際、他方の拠点の利用者には相談内容を知られたくない場合がある。このような場合、口頭のみで相談できる場合もあるが、表示中の資料画像やストローク画像の周辺に新たなストローク画像を描画しながら同じ拠点の複数の利用者間で認識を共有したいというニーズがある。また、一方の拠点で利用者が一人の場合であっても、他方の拠点の利用者には知られたくないが、自分が忘れないようにメモ等を残したいというニーズもある。
【解決手段】電子黒板１ａは、他の電子黒板１ｂに自端末で描画したストローク画像を再生するためのストロークデータを送信することで共有を行う共有モードを受け付ける「共有」アイコンａ１１と、他の電子黒板１ｂにストロークデータを送信しないで共有を行わない非共有モードを受け付ける「非共有」アイコンａ１２とをディスプレイ１９０に表示して、利用者からの選択を促す。
【選択図】図２０

Description

本発明は、通信端末、通信システム、表示方法、及びプログラムに関する。

インターネット等の通信ネットワークを介して遠隔地との間で通信する通信システムが普及している。当該通信システムとしては、例えば、遠隔会議を行う会議システムが挙げられる。一般的な会議システムでは、遠隔会議を行う一方の拠点の利用者が利用する通信端末が、会議室の被写体の画像や音をデジタルデータに変換して、他方の拠点の利用者が利用する通信端末に送信する。次に、他方の拠点の利用者が利用する通信端末は、ディスプレイに画像を表示させると共にスピーカから音を出力させる。これにより、実際の会議に近い状態で遠隔地間の会議を行うことができる。更に、一方の拠点の通信端末側で保持又は表示中の資料等を示す画像データを、通信ネットワークを介して他方の拠点の通信端末に送信することで、画像データを共有することが可能である（特許文献１参照）。

また、企業や教育機関、行政機関等における会議等において、ディスプレイに画像を表示させ、この画像の上に、ユーザが、文字、数字及び図形等のストローク画像を描画する電子黒板等の通信端末が利用されている（特許文献２参照）。このストローク画像は、通信端末が利用者により電子ペンや手でディスプレイ上に接触して移動させることで描いた内容を電子的に変換して、座標データ等によって示されるストロークデータを生成することによって描画される。更に、一方の拠点の通信端末でストローク画像が描画された場合、このストローク画像を再生するためのストロークデータが通信ネットワークを介して他方の拠点の通信端末に送信されることで、他方の拠点の通信端末でも同じストローク画像が表示される。

以上より、一方の拠点の通信端末が、表示中又は記憶している資料等の画像データ、及びストローク画像を再生するためのストロークデータを、通信ネットワークを介して他方の拠点の通信端末に送信することで、他方の拠点の通信端末は資料や画面背景等の資料画像を表示すると共にストローク画像を表示することができる。

しかしながら、遠隔会議中に一方の拠点内で複数の利用者が相談する際、他方の拠点の利用者には相談内容を知られたくない場合がある。このような場合、口頭のみで相談できる場合もあるが、表示中の資料画像やストローク画像の周辺に新たなストローク画像を描画しながら同じ拠点の複数の利用者間で認識を共有して相談したいというニーズがある。また、一方の拠点で利用者が一人の場合であっても、他方の拠点の利用者には知られたくないが、自分が忘れないようにメモ等を描き残したいというニーズもある。

請求項１に係る発明は、通信ネットワークを介して他の通信端末と通信する通信端末であって、前記他の通信端末に自端末で描画したストローク画像を再生するためのストロークデータを送信することで画像の共有を行う共有モードを受け付ける共有モード選択情報と、前記他の通信端末に前記ストロークデータを送信しないで画像の共有を行わない非共有モードを受け付ける非共有モード選択情報とを表示する表示制御手段を有することを特徴とする通信端末である。

以上説明したように本発明によれば、他方の拠点の利用者に知られずに、ストローク画像を描画することで、一方の拠点内で利用者間の認識の共有を行ったり、又は、利用者本人が忘れないように描き残したりすることができるという効果を奏する。

本実施形態の通信ルートを示した概略図である。 電子黒板の使用イメージ図である。 本実施形態に係る電子黒板のハードウェア構成図である。 本実施形態に係る通信管理システム、中継装置、及び画像保存装置のハードウェア構成図である。 本実施形態に係る通信システムの全体構成図である。 本実施形態に係る通信システムの各機能ブロック図である。 認証管理テーブルを示す概念図である。 端末管理テーブルを示す概念図である。 宛先リスト管理テーブルを示す概念図である。 セッション管理テーブルを示す概念図である。 中継装置管理テーブルを示す概念図である。 電子黒板間で遠隔通信を開始する準備段階の処理を示したシーケンス図である。 電子黒板１ａで表示される宛先リストの画面例である。 遠隔通信を開始する処理を示したシーケンス図である。 各画像レイヤの構成図である。 資料画像の画像データ及びストローク画像のストロークデータを共有する処理を示したシーケンス図である。 資料画像の画像データ及びストローク画像のストロークデータを共有する処理を示したシーケンス図である。 非表示ストローク画像のレイアでの描画の処理を示したフローチャートである。 （Ａ）電子黒板１ａの画面例、（Ｂ）電子黒板１ｂの画面例、（Ｃ）電子黒板１ａの画面例、（Ｄ）電子黒板１ｂの画面例を示す図である。

（Ａ）電子黒板１ａの画面例、（Ｂ）電子黒板１ｂの画面例、（Ｃ）電子黒板１ａの画面例、（Ｄ）電子黒板１ｂの画面例を示す図である。

以下、図面を用いて、本発明の一実施形態について説明する。

〔通信システムの概略〕
＜通信ルート＞
まず、図１を用いて、複数の電子黒板１ｂ，１ｂ間で描画しながらビデオ会議を行なうための通信システムについて説明する。図１は、本実施形態の通信ルートを示した概略図である。なお、「ビデオ会議」ではなく「テレビ会議」と呼ばれる場合もある。また、ここでは、一例として、ビデオ会議について説明するが、打ち合わせや単なる会話等であってもよい。

通信システムは、複数の電子黒板１ａ，１ｂ、中継装置３、通信管理システム５、及び画像保存装置７によって構築されている。電子黒板１ａ，１ｂは、通話用の映像データ及び音データ、並びに、共有用の画像データ及びストロークデータ等のコンテンツデータの相互通信を行う。なお、ストロークデータは、ストローク画像を再生(再現)するために必要なデータであり、座標データ、線の幅データ、線の色データ、ベクトルデータ等が含まれる。電子黒板１ａ，１ｂは、通話用の映像データ及び音データの送受信により、相手側の映像及び音を再生することで、遠隔ビデオ通話が可能となる。

電子黒板１ａ，１ｂは、共有用の資料画像の画像データを送受信することにより、通信システムを利用する参加者が、同じ資料画像を共有することができる。資料画像は、電子黒板１のディスプレイに表示される画像であり、会議の資料、ディスプレイに表示される背景画像、ディスプレイ画面をキャプチャされた場合のキャプチャ画面等の画像である。また、電子黒板１ａ，１ｂは、共有用のストローク画像のストロークデータを送受信することにより、通信システムを利用する参加者が、同じストローク画像を共有することができる。ストローク画像は、利用者によって電子ペン等で手書きストロークにより描画された線等を示す画像である。ストローク画像は、ディスプレイ上の座標を特定する点を示すストロークデータによって表示される。

なお、通信システムは、２つの電子黒板１ａ，１ｂに限らず、３つ以上の電子黒板によって構築されてもよい。以降、電子黒板１ｂ，１ｂの総称を示す場合は、「電子黒板１」と示す。

図１では、電子黒板１ａ，１ｂの一例としてビデオ会議機能が搭載された電子黒板が示されている。なお、映像データの画像は、動画であっても静止画であってもよい。

また、ビデオ会議の開始を要求する要求元としての電子黒板は「開始端末」と表され、要求先である宛先（中継先）としての電子黒板は「宛先端末」と表されている。図１では、電子黒板１ａが開始端末として、電子黒板１ｂが宛先端末として表されている。但し、電子黒板１ｂからビデオ会議の開始を要求する場合は、電子黒板１ｂが開始端末となり、電子黒板１ａが宛先端末となる。なお、各電子黒板１ｂ，１ｂは、複数の事業所間での通信や、同じ事業所内の異なる部屋間での通信だけでなく、同じ部屋内での通信や、屋外と屋内又は屋外と屋外での通信で使われてもよい。

中継装置３は、コンピュータによって構成され、複数の電子黒板１ｂ，１ｂ間で、通話用のコンテンツデータを中継する処理を行なう。

通信管理システム５は、コンピュータによって構成され、電子黒板１ｂ，１ｂからのログイン認証、電子黒板１ｂ、１ｂの通信状況の管理、宛先リストの管理、及び中継装置３の通信状況等を一元的に管理する。また、通信管理システム５は、複数の電子黒板１ｂ，１ｂ間で、共有用のストロークデータを中継する。

画像保存装置７は、コンピュータによって構成され、電子黒板１ａからアップロードされた共有用の資料画像の画像データを保存して、電子黒板１ｂにダウンロードする。また、この逆も実行される。即ち、画像保存装置７は、電子黒板１ｂからアップロードされた画像データを保存して、電子黒板１ａにダウンロードする。

なお、中継装置３、通信管理システム５及び画像保存装置７は、単一のコンピュータによって構築されてもよいし、各部（機能又は手段）を分割して任意に割り当てられた複数のコンピュータによって構築されていてもよい。

また、通信システムにおいて、電子黒板１ａ，１ｂとの間では、通信管理システム５を介して、各種の管理情報を送受信するための管理情報用セッションｓｅｉが確立される。また、電子黒板１ａ，１ｂとの間では、中継装置３を介して、高解像度の画像データ、中解像度の画像データ、低解像度の画像データ、及び音データの４つの各データを送受信するための４つのセッションが確立される。図１では、これら４つのセッションをまとめて、画像・音データ用セッションｓｅｄとして示している。なお、画像・音データ用セッションｓｅｄは、必ずしも４つのセッションである必要はなく、４つのセッション数より少ない又は多いセッション数であってもよい。また、開始端末と宛先端末との間で、中継装置３を介さずに、直接、通信セッションを確立してもよい。

更に、通信システムにおいて、電子黒板１ａ，１ｂとの間では、管理情報用セッションｓｅｉを利用して、ストロークデータの送受信を行うことができる。

ここで、本実施形態で扱われる映像データの映像の解像度について説明する。低解像度の映像データは、例えば、横が１６０画素、縦が１２０画素から成り、ベース画像となる。中解像度の映像データは、横が３２０画素、縦が２４０画素から成る。高解像度の映像データは、例えば、横が６４０画素、縦が４８０画素から成る。このうち、狭帯域経路を経由する場合には、ベース画像となる低解像度の映像データのみから成る低画質の映像データが中継される。帯域が比較的広い場合には、ベース画像となる低解像度の映像データ、及び中解像度の映像データから成る中画質の映像データが中継される。また、帯域が非常に広い場合には、ベース画像となる低解像度の映像データ、中解像度の映像データ、及び高解像度の映像データから成る高画質の映像データが中継される。音データは、映像データに比べてデータ量が少ないため、狭帯域経路であっても中継される。

＜電子黒板の使用イメージ＞
図２は、電子黒板の使用イメージ図である。電子黒板１は、図２に示されているように、電子黒板１は、下部側に複数のキャスタが設けられた脚部１５１、脚部１５１の上部側に設けられた支柱１５２、支柱１５２上部側に設けられた電子黒板１の本体１５３、及び本体１５３の前面に設けられたディスプレイ１８０によって構成されている。本体１５３には、後述のＣＰＵ１０１等が内蔵されている。そして、利用者は、電子ペン１９０を用いて、ディスプレイ１８０に文字等のストローク画像を入力（描画）することができる。なお、ディスプレイ１８０は、表示手段の一例である。表示手段には、電子黒板１に設けられたディスプレイだけでなく、電子黒板１に外付けしたタブレット型端末やＰＣ等に設けられたディスプレイ、及び他装置としての表示専用であるディスプレイも含まれる。

〔ハードウェア構成〕
次に、本実施形態のハードウェア構成を説明する。

＜電子黒板のハードウェア構成＞
図３は、電子黒板のハードウェア構成図である。図３に示されているように、電子黒板１は、ＣＰＵ(Central Processing Unit)１０１、ＲＯＭ(Read Only Memory)１０２、ＲＡＭ(Random Access Memory)１０３、ＳＳＤ(Solid State Drive)１０４、ネットワークＩ／Ｆ１０５、及び、外部機器接続Ｉ／Ｆ(Interface)１０６を備えている。

これらのうち、ＣＰＵ１０１は、電子黒板１全体の動作を制御する。ＲＯＭ１０２は、ＣＰＵ１０１やＩＰＬ(Initial Program Loader)等のＣＰＵ１０１の駆動に用いられるプログラムを記憶する。ＲＡＭ１０３は、ＣＰＵ１０１のワークエリアとして使用される。ＳＳＤ１０４は、電子黒板用のプログラム等の各種データを記憶する。ネットワークコントローラ１０５は、通信ネットワーク１００との通信を制御する。外部機器接続Ｉ／Ｆ１０６は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリ１３０、外付け機器（マイク１４０、スピーカ１５０、カメラ１６０）である。

また、電子黒板１は、キャプチャデバイス１１１、ＧＰＵ１１２、ディスプレイコントローラ１１３、接触センサ１１４、センサコントローラ１１５、電子ペンコントローラ１１６、近距離通信回路１１９、及び近距離通信回路１１９のアンテナ１１９ａ、電源スイッチ１２２及び選択スイッチ類１２３を備えている。

これらのうち、キャプチャデバイス１１１は、外付けのＰＣ(Personal Computer))１７０のディスプレイに対して映像情報を静止画または動画として表示させる。ＧＰＵ(Graphics Processing Unit)１１２は、グラフィクスを専門に扱う半導体チップである。ディスプレイコントローラ１１３は、ＧＰＵ１１２からの出力画像をディスプレイ１８０等へ出力するために画面表示の制御及び管理を行う。接触センサ１１４は、ディスプレイ１８０上に電子ペン１９０やユーザの手Ｈ等が接触したことを検知する。センサコントローラ１１５は、接触センサ１１４の処理を制御する。接触センサ１１４は、赤外線遮断方式による座標の入力及び座標の検出を行う。この座標の入力及び座標の検出する方法は、ディスプレイ１８０の上側両端部に設置された２つ受発光装置が、ディスプレイ１８０に平行して複数の赤外線を放射し、ディスプレイ１８０の周囲に設けられた反射部材によって反射されて、受光素子が放射した光の光路と同一の光路上を戻って来る光を受光する方法である。接触センサ１１４は、物体によって遮断された２つの受発光装置が放射した赤外線のＩＤをセンサコントローラ１１５に出力し、センサコントローラ１１５が、物体の接触位置である座標位置を特定する。電子ペンコントローラ１１６は、電子ペン１９０と通信することで、ディスプレイ１８０へのペン先のタッチやペン尻のタッチの有無を判断する。近距離通信回路１１９は、ＮＦＣ(Near Field Communication)やＢｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。電源スイッチ１２２は、電子黒板１の電源のＯＮ／ＯＦＦを切り換えるためのスイッチである。選択スイッチ類１２３は、例えば、ディスプレイ１８０の表示の明暗や色合い等を調整するためのスイッチ群である。

更に、電子黒板１は、バスライン１１０を備えている。バスライン１１０は、図３に示されているＣＰＵ１０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

なお、接触センサ１１４は、赤外線遮断方式に限らず、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネル、対向する２つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネル、接触物体が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネルなどの種々の検出手段を用いてもよい。また、電子ペンコントローラ１１６が、電子ペン１９０のペン先及びペン尻だけでなく、電子ペン１９０のユーザが握る部分や、その他の電子ペンの部分のタッチの有無を判断するようにしてもよい。

＜通信管理システム、中継装置、及び画像保存装置のハードウェア構成＞
図４は、本実施形態に係る通信管理システム５のハードウェア構成図である。通信管理システム５の一例としてのコンピュータは、ＣＰＵ５０１、ＲＯＭ５０２、ＲＡＭ５０３、ＨＤ(Hard Disk)５０４、ＨＤＤ(Hard Disk Drive)コントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ／Ｆ(Interface)５０８、ネットワークＩ／Ｆ５０９、キーボード５１１、ポインティングデバイス５１２、ＤＶＤ−ＲＷ(Digital Versatile Disk ReWritable)ドライブ５１４、メディアＩ／Ｆ５１６、及び、バスライン５１０を備えている。

これらのうち、ＣＰＵ５０１は、通信管理システム５全体の動作を制御する。ＲＯＭ５０２は、ＩＰＬ等のＣＰＵ５０１の駆動に用いられるプログラムを記憶する。ＲＡＭ５０３は、ＣＰＵ５０１のワークエリアとして使用される。ＨＤ５０４は、通信管理用プログラム等の各種データを記憶する。ＨＤＤコントローラ５０５は、ＣＰＵ５０１の制御にしたがってＨＤ５０４に対する各種データの読み出し又は書き込みを制御する。ディスプレイ５０６は、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示する。外部機器接続Ｉ／Ｆ５０８は、各種の外部機器を接続するためのインターフェースである。ネットワークＩ／Ｆ５０９は、インターネット等の通信ネットワーク４を利用してデータ通信をするためのインターフェースである。キーボード５１１は、文字、数値、各種指示などの入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス１２は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行う入力手段の一種である。ＤＶＤ−ＲＷドライブ５１４は、ＤＶＤ−ＲＷに対するデータの読み出し又は書き込み（記憶）を制御する。なお、ＤＶＤ−ＲＷドライブでなく、ＢＤ−ＲＥ(Blu-ray Disc Rewritable)等のディスクに対するデータの読み出し又は書き込み（記憶）を制御してもよい。メディアＩ／Ｆ５１６は、フラッシュメモリ等の記録メディア５１５に対するデータの読み出し又は書き込み（記憶）を制御する。

また、バスライン５１０は、図４に示されているＣＰＵ５０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

なお、図１に示されている中継装置３及び画像保存装置７のハードウェア構成は、通信管理システム５のハードウェア構成と同様であるため、その説明を省略する。但し、中継装置３の場合は、ＨＤ５０４に中継用プログラムが記憶されている。また、画像保存装置７の場合は、ＨＤ５０４に画像保存用プログラムが記憶されている。

〔通信システムの全体構成〕
続いて、図５を用いて、通信システムの全体構成について説明する。図５は、本発明の実施形態に係る通信システムの全体構成図である。

図５において、電子黒板１ａは拠点Ａ、電子黒板１ｂは拠点Ｂに設置されている。例えば、拠点Ａは日本の東京事業所で、拠点Ｂは日本の大阪事業所である。拠点Ａでは利用者Ａ１，Ａ２が電子黒板１ａを利用し、拠点Ｂでは利用者Ｂ１，Ｂ２が電子黒板１ｂを利用している。

更に、電子黒板１ａ，１ｂ、中継装置３、通信管理システム５、及び画像保存装置７は、インターネット等の通信ネットワーク１００を介してデータの相互通信を行なうことができる。なお、通信ネットワーク１００には、無線通信部分が含まれてもよい。

なお、図５では、電子黒板１ａ，１ｂは、ともに映像通信可能な電子黒板である。

〔通信システムの機能構成〕
次に、図６乃至図１１を用いて、本実施形態の機能構成について説明する。図６は、本実施形態に係る通信システムの各機能ブロック図である。

＜電子黒板１ａの機能構成＞
図６に示されているように、電子黒板１ａは、送受信部１１ａ、受付部１２ａ、映像・音処理部１３ａ、表示制御部１４ａ、判断部１５ａ、画像処理部１７ａ、近距離通信部１８ａ、及び記憶・読出処理部１９ａを有している。これら各部は、図２に示されている各構成要素のいずれかが、ＳＳＤ１０４からＲＡＭ１０３上に展開されたプログラムに従ったＣＰＵ１０１からの命令によって動作することで実現される機能、又は機能する手段である。また、電子黒板１ａは、図２に示されているＲＡＭ１０３、及び図２に示されているフラッシュメモリ１０４によって構築される記憶部１０００ａを有している。

（電子黒板１ａの各機能構成）
次に、電子黒板１ａの各構成要素について説明する。送受信部１１ａは、通信ネットワーク１００を介して他の端末、装置又はシステムと各種データ（または情報）の送受信を行う。また、送受信部１１ａは、開始部としての役割も果たし、電子黒板１ｂ等の他の通信端末と通信を開始する処理を行なう。受付部１２ａは、利用者から電子ペン１９０等による各種入力を受け付ける。

映像・音処理部１３ａは、ビデオ会議機能の主な処理を行う。例えば、映像・音処理部１３ａは、マイク１４０の出力信号及びカメラ１６０の出力信号に共づき、映像データ及び音データのエンコード等のデジタル処理を行う。また、映像・音処理部１３ａは、送受信部１１ａで受信された映像データ及び音データに基づき、映像信号を生成したり音信号を生成したりする。映像・音処理部１３ａ、解像度の異なる映像データを組み合わせる処理を行う。

表示制御部１４ａは、ディスプレイ１８０に映像信号（画像信号）等を出力するための制御を行う。判断部１５ａは、各種判断を行う。

画像処理部１７ａは、電子黒板機能の主な処理を行う。例えば、画像処理部１７ａは、図１５に示されているような各画像レイヤの重畳処理等を行う。各画像レイヤの説明は後述する。画像処理部１７ａは、受付部１２ａによって受け付けられた電子ペン１９０等のストロークに基づいてストローク画像及びストロークデータを作成したり、送受信部１１ａによって受信されたストロークデータに基づいてストローク画像を作成したりする。また、画像処理部１７ａは、送受信部１１ａで受信された資料画像の画像データに基づき、画像信号を生成する。

近距離通信部１８ａは、近距離通信部を有する各端末との間で、近距離無線通信により、データの取得及び提供を行なう。

記憶・読出処理部１９ａは、記憶部１０００ａ又はＵＳＢメモリ１３０等の記録媒体１０１０ａに各種データを記憶したり、記憶部１０００ａ又は記録媒体１０１０ａに記憶された各種データを読み出したりする処理を行う。

更に、記憶部１０００ａには、他の端末との通信を行う際に受信される映像データ及び音データが、受信される度に上書き記憶される。このうち、上書きされる前の映像データによってディスプレイ１８０に画像が表示され、上書きされる前の音データによってスピーカ１５０から音声が出力される。

＜電子黒板１ｂの機能構成＞
図６に示されているように、電子黒板１ｂは、送受信部１１ｂ、受付部１２ｂ、映像・音処理部１３ｂ、表示制御部１４ｂ、判断部１５ｂ、画像処理部１７ｂ、近距離通信部１８ｂ、及び記憶・読出処理部１９ｂを有している。送受信部１１ｂ、受付部１２ｂ、映像・音処理部１３ｂ、表示制御部１４ｂ、判断部１５ｂ、画像処理部１７ｂ、近距離通信部１８ｂ、及び記憶・読出処理部１９ｂは、それぞれ、送受信部１１ａ、受付部１２ａ、映像・音処理部１３ａ、表示制御部１４ａ、判断部１５ａ、画像処理部１７ａ、近距離通信部１８ａ、及び記憶・読出処理部１９ａと同様の機能を有しているため、これらの説明を省略する。

＜中継装置の機能構成＞
図６に示されているように、中継装置３は、転送部を兼ねた送受信部３１、判断部３５、及び記憶・読出処理部３９を有している。これら各部は、図４に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３上に展開された中継用プログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能又は機能する手段である。また、中継装置３は、図４に示されているＲＡＭ５０３、ＨＤ５０４によって構築される記憶部３０００を有している。

（中継装置の各機能構成）
次に、中継装置３の各機能構成について詳細に説明する。図６に示されている中継装置３の送受信部３１は、通信ネットワーク１００を介して他の端末、装置、又はシステムと各種データ（または情報）の送受信を行う。また、送受信部３１は、転送部としての役割も果たし、所定の端末ら送信されて来た映像データ及び音データを、他の端末に転送する。判断部３５は、データの遅延状態等の判断等の各種判断を行なう。

記憶・読出処理部３９は、記憶部３０００に各種データを記憶したり、記憶部３０００に記憶された各種データを読み出したりする処理を行う。

＜通信管理システムの機能構成＞
図６に示されているように、通信管理システム５は、送受信部５１、認証部５２、生成部５３、選択部５４、判断部５５及び記憶・読出処理部５９を有している。これら各部は、図６に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３上に展開された通信管理用プログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能又は機能する手段である。また、通信管理システム５は、図４に示されているＨＤ５０４により構築される記憶部５０００を有している。

（認証管理テーブル）
図７は、認証管理テーブルを示す概念図である。記憶部５０００には、図７に示されているような認証管理テーブルによって構成されている認証管理ＤＢ５００１が構築されている。この認証管理テーブルでは、通信管理システム５によって管理される全ての電子黒板１の各端末ＩＤに対して、各パスワードが関連付けられて管理される。例えば、図７に示されている認証管理テーブルにおいて、電子黒板１ａ（通信端末）の端末ＩＤは「０１ａａ」で、パスワードは「ａａａａ」であることが示されている。なお、パスワードは認証情報の一例であり、認証情報にはアクセストークンも含まれる。

（端末管理テーブル）
図８は、端末管理テーブルを示す概念図である。記憶部５０００には、図８に示されているような端末管理テーブルによって構成されている端末管理ＤＢ５００２が構築されている。この端末管理テーブルでは、各電子黒板１（通信端末）を識別するための端末ＩＤ毎に、各電子黒板１を宛先とした場合の宛先名、各電子黒板１の稼動状態、後述のログイン要求情報が通信管理システム５で受信された受信日時、及び各電子黒板１（通信端末）のＩＰアドレスが関連付けられて管理される。例えば、図８に示されている端末管理テーブルにおいて、端末ＩＤが「０１ａａ」の電子黒板１ａは、端末名が「日本 東京事業所 ＡＡ端末」で、稼動状態が「ＯＮライン（通信可能）」で、通信管理システム５でログイン要求情報が受信された日時が「２０１５年４月１０日の１３時４０分」で、この端末１ａａのＩＰアドレスが「１．２．１．３」であることが示されている。なお、端末ＩＤ、宛先名、及び端末のＩＰアドレスは、各電子黒板１が、通信管理システム５によるサービスの提供を受けるために事前登録する際に記憶される。

（宛先リスト管理テーブル）
図９は、宛先リスト管理テーブルを示す概念図である。記憶部５０００には、図９に示されているような宛先リスト管理テーブルによって構成されている宛先リスト管理ＤＢ５００３が構築されている。この宛先リスト管理テーブルでは、通信の開始を要求する電子黒板１（開始端末）の端末ＩＤに対して、電子黒板１（宛先端末）の候補として登録されている宛先端末の端末ＩＤが全て関連付けられて管理される。例えば、図９に示されている宛先リスト管理テーブルにおいて、端末ＩＤが「０１ａａ」である開始端末（電子黒板１ａ）から通信の開始を要求することができる宛先端末の候補は、端末ＩＤが「０１ｂａ」の電子黒板１ｂ等であることが示されている。この宛先端末の候補は、任意の開始端末から通信管理システム５に対する追加又は削除の要請により、追加又は削除されることで更新される。

なお、宛先リストは、宛先情報の一例であり、宛先情報には、リスト形式になっておらず、端末ＩＤ等の宛先に関する情報が羅列されていてもよい。

（セッション管理テーブル）
図１０は、セッション管理テーブルを示す概念図である。記憶部５０００には、図１０に示されているようなセッション管理テーブルによって構成されているセッション管理ＤＢ５００４が構築されている。このセッション管理テーブルでは、各電子黒板（通信端末）と中継装置３との間で相互通信を行なうためのセッションを識別するための通信セッションＩＤ毎に、使用される中継装置３の中継装置ＩＤ、電子黒板１（開始端末）の端末ＩＤ、電子黒板１（宛先端末）の端末ＩＤ、宛先端末において映像データが受信される際の受信の遅延時間（ｍｓ）、及びこの遅延時間が示されている遅延情報を宛先端末から送られて来て通信管理システム５で受信された受信日時が関連付けられて管理される。例えば、図１０に示されているセッション管理テーブルにおいて、セッションＩＤ「ｓｅ０１」を用いて実行された通信セッションで、中継装置（中継装置ＩＤ「１１１ａ」）は、端末ＩＤが「０１ａａ」の電子黒板と、端末ＩＤが「０１ｄｂ」の電子黒板との間で、映像データ及び音データを中継しており、電子黒板（宛先端末）において「２０１５年４月１０日の１３時４１分」時点における映像データの遅延時間が２００（ｍｓ）であることが示されている。

（中継装置管理テーブル）
図１１は、中継装置管理テーブルを示す概念図である。記憶部５０００には、図１１に示されているような中継装置管理テーブルによって構成されている中継装置管理ＤＢ５００５が構築されている。この中継装置管理テーブルでは、中継装置ＩＤ毎に、各中継装置３の稼動状態、稼動状態が示される状態情報が通信管理システム５で受信された受信日時、中継装置３のＩＰアドレス、及び、中継装置３における最大データ伝送速度（Ｍｂｐｓ）が関連付けられて管理される。例えば、図１１に示されている中継装置管理テーブルにおいて、中継装置ＩＤが「１１１ａ」の中継装置３は、稼動状態が「ＯＮライン」で、通信管理システム５で状態情報が受信された日時が「２０１４年４月１０日の１３時３０分」で、この中継装置３のＩＰアドレスが「１．２．１．２」で、この中継装置３における最大データ伝送速度が１００Ｍｂｐｓであることが示されている。

（通信管理システムの各機能構成）
図６に示されている通信管理システム５の送受信部５１は、通信ネットワーク１００を介して他の端末、装置、又はシステムと各種データ（または情報）の送受信を行う。

認証部５２は、送受信部５１を介して受信されたログイン要求に含まれている端末ＩＤ及びパスワードを検索キーとし、記憶部５０００の認証管理ＤＢ５００１を検索し、認証管理ＤＢ５００１に同一の組の端末ＩＤ及びパスワードが管理されているかを判断することによって認証を行う。生成部５３は、電子黒板１からの通信開始要求（Ｓ６２参照）に基づき、通信セッションを識別するためのセッションＩＤを生成する。選択部５４は、複数の中継装置３から最終的に１つの中継装置３を選択する処理を行う。判断部５４は、各種判断を行なう。記憶・読出処理部５９は、記憶部５０００に各種データを記憶したり、記憶部５０００に記憶された各種データを読み出したりする処理を行う。

＜画像保存装置の機能構成＞
図６に示されているように、画像保存装置７は、送受信部７１、及び記憶・読出処理部７９を有している。これら各部は、図６に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３上に展開された画像保存用プログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能又は機能する手段である。また、画像保存装置７は、図４に示されているＲＡＭ５０３、ＨＤ５０４によって構築される記憶部７０００を有している。

（画像保存装置の各機能構成）
次に、画像保存装置７の各機能構成について詳細に説明する。図６に示されている画像保存装置７の送受信部７１は、通信ネットワーク１００を介して他の端末、装置、又はシステムと各種データ（または情報）の送受信を行う。記憶・読出処理部７９は、記憶部７０００に各種データを記憶したり、記憶部７０００に記憶された各種データを読み出したりする処理を行う。

〔実施形態の処理又は動作〕
次に、図１２乃至図１９を用いて、本実施形態に係る通信システムにおける処理又は動作を説明する。

＜遠隔通信の準備段階の処理＞
まず、図１２及び図１３を用いて、ログイン要求端末としての電子黒板１ａが行なう通信の準備処理を説明する。なお、図１２は、電子黒板間で遠隔通信を開始する準備段階の処理を示したシーケンス図である。図１３は、電子黒板１ａで表示される宛先リストの画面例である。なお、電子黒板１ｂがログイン共有を行う処理も電子黒板１ａの処理と同様であるため、説明を省略する。

まず、電子黒板１ａで電源スイッチ１２２がＯＮされると、受付部１２ａが、電源ＯＮを受け付ける（ステップＳ２２）。

次に、送受信部１１ａは、通信ネットワーク１００を介して通信管理システム５に、ログイン認証の要求を示すログイン要求情報を送信する（ステップＳ２３）。このログイン要求情報には、電子黒板１ａの端末ＩＤ及びパスワードが含まれている。

次に、通信管理システム５の認証部５２は、送受信部５１を介して受信したログイン要求情報に含まれている端末ＩＤ及びパスワードを検索キーとして、認証管理テーブル（図７参照）を検索し、同一の端末ＩＤ及び同一のパスワードが管理されているかを判断することによって端末の認証を行う（ステップＳ２４）。ここでは、記憶・読出処理部５９によって、同一の端末ＩＤ及び同一のパスワードが管理されているものとして、続けて説明する。

認証部５２によって、同一の端末ＩＤ及び同一のパスワードが管理されているものとして、正当な利用権限を有する端末からのログイン要求であると判断された場合には、記憶・読出処理部５９は、端末管理テーブル（図８参照）において、上記ステップＳ２３で受信された端末ＩＤのレコードの稼動状態のフィールド部分を「ＯＮライン（通信可能）」に変更すると共に、受信日時のフィールド部分に上記ステップＳ２３によってログイン要求情報が受信された受信日時を記憶する（ステップＳ２５）。これにより、端末管理テーブルには、端末ＩＤ「０１ａａ」に、稼動状態「オンライン（通信可能）」、受信日時「２０１５．４．１０．１３：４０」及びＩＰアドレス「１．２．１．３」が関連付けて管理されることになる。なお、端末のＩＰアドレスは、事前に登録されているのではなく、上記ステップＳ２３で電子黒板１ａから送信されるようにしてもよい。

次に、記憶・読出処理部５９は、上記ステップＳ２３によって受信された電子黒板１ａの端末ＩＤを含む新しいレコードを、セッション管理テーブル（図１０参照）で追加して管理する（ステップＳ２６）。そして、通信管理システム５の送受信部５１は、上記ステップ２４の処理によって得られた認証結果が示された認証結果情報を、通信ネットワーク１００を介して、上記ログイン要求してきた電子黒板１ａに送信する（ステップＳ２７）。

ログイン要求端末（電子黒板１ａ）の送受信部１１ａが、正当な利用権限を有する端末であると判断された結果が示された認証結果情報を受信すると、送受信部１１ａが通信ネットワーク１００を介して通信管理システム５へ、宛先リストを要求する旨が示された宛先リスト要求情報を送信する（ステップＳ２８）。これにより、通信管理システム５の送受信部５１は、宛先リスト要求情報を受信する。

次に、記憶・読出処理部５９は、ログイン要求端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」を検索キーとして、宛先リスト管理テーブル（図９参照）を検索し、ログイン要求端末（電子黒板１ａ）と通信することができる宛先候補の端末ＩＤを読み出すと共に、この端末ＩＤに対応する宛先名を端末管理テーブル（図８参照）から読み出す（ステップＳ２９）。ここでは、ログイン要求端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」に対応する宛先候補のそれぞれの端末ＩＤと、これらに対応する宛先名が抽出される。

次に、通信管理システム５の送受信部５１は、記憶・読出処理部５９を介して記憶部５０００から宛先リスト枠のデータ及び稼動状態を示すアイコンのデータを読み出す（ステップＳ３０）と共に、この宛先リスト枠及びアイコン並びに上記記憶・読出処理部５９によって読み出された端末ＩＤ及び宛先名を含めた「宛先リスト情報（宛先リスト枠、アイコン、端末ＩＤ、宛先名）」を、ログイン要求端末（電子黒板１ａ）に送信する（ステップＳ３１）。これにより、ログイン要求端末（電子黒板１ａ）では、送受信部１１ａが宛先リスト情報を受信し、記憶・読出処理部１９ａが記憶部１０００ａへ宛先リスト情報を記憶する（ステップＳ３２）。 このように、本実施形態では、各端末で宛先リスト情報を管理するのではなく、通信管理システム５が全ての端末の宛先リスト情報を一元管理している。よって、通信システムに新たな電子黒板が含まれるようになったり、既に含まれている端末に替えて新機種の端末を含めるようになったり、宛先リスト枠の見栄え等を変更することになった場合でも、通信管理システム５側で一括して対応するため、各端末側で宛先リスト情報の変更を行う手間を省くことができる。

また、通信管理システム５の記憶・読出処理部５９は、上述の読み出した宛先候補の端末ＩＤを検索キーとして、端末管理テーブル（図８参照）を検索し、上記端末ＩＤ毎に、対応する稼動状態を読み出すことで、宛先候補としての電子黒板の各稼動状態を取得する（ステップＳ３３）。

次に、送受信部５１は、上記ステップＳ３３で使用された検索キーとしての端末ＩＤと、対応する各宛先端末の稼動状態とが含まれた「端末の状態情報」を、通信ネットワーク１００を介してログイン要求端末（電子黒板１ａ）に送信する（ステップＳ３４）。

次に、ログイン共有端末（電子黒板１ａ）の記憶・読出処理部１９ａは、順次、通信管理システム５から受信した端末の状態情報を記憶部１０００ａに記憶する（ステップＳ３５）。よって、ログイン要求端末（電子黒板１ａ）は、上記各電子黒板の状態情報を受信することで、ログイン要求端末（電子黒板１ａ）と通信することができる宛先候補である電子黒板１ｂ等の現時点のそれぞれの稼動状態を取得することができる。

次に、ログイン要求端末（電子黒板１ａ）の表示制御部１４ａは、記憶部１０００ａに記憶されている宛先リスト情報、及び端末の状態情報に基づいて、宛先候補としての端末の状態を反映させた宛先リストを作成すると共に、表示制御部１４ａが、電子黒板１ａのディスプレイ１８０に対して、図１３に示されている宛先リスト画面１１００を表示する（ステップＳ３６）。この宛先リスト画面１１００には、宛先候補毎に、稼動状態を示すアイコン、端末ＩＤ、及び宛先名が表示されている。図１３では、各端末の稼動状態を示したアイコンが、上から「オフライン」、「オンライン（通信可能）」として表示されている。

一方、通信管理システム５の記憶・読出処理部５９は、ログイン要求端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」に基づいて宛先リスト管理テーブル（図９参照）を検索することにより、ログイン要求端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」を宛先候補として登録している他の端末の端末ＩＤを抽出する（ステップＳ３７）。図９に示されている宛先リスト管理テーブルでは、読み出される他の端末の端末ＩＤは、「０１ｂａ」、「０１ｂａ」、「０１ｄａ」等である。

次に、通信管理システム５の記憶・読出処理部５９は、ログイン要求端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」に基づいて端末管理テーブル（図８参照）を検索し、ログイン要求端末（電子黒板１ａ）の稼動状態を取得する（ステップＳ３８）。

そして、送受信部５１は、上記ステップＳ３７で抽出された端末ＩＤに係る端末のうち、端末管理テーブル（図８参照）で稼動状態が「オンライン」となっている端末に、上記ステップＳ３８で取得されたログイン要求端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」と稼動状態「オンライン」が含まれる「端末の状態情報」を送信する（ステップＳ３９）。なお、送受信部５１が電子黒板１ｂに端末の状態情報を送信する際に、各端末ＩＤに基づいて、端末管理テーブル（図８参照）で管理されている電子黒板のＩＰアドレスを参照する。これにより、ログイン要求端末（電子黒板１ａ）を宛先候補として通信することができる他の宛先端末のそれぞれに、上記ログイン要求端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」、及び稼動状態「オンライン」を伝えることができる。よって、宛先候補（電子黒板１ｂ等）においても、宛先候補の状態を表示させることができる（ステップＳ４０）。

＜遠隔通信の開始処理＞
続いて、図１４を用いて、電子黒板１ａが電子黒板１ｂに対して遠隔通信を開始する処理を説明する。図１４は、遠隔通信を開始する処理を示したシーケンス図である。

まず、要求元端末（電子黒板１ａ）の利用者が図８に示されている宛先候補（端末ＩＤ「０１ｂａ」）を押下して電子黒板１ｂを選択すると、図６に示されている受付部１２ａは、宛先端末（電子黒板１ｂ）との通話を開始する要求を受け付ける（ステップＳ６１）。そして、要求元端末（電子黒板１ａ）の送受信部１１ａは、通信管理システム５に対して、通話を開始したい旨を示す開始要求情報を送信する（ステップＳ６２）。この開始要求情報には、要求元端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」、及び宛先端末（電子黒板１ｂ）の端末ＩＤ「０１ｂａ」が含まれている。これにより、通信管理システム５の送受信部５１は、上記開始要求情報を受信すると共に、送信元である要求元端末（電子黒板１ａ）のＩＰアドレスを受信する。

そして、記憶・読出処理部５９は、開始要求情報に含まれる要求元端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」及び宛先端末（電子黒板１ｂ）の端末ＩＤ「０１ｂａ」に基づき、端末管理テーブル（図８参照）において、上記端末ＩＤ「０１ａａ」、及び端末ＩＤ「０１ｂａ」がそれぞれ含まれるレコードの稼動状態のフィールド部分を、ともに「通話中」に変更する（ステップＳ６３）。なお、この状態では、要求元端末（電子黒板１ａ）、及び宛先端末（電子黒板１ｂ）は、ビデオ会議を開始していないが、通話中状態となり、第３の電子黒板端末が要求元端末（電子黒板１ａ）又は宛先端末（電子黒板１ｂ）と通話しようとすると、いわゆる通話中状態を示す旨の通知音又は表示が出力される。

次に、実際に利用される中継装置３を選択するためのセッションを実行する処理を説明する。まず、通信管理システム５の生成部５３は、中継装置３を選択するためのセッションの実行に用いられるセッションＩＤを生成する（ステップＳ６４）。ここでは、セッションＩＤ「ｓｅ０１」が生成された場合について説明する。

そして、記憶・読出処理部５９は、セッション管理テーブル（図１０参照）に、上記ステップＳ６４で生成されたセッションＩＤ「ｓｅ０１」、要求元端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」、及び宛先端末（電子黒板１ｂ）の端末ＩＤ「０１ｂａ」を関連付けて記憶して管理する（ステップＳ６５）。

次に、図８に示されている通信管理システム５の選択部５４は、中継装置管理テーブル（図１１参照）及び端末管理テーブル（図８参照）に基づいて、要求元端末（電子黒板１ａ）及び宛先端末（電子黒板１ｂ）の２拠点間の通話を中継するための中継装置３の選択を行う（ステップＳ６６）。具体的には、中継装置管理テーブル（図１１参照）において稼動状態が「ＯＮライン」の中継装置に係る中継装置ＩＤのうち、端末管理テーブル（図８参照）において要求元端末（電子黒板１ａ）のＩＰアドレスに近いＩＰアドレスの中継装置３に係る中継装置ＩＤが選択される。ここでは、中継装置３０ａ（中継装置ＩＤ「１１１ａ」）が選択された場合について、以降、続けて説明する。

以上のステップＳ６６における中継装置の選択の処理が終了すると、通信管理システム５の送受信部５１は、要求元端末（電子黒板１ａ）に対して、中継装置選択情報を送信する（ステップＳ６７−１）。この中継装置選択情報には、上記ステップＳ６６によって選択された中継装置３のＩＰアドレス、及び上記ステップＳ６４によって生成されたセッションＩＤ「ｓｅ０１」が含まれている。これにより、要求元端末（電子黒板１ａ）は、中継装置選択情報の送信元である通信管理システム５のＩＰアドレスを取得することができる。

更に、通信管理システム５の送受信部５１は、宛先端末（電子黒板１ｂ）に対して、中継装置選択情報を送信する（ステップＳ６７−２）。この中継装置選択情報には、上記ステップＳ６６によって選択された中継装置３のＩＰアドレス、要求元端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」、及び上記ステップＳ６４によって生成されたセッションＩＤ「ｓｅ０１」が含まれている。これにより、宛先端末（電子黒板１ｂ）は、セッションＩＤ「ｓｅ０１」におけるセッションの実行において、中継装置選択情報の送信元である通信管理システム５のＩＰアドレスを取得することができる。

次に、上記ステップＳ６７−１の処理に対して、要求元端末（電子黒板１ａ）の送受信部１１は、通信管理システム５に対して、上記ステップＳ６７−１の処理により中継装置選択情報の受信が完了した旨を示す受信完了情報を送信する（ステップＳ６８−１）。この受信完了情報には、上記ステップＳ６７−１の処理で送受信されたセッションＩＤが含まれている。これにより、通信管理システム５０は、特定のセッションＩＤ「ｓｅ０１」で実行されている中継装置選択情報の伝達が完了した旨を取得する。

更に、上記ステップＳ６７−２の処理に対して、宛先端末（電子黒板１ｂ）は、同様に通信管理システム５へ、上記ステップＳ６７−２の処理により中継装置選択情報の受信が完了した旨を示す受信完了情報を送信する（ステップＳ６８−２）。この場合も、通信管理システム５は、特定のセッションＩＤ「ｓｅ０１」で実行されている中継装置選択情報の伝達が完了した旨を取得する。

以上により、電子黒板１ａ，１ｂは、上記ステップＳ６６で選択された中継装置３を介して、映像データ及び音データを送受信することで、ビデオ会議を行うことができる。

＜各画像レイア＞
続いて、図１５を用いて、電子黒板１ａに表示される各画像レイアについて説明する。図１５に示されているように、画像処理部１７ａは、５つの画像レイアを重畳する画像を作成する。図１５は、各画像レイヤの構成図である。各画像レイヤは、重なっても利用者が見える順に、左から、ＵＩ画像（Ａ）、非共有ストローク画像（Ｂ１）、共有ストローク画像（Ｂ２）、資料画像（Ｃ）、及び背景画像（Ｄ）の各レイアの構成となっている。これらのうち、ＵＩ画像（Ａ）、非共有ストローク画像（Ｂ１）、及び背景画像（Ｄ）は、電子黒板１ａだけで表示される画像のレイアであり、共有ストローク画像（Ｂ２）及び資料画像（Ｃ）は、相手側の電子黒板１ｂにも表示されて共有される画像のレイアである。なお、この画像のレイヤとはン別に、ピクチャー・イン・ピクチャーの技術により、相手側の拠点の映像が表示される。以下に、各画像のレイヤについて説明する。

ＵＩ画像（Ａ）のレイヤは、利用者が電子ペン４又は手Ｈで所定の入力又は選択を行うことができるように、アイコン等を表示して入力又は選択等のＵＩ操作を受け付けるレイヤである。ここでは、一例として、共有モードを選択する場合に押下される「共有」アイコンａ１１、非共有モードを選択する場合に押下される「非共有」アイコンａ１２が表示されている。また、ＵＩ画面（Ａ）には、電子ペン４により描画される線の色や幅等が設定されるアイコン等も表示される。

非共有ストローク画像（Ｂ１）のレイヤは、利用者が電子ペン４又は手Ｈで描画したストローク画像を相手側の電子黒板１ｂとは共有しない場合（非共有モードの場合）のレイヤである。この場合、電子黒板１ａは、通信ネットワーク１００を介して相手側の電子黒板１ｂにストロークデータを送らずに、自端末である電子黒板１ａだけでストローク画像を表示する。ここでは、一例として、“check”を示すストローク画像ｂ１が表示されている。

共有ストローク画像（Ｂ２）のレイヤは、利用者が電子ペン４又は手Ｈで描画したストローク画像を相手側の電子黒板１ｂと共有する場合（共有モードの場合）のレイヤである。この場合、電子黒板１ａは、通信ネットワーク１００を介して相手側の電子黒板１ｂにストロークデータを送ることで、自端末である電子黒板１ａだけでなく他端末である電子黒板１ｂでも同じストローク画像を表示させることができる。ここでは、一例として、矢印を示すストローク画像ｂ２が表示されている。

資料画像（Ｃ）のレイヤは、電子黒板１ａの外付けのＰＣ等からの出力画像である資料画像を表示するためのレイヤである。ここでは、円グラフを示す資料画像ｃ１が表示されている。

背景画像（Ｄ）のレイヤは、各電子黒板１特有の背景画像を表示するためのレイヤである。背景画像は、ストローク画像や資料画像と異なり基本的に変更されない画像であり、ディスプレイ１８０上に表示される画像の全体像の見栄えを良くするため等に使われる画像である。ここでは、一例として、常にディスプレイ１８０上に表示される文字である「理光電子黒板」を含むグリッド画像等の背景画像ｄ１が表示されている。

なお、電子黒板１ｂについても同様に、５つの画像のレイヤが表示される。この場合も、ＵＩ画像（Ａ）、非共有ストローク画像（Ｂ１）、及び背景画像（Ｄ）は、電子黒板１ｂだけで表示される画像のレイアであり、共有ストローク画像（Ｂ２）及び資料画像（Ｃ）は、相手側の電子黒板１ａにも表示されて共有される画像のレイアである。

＜資料画像及びストローク画像の通信処理＞
続いて、図１６乃至図２０を用いて、電子黒板１に表示されている資料画像及び入力されたストローク画像の通信処理について説明する。

（共有モード）
まずは、図１６及び図１７、並びに図１９及び図２０を用いて、共有モードの処理について説明する。

図１６及び図１７は、資料画像の画像データ及びストローク画像のストロークデータを共有する処理を示したシーケンス図である。ここでは、電子黒板１ａ，１ｂで資料画像の画像データ及びストローク画像のストロークデータを共有する場合であって、電子黒板１ａで表示された資料画像及び入力されたストローク画像が、電子黒板１ｂでも表示される場合について説明する。図１９のうち、（Ａ）は電子黒板１ａの画面例、（Ｂ）は電子黒板１ｂの画面例、（Ｃ）は電子黒板１ａの画面例、（Ｄ）は電子黒板１ｂの画面例である。なお、図２０の（Ａ），（Ｂ），（Ｃ），（Ｄ）も同様である。

まず、拠点Ａの電子黒板１ａでは、表示制御部１４ａによって図１９（Ａ）に示されている画面がディスプレイ１８０上に表示されている。ここでは、ストローク画像、拠点Ｂの映像ｖ２、資料画像ｃ１を共有する場合に押下される「共有」ボタンａ１１が表示されている。更に、ディスプレイ１８０上には、ストローク画像を共有しない場合に押下される「非共有」ボタンａ１１２が表示されている。この状態で、電子黒板１ａの利用者Ａ１が「共有」ボタンａ１１を押下すると、受付部１２ａが利用者ａから資料画像の共有処理を受け付ける（ステップＳ１０１）。次に、送受信部１１ａは、通信管理システム５に対して、資料画像の画像データの保存位置を示すＵＲＬ(Uniform Resource Locator)を要求する旨を示す要求情報を送信する（ステップＳ１０２）。これにより、通信管理システム５の送受信部５１は、要求情報を受信する。なお、ＵＲＬは保存位置情報の一例であり、保存位置情報にはＵＲＩ(Uniform Resource Identifier)も含まれる。

次に、通信管理システム５の生成部５３は、資料画像の画像データの保存位置を示すＵＲＬを生成する（Ｓ１０３）。そして、送受信部５１は、電子黒板１ａに対して、生成部５３によって生成された画像データのＵＲＬを送信する（ステップＳ１０４）。これにより、電子黒板１ａの送受信部１１ａは、画像データのＵＲＬを受信する。

次に、電子黒板１ａの送受信部１１ａは、通信管理システム５に対して、資料画像の画像データのアップロードの開始通知を送信する（ステップＳ１０５）。これにより、通信管理システム５の送受信部５１は、開始通知を受信する。

次に、送受信部５１は、遠隔会議中の相手側の電子黒板１ｂに対して、開始通知を転送する（ステップＳ１０６）。これにより、電子黒板１ｂの送受信部１１ｂは、開始通知を受信する。電子黒板１ｂの表示制御部１４ｄは、電子黒板１ｂのディスプレイ１８０上に、図１９（Ｂ）に示されているような画面を表示させる（ステップＳ１０７）。ここでは、もともと相手側の拠点Ａの映像ｖ１、共有モードを選択する場合に押下される「共有」ボタンａ２１が、及び非共有モードを選択する場合に押下される「非共有」ボタンａ２２が表示されている。そして、ステップＳ１０６の開始通知により、資料画像ｃ１の画像データのダウンロードの時間経過を視覚的に示す砂時計のアイコンｗ２が表示される。

また、時間経過は、静止画の砂時計によって示したり、砂の動きがある動画の砂時計によって示したりすることができる。また、砂時計のアイコンｗ２は、画像データをダウンロードする予定である旨を示す予定情報の一例である。予定情報の他の例としては、砂時計以外のアイコン（例えば、時計のアイコン）であっても良いし、アイコンではなく文字（及び／又は「記号」）であってもよし、アイコンと文字（及び／又は「記号」）の組み合わせであってもよい。また、予定情報は、音による通知であってもよい。この場合、表示制御部１４ａではなく、映像・音処理部１３ａによってスピーカ１５０から音の出力が行われる。

なお、電子黒板１ａは、上記ステップＳ１０５の処理後に上記ステップＳ１０２の処理を行ってもよい。また、通信管理システム５は、上記ステップＳ１０５により画像データのアップロード開始通知を受信した後に、上記ステップＳ１０４により画像データのＵＲＬを送信してもよい。

続いて、電子黒板１ａの送受信部１１ａは、ステップＳ１０４で受信した画像保存装置７に係るＵＲＬに対して、資料画像ｃ１の画像データのアップロードを行う（ステップＳ１０８）。これにより、画像保存装置７の送受信部７１は、画像データを受信する。そして、画像保存装置７の記憶・読出処理部７９は、記憶部７０００におけるＵＲＬに対して、画像データを記憶する（ステップＳ１０９）。

続いて、拠点Ａでは、利用者Ａ１が、電子ペン１９０や手Ｈを電子黒板１ａのディスプレイ１８０上に接触して移動させることで、受付部１２ａが、移動のストローク（軌跡）の入力を受け付ける（ステップＳ１１０）。そして、画像処理部１７ａがストロークに基づいて、２次元のディスプレイ１８０上にストローク画像を表示させるためのストロークデータ（例えば、座標データ（ｘ，ｙ））を作成すると共に、表示制御部１４ａが電子黒板１ａのディスプレイ１８０上にストローク画像を表示させる（ステップＳ１１１）。これにより、図１９（Ｃ）に示されているように、矢印を示すストローク画像ｂ２が表示される。

次に、送受信部１１ａは、通信管理システム５に対して、ステップＳ１１１で作成されたストローク画像を再生するためのストロークデータを送信する（ステップＳ１１２）。これにより、通信管理システム５の送受信部５１は、ストローク画像のストロークデータを受信する。そして、通信管理システム５では、記憶・読出処理部５９が、ストロークデータを記憶する（ステップＳ１１３）。

次に、送受信部５１は、相手側の電子黒板１ｂに対して、ストロークデータを転送する（ステップＳ１１４）。これにより、電子黒板１ｂの送受信部１１ｂは、ストロークデータを受信する。そして、電子黒板１ｂでは、画像処理部１７ｂがストロークデータに基づいてストローク画像を作成し、表示制御部１４ｂが電子黒板１ｂのディスプレイ１８０上にストローク画像を表示させる（ステップＳ１１５）。これにより、図１９（Ｄ）に示されているように、相手側の電子黒板１ａと同じストローク画像ｂ２が表示される。

続いて、図１７に示されているように、画像保存装置７の送受信部７１は、電子黒板１ａに対して、資料画像の画像データのアップロードが完了した旨を示す完了通知を送信する（ステップＳ１２１）。これにより、電子黒板１ａの送受信部１１ａが、完了通知を受信する。

次に、電子黒板１ａの送受信部１１ａが、通信管理システム５に対して、資料画像の画像データのアップロードが完了した旨を示す完了通知を送信する（ステップＳ１２２）。この完了通知には、ステップＳ１０４で受信された画像データのＵＲＬが含まれている。これにより、通信管理システム５の送受信部５１は、完了通知を受信する。そして、送受信部５１は、相手側の電子黒板１ｂに対して、ＵＲＬを含む完了通知を転送する（ステップＳ１２３）。これにより、電子黒板１ｂの送受信部１１ｂは、完了通知を受信する。

次に、電子黒板１ｂの送受信部１１ｂは、ステップＳ１２３で受信した画像保存装置７に係るＵＲＬに対して、資料画像の画像データのダウンロードを要求する旨を示す要求情報を送信する（ステップＳ１２４）。これにより、画像保存装置７の送受信部７１は、要求情報を受信する。

次に、画像保存装置７では、記憶・読出処理部７９がＵＲＬに基づいて、記憶部７０００から要求対象である資料画像の画像データを読み出す（ステップＳ１２５）。そして、送受信部７１が、要求元である電子黒板１ｂに対して、要求対象である資料画像の画像データを送信する（ステップＳ１２６）。これにより、電子黒板１ｂの送受信部１１ｂは、画像データのダウンロード（受信）を行う。そして、電子黒板１ｂ側では、表示制御部１４ｂが、図１９（Ｄ）に示されている画面上に、図２０（Ａ）(図１９（Ｃ）と同じ)に示されている資料画像ｃ１と同じ資料画像を表示させると共に、それまで表示していた砂時計のアイコンｗ２を非表示にすることで、図２０（Ｂ）のような画像が表示される。

（非共有モード）
次に、図１８乃至図２０を用いて、非共有モードの処理について説明する。図１８は、非表示ストローク画像のレイアでの描画の処理を示したフローチャートである。

まずは、拠点Ａで、共有モードの実行中に、図２０（Ａ）に示されたディスプレイ１８０上の画像の状態で、利用者Ａ１が、拠点Ａだけで利用者Ａ２と議論するために、「非共有」ボタンａ１２を押下すると、受付部１２ａが非共有モードから非共有モードへの切り替えを受け付ける（ステップＳ１４１）。そして、画像処理部１７ａは、図１５に示されている非共有ストローク画像（Ｂ１）のレイヤを作成する（ステップＳ１４２）。

次に、利用者Ａ１が、例えば、ストローク画像ｂ２で示された資料画像ｃ１のチェックを拠点Ａだけで行うような場合、利用者Ａ１が電子ペン１９０や手Ｈを電子黒板１ａのディスプレイ１８０上に接触して移動させることで、受付部１２ａが、移動のストローク（軌跡）の入力を受け付ける（ステップＳ１４３）。ここでは、受付部１２ａは、“check”を示すストローク画像ｂ２を表示させるためのストロークの入力を受け付ける。そして、画像処理部１７ａが、ストロークに基づいて、ディスプレイ１８０上にストローク画像を表示させるためのストロークデータ（例えば、座標データ（ｘ，ｙ））を作成すると共に、表示制御部１４ａが電子黒板１ａのディスプレイ１８０上にストローク画像を表示させる（ステップＳ１４４）。これにより、図２０（Ｃ）に示されているように、“check”を示すストローク画像ｂ１が表示される。但し、非共有モードの場合は、電子黒板１ａは、上記ステップＳ１１２の処理のように、ストロークデータを送信しない。これにより、ストローク画像ｂ１は、電子黒板１ｂでは共有されないことになる。

なお、共有モード及び非共有モードは、電子黒板１ｂからも選択することができる。電子黒板１ｂで「共有」アイコンａ２１が押下されると、電子黒板１ｂから上記ステップＳ１０１がスタートした場合の処理が行われる。また、電子黒板１ｂで「非共有」アイコンａ２２が押下されると、電子黒板１ｂのみで上記ステップＳ１４１０〜Ｓ１４４の処理が行われる。

〔実施形態の主な効果〕
以上説明したように、「共有モード」の場合、電子黒板１ａが、資料画像の画像データを送信した後に、ストローク画像のストロークデータを送信しても、ストロークデータが画像データよりも非常にデータ量が小さいために、相手側の電子黒板１ｂにはストロークデータが先に届いてしまう。これに対して、本実施形態では、通信管理システム５が、画像データをアップロードする電子黒板１ａからアップロードの開始通知を受信し、電子黒板１ｂに対して開始通知を転送（送信）する（Ｓ１０６参照）。そして、電子黒板１ｂでは、図１９（Ｂ）に示されているように、資料画像の画像データのダウンロードを行う旨を視覚的に示す砂時計のアイコンｗ２を表示する出力が行われる（Ｓ１０７参照）。これにより、拠点Ｂの電子黒板１ｂの利用者Ｂ１，Ｂ２は、ストローク画像の表示が進んでいる最中に、後ほど送られて来る資料等の資料画像の存在に気づくため、拠点Ａの電子黒板１ａの利用者Ａ１との円滑なコミュニケーションを行うことができるという効果を奏する。

また、「非共有モード」の場合、電子黒板１ａは、相手側の拠点の電子黒板１ｂにストローク画像ｂ１を示すストロークデータを送信しないで、自端末としての電子黒板１ａのみでストローク画像ｂ１を表示する。これにより、拠点Ｂには知られたくないメモ等を拠点Ａの電子黒板１ａのみで表示するため、拠点Ｂと会議中であっても、拠点Ｂには知られずに、拠点Ａの利用者Ａ１，Ａ２間の認識を共有することができる。また、拠点Ａで利用者Ａ１が一人の場合であっても、拠点Ｂには知られたくないが自分が忘れないようにメモ等を描き残すことができる。

〔実施形態の補足〕
上記実施形態では、図１９及び図２０で示された「共有」アイコンａ１１，ａ２１は、共有モード選択情報の一例である。共有モード選択情報の他の例として「⇔」などアイコンや、「共有します」等の文字などが挙げられる。また、「非共有」アイコンａ１２，ａ２２は、非共有モード選択情報の一例である。非共有モード選択情報の他の例として「→×」などアイコンや、「共有しません」等の文字などが挙げられる。

また、上記実施形態では、通信端末の一例として、電子黒板であるオフィス機器について説明したが、これに限るものではない。通信端末の他の例として、ＰＣ、スマートフォン、スマートウォッチ、カーナビゲーション端末等が含まれる。更に、通信端末には、医療機器が含まれる。医療機器の場合には、資料画像が患者の画像となる。

また、上記実施形態では、通信システムによってビデオ会議をする場合について説明したが、これに限るものではなく、打ち合わせ、家族間や友人間等の一般的な会話、遠隔診断、又は、一方向での情報の提示に使用されても構わない。

１ａ 電子黒板（通信端末の一例）
１ｂ 電子黒板（他の通信端末の一例）
３ 中継装置
５ 通信管理システム
７ 画像保存装置
１１ａ 送受信部（送信手段の一例、受信手段の一例）
１１ｂ 送受信部（送信手段の一例、受信手段の一例）
１４ａ 表示制御部（表示制御手段の一例）
１４ｂ 表示制御部（表示制御手段の一例）
１７ａ 画像処理部（画像処理手段の一例）
１７ｂ 画像処理部（画像処理手段の一例）
５１ 送受信部
５２ 認証部
５３ 生成部
５４ 選択部
５５ 判断部
１８０ ディスプレイ（表示手段の一例）
５００１ 認証管理ＤＢ
５００２ 端末管理ＤＢ
５００３ 宛先リスト管理ＤＢ
５００４ セッション管理ＤＢ
５００５ 中継装置管理ＤＢ

特開２０１１−２５４４５３号公報 特開２０１５−７０５４３号公報

Claims (7)

1. 通信ネットワークを介して他の通信端末と通信する通信端末であって、
   前記他の通信端末に自端末で描画したストローク画像を再生するためのストロークデータを送信することで画像の共有を行う共有モードを受け付ける共有モード選択情報と、前記他の通信端末に前記ストロークデータを送信しないで画像の共有を行わない非共有モードを受け付ける非共有モード選択情報とを表示する表示制御手段を有することを特徴とする通信端末。
2. 前記共有モードの実行中に、前記表示制御手段は前記他の通信端末と共有する資料画像を表示することを特徴とする請求項１に記載の通信端末。
3. 請求項１に記載の通信端末であって、
   前記共有モード選択情報と前記非共有モード選択情報の選択を受け付ける受付手段を有することを特徴とする通信端末。
4. 前記受付手段による前記非共有モード選択情報の選択の受け付けは、前記共有モードの実行中に行うことができることを特徴とする請求項２に記載の通信端末。
5. 請求項１乃至４のいずれか一項に記載の通信端末と、
   前記他の通信端末と、
   を有することを特徴とする通信システム。
6. 通信ネットワークを介して他の通信端末と通信する通信端末が実行する表示方法であって、
   前記他の通信端末に自端末で描画したストローク画像を再生するためのストロークデータを送信することで画像の共有を行う共有モードを受け付ける共有モード選択情報と、前記他の通信端末に前記ストロークデータを送信しないで画像の共有を行わない非共有モードを受け付ける非共有モード選択情報とを表示する表示制御ステップを実行することを特徴とする表示方法。
7. コンピュータに、請求項６に記載の方法を実行させることを特徴とするプログラム。

Images