JP6255788B2 - 通信端末、通信システムおよび通信方法並びにプログラム - Google Patents

通信端末、通信システムおよび通信方法並びにプログラム Download PDF

Info

Publication number
JP6255788B2
JP6255788B2 JP2013165191A JP2013165191A JP6255788B2 JP 6255788 B2 JP6255788 B2 JP 6255788B2 JP 2013165191 A JP2013165191 A JP 2013165191A JP 2013165191 A JP2013165191 A JP 2013165191A JP 6255788 B2 JP6255788 B2 JP 6255788B2
Authority
JP
Japan
Prior art keywords
communication terminal
image data
quality
display
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013165191A
Other languages
English (en)
Other versions
JP2015035696A (ja
Inventor
翔 永峯
翔 永峯
拓也 今井
拓也 今井
健一郎 森田
健一郎 森田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2013165191A priority Critical patent/JP6255788B2/ja
Publication of JP2015035696A publication Critical patent/JP2015035696A/ja
Application granted granted Critical
Publication of JP6255788B2 publication Critical patent/JP6255788B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Description

本発明は、通信システムに関する。
近年、インターネット回線の大容量化に伴い、ビジネスの場におけるコミュニケーションツールの一つとして、通信相手の表情を見ながらコミュニケーションが取れる、ビデオ会議端末やWeb会議アプリを利用した会議が選択される機会が増えてきた。
ビデオ会議端末やWeb会議アプリを利用する際には、端末間で、ワープロソフトや表計算ソフトに代表される、文字情報を主とするコンテンツ、プレゼンテーションソフトや製図ソフト、写真に代表される、図面情報を主とするコンテンツを共有することも多い。
しかし、主にネットワーク側の要因によって、コンテンツが送信された時間から各端末間におけるデータの到達完了までの時間は大きな差異があるために各端末間でコンテンツの同期を取ることは難しい。このため、ビデオ会議やWeb会議では音声での問いかけによってコンテンツが同期しているか否かの確認を取りながらコンテンツの操作を行うことは珍しくない。
各端末間においてコンテンツの同期を取りながら操作することができるように、コンテンツを持つサーバが各端末間のコンテンツの同期を取りながらコンテンツの操作を反映する技術が知られている（例えば、特許文献１参照）。
しかし、各端末間でコンテンツの同期を取りながらコンテンツの操作を反映する技術では、送信側と受信側との間で、受信完了および同期完了したコンテンツの品質が同等になっているか否かの確認をすることができない。
仮に、送信側が受信側からコンテンツの受信完了の応答を受け取るとともに、コンテンツの操作の同期が取れたことを確認できたとしても、送信側と受信側との間で、コンテンツの品質が同等になっているか否かの確認をすることができない。
つまり、ビデオ会議やWeb会議において、送信側と受信側において、各端末間で共有するとともに、操作を同期したコンテンツの品質レベルを確認することが容易ではない。
そこで、本発明は、各端末間で共有し、操作を同期したコンテンツの品質レベルを確認することを目的とする。
開示の一実施例の通信端末は、
ネットワークを介して複数の通信端末が接続され、他の通信端末へ該他の通信端末との間で共有する画像データを送信する通信端末であって、
前記通信端末が送信する第１の画像データと該第１の画像データが前記他の通信端末により受信されることにより得られる第２の画像データとを比較する際に取得する属性と、該属性に基づいて前記第１の画像データと前記第２の画像データとの間の品質の差を判断する際に使用する基準を示す情報とを格納する記憶部と、
前記記憶部に格納した属性に基づいて、前記他の通信端末へ送信した第１の画像データの第１の属性を取得し、該第１の属性と前記他の通信端末により前記第２の画像データについて取得された第２の属性とに基づいて、前記第１の画像データと前記第２の画像データとの間の品質の差を前記基準を示す情報により判断する制御部と
を備え、前記制御部は、前記第１の画像データと前記第２の画像データとの間の品質の差が所定の閾値以上である場合、前記他の通信端末へ品質の同期がとれていないことをフィードバックする。
開示の実施例によれば、各端末間で共有し、操作を同期したコンテンツの品質レベルを確認することができる。
遠隔通信システムの構成図の一例である。 通信端末のハードウェア構成図の一例である。 遠隔通信管理システムのハードウェア構成図の一例である。 遠隔通信システムを構成する各端末、装置及びシステムの機能ブロック図の一例である。 外部入力装置の機能ブロック図の一例である。 資料管理テーブルの一例を示す図である。 変更品質管理テーブルの一例を示す図である。 中継装置管理テーブルの一例を示す図である。 端末認証管理テーブルの一例を示す図である。 端末管理テーブルの一例を示す図である。 宛先リスト管理テーブルの一例を示す図である。 セッション管理テーブルの一例を示す図である。 アドレス優先度管理テーブルの一例を示す図である。 伝送速度優先度管理テーブルの一例を示す図である。 品質管理テーブルの一例を示す図である。 配置情報管理表の一例を示す図である。 ディスプレイの分割例と分割により生じる領域を示す図の一例である。 配置情報と、各領域１〜４に割り当てられる映像データ又は表示データの関係の一例を示す図である。 選択される配置情報の状態遷移図の一例である。 中継装置から送信されるイベントと、イベントに応じて配置情報選択部が設定する表示データ及び表示データ制御部が決定する表示制御フラグの対応の一例を示す図である。 表示装置メニューの遷移例を説明する図の一例である。 品質同期判断基準の一例を示す図である。 文字情報を主体とするコンテンツと図面情報を主体とするコンテンツの一例を示す図である。 OCR結果の一例を示す図である。 色分布と周波数成分とエッジ情報の一例を示す図である。 通信端末同士がセッションを確立する処理を示すシーケンスチャートの一例を示す図である。 通信端末間で画像データ及び音声データを送受信する処理を示したシーケンス図の一例である。 外部入力装置から通信端末に表示データを送信する手順のフローチャート図の一例である。 通信端末１で撮像されている映像データ、通信端末２で撮像されている映像データ、及び、通信端末１，２に接続された外部入力装置１，２から送信される表示データの送信のシーケンス図の一例である。 図２９のＳ３又はＳ４において外部入力装置が表示データの送信を開始する際の制御手順を示すシーケンス図の一例である。 通信端末が表示データを受信するまでのディスプレイの画面の状態を模式的に示す図の一例である。 外部入力装置に表示されるメニューの一例を示す図である。 外部入力装置が表示データの送信を開始する際の制御手順を示すシーケンス図の一例である。 通信端末が「他からの配信開始イベント」を受信した場合に配信停止を要求するか否かを判定する手順を示すフローチャート図の一例である。 中継装置の判定手順を示すフローチャート図の一例である。 図２９の処理が終了した状態で、外部入力装置が表示データの送信を停止する手順を説明するシーケンス図の一例である。 通信端末同士がセッションを切断する処理を示すフローチャート図の一例である。 表示データの品質判断処理の一実施例を示す図である。 コンテンツの分類の一例を示す図である。 表示データの品質判断処理の一実施例（その１）を示す図である。 表示データの品質判断処理の一実施例（その２）を示す図である。 表示データの品質判断処理の一実施例（その３）を示す図である。 表示データの品質判断処理の一実施例（その４）を示す図である。 表示データの品質判断処理の一実施例（その５）を示す図である。 表示データの品質判断処理の一実施例（その６）を示す図である。 本実施例にかかる遠隔通信システムの動作を示すシーケンスチャートである。 フィードバックの表示の一例を示す。 本実施例にかかる遠隔通信システムの効果を示す。
次に、本発明を実施するための形態を、以下の実施例に基づき図面を参照しつつ説明する。以下で説明する実施例は一例に過ぎず、本発明が適用される実施の形態は、以下の実施例に限られない。
なお、実施例を説明するための全図において、同一機能を有するものは同一符号を用い、繰り返しの説明は省略する。
＜実施例＞
＜遠隔通信システム＞
本実施形態の遠隔通信システム１の概略的な特徴は、以下のようになる。
（１）異なる２つの拠点にある外部入力装置Ａ、Ｂはそれぞれ表示装置に資料の表示データの共有を開始するためのメニューを表示し、それぞれが表示データを配信できる。一方、例えば、外部入力装置Ａと接続された通信端末αが、中継装置経由で外部入力装置Ｂから表示データの配信が開始されるというイベント通知を受信する。外部入力装置Ａはそれまで送信していた表示データの送信を停止し、表示データの共有を開始するためのメニューを再度表示する。また、通信端末αは、外部入力装置Ｂから受信した表示データを表示する。
したがって、通信端末αが表示する共有の表示データを１つに制限することができ、ＴＶ会議の参加者が複数の表示データの中から選択する必要がない。
（２）また、外部入力装置Ａ、Ｂはイベント通知に応じて表示データの共有状態を示すメッセージを表示する。これにより、参加者は、通信端末α、βが表示している表示データの共有態様を把握することができる。
（３）また、通信端末α、βは、中継装置からのイベント通知に応じて、映像データや表示データを１つの画面に強調して（拡大して）配置するので、参加者が表示データや映像データの表示を切り替えることなく、着目すべき表示データを提供できる。
（４）また、通信端末α、βは、映像データや表示データを共有、同期する際に、送信側が送信した映像データや表示データと受信側が受信した映像データや表示データとを比較し、その差異を一定の基準で判断する。これにより、送信側と受信側の各ユーザは、共有している映像データや表示データの端末間での品質レベルの確認を容易にできる。
＜遠隔通信システムの構成＞
図１は、遠隔通信システムの構成図の一例である。遠隔通信システムは、一例として地域Ａと地域Ｂに分かれて、各地域に通信端末１０が配置されているが、最少、２つの通信端末があれば遠隔通信が可能である。
遠隔通信システム１は、複数の通信端末（１０ａａ，１０ａｂ，…，１０ｄｂ）、各通信端末（１０ａａ，１０ａｂ，…，１０ｄｂ）用のディスプレイ（１００ａａ，１００ａｂ，…，１００ｄｂ）を有する。さらに、遠隔通信システム１は、複数の中継装置（３０ａ，３０ｂ，３０ｃ，３０ｄ）、遠隔通信管理システム５０、プログラム提供システム９０、および、外部入力装置４０を有する。
なお、通信端末（１０ａａ，１０ａｂ，…，１０ｄｂ）のうち任意の通信端末を示す場合には「通信端末１０」を用いる。ディスプレイ（１００ａａ，１００ａｂ，…，１００ｄｂ）のうち任意のディスプレイを示す場合には「ディスプレイ１００」を用いる。中継装置（３０ａ，３０ｂ，３０ｃ，３０ｄ）のうち任意の中継装置を示す場合には「中継装置３０」を用いる。外部入力装置（４０ａａ，４０ａｂ，…，４０ｄｂ）のうち任意の外部入力装置を示す場合には「外部入力装置４０」を用いる。
通信端末１０は、他の通信端末１０との間で、画像データ、音声データ等のコンテンツの送受信を行う。本実施形態では、画像データの画像が動画の場合について説明するが、動画だけでなく静止画であってもよい。また、画像データの画像には、動画と静止画の両方が含まれてもよい。中継装置３０は、複数の通信端末１０との間で、画像データおよび音声データの中継を行う。遠隔通信管理システム５０は、通信端末１０および中継装置３０を一元的に管理する。
外部入力装置４０は、通信端末１０と接続され、通信端末１０に対して資料データを表示するための表示データを送信する。ここでの資料データとは、たとえば、文書作成ソフトウェア、表計算ソフトウェア、プレゼンテーション用ソフトウェア等を用いて利用されるデータを意味する。
また、図１に示されている複数のルータ（７０ａ，７０ｂ，…，７０ｆ）は、画像データおよび音声データの最適な経路の選択を行う。なお、本実施形態では、ルータ（７０ａ，７０ｂ，…，７０ｆ）のうち任意のルータを示す場合には「ルータ７０」を用いる。
プログラム提供システム９０は、通信端末１０に各種機能又は各種手段を実現させるための通信端末用プログラムが記憶された、不図示のＨＤＤ(Hard Disk Drive)を備えており、通信端末１０に、通信端末用プログラムを送信することができる。また、プログラム提供システム９０のＨＤＤには、中継装置３０に各種機能又は各種手段を実現させるための中継装置用プログラムも記憶されており、中継装置３０に、中継装置用プログラムを送信することができる。更に、プログラム提供システム９０のＨＤＤには、遠隔通信管理システム５０に各種機能又は各種手段を実現させるための遠隔通信管理用プログラムも記憶されており、遠隔通信管理システム５０に、遠隔通信管理用プログラムを送信することができる。
また、通信端末１０ａａ、通信端末１０ａｂ、中継装置３０ａ、および、ルータ７０ａは、ＬＡＮ２ａによって互いに通信可能に接続されている。通信端末１０ｂａ、通信端末１０ｂｂ、中継装置３０ｂ、および、ルータ７０ｂは、ＬＡＮ２ｂによって互いに通信可能に接続されている。また、ＬＡＮ２ａおよびＬＡＮ２ｂは、ルータ７０ｃが含まれた専用線２ａｂによって通信可能に接続されており、所定の地域Ａ内で構築されている。例えば、地域Ａは日本であり、ＬＡＮ２ａは東京の事業所内で構築されており、ＬＡＮ２ｂは大阪の事業所内で構築されている。
一方、通信端末１０ｃａ、通信端末１０ｃｂ、中継装置３０ｃ、および、ルータ７０ｄは、ＬＡＮ２ｃによって互いに通信可能に接続されている。通信端末１０ｄａ、通信端末１０ｄｂ、中継装置３０ｄ、および、ルータ７０ｅは、ＬＡＮ２ｄによって互いに通信可能に接続されている。また、ＬＡＮ２ｃおよびＬＡＮ２ｄは、ルータ７０ｆが含まれた専用線２ｃｄによって通信可能に接続されており、所定の地域Ｂ内で構築されている。例えば、地域Ｂはアメリカであり、ＬＡＮ２ｃはニューヨークの事業所内で構築されており、ＬＡＮ２ｄはワシントンＤ．Ｃ．の事業所内で構築されている。
地域Ａおよび地域Ｂは、それぞれルータ（７０ｃ，７０ｆ）からインターネット２ｉを介して通信可能に接続されている。
また、遠隔通信管理システム５０、および、プログラム提供システム９０は、インターネット２ｉを介して、通信端末１０および中継装置３０と通信可能に接続されている。遠隔通信管理システム５０、およびプログラム提供システム９０は、地域Ａ又は地域Ｂに設置されていてもよいし、これら以外の地域に設置されていてもよい。
なお、本実施形態では、ＬＡＮ２ａ、ＬＡＮ２ｂ、専用線２ａｂ、インターネット２ｉ、専用線２ｃｄ、ＬＡＮ２ｃ、およびＬＡＮ２ｄによって、本実施形態の通信ネットワーク２が構築されている。
また、図１において、各通信端末１０、各中継装置３０、遠隔通信管理システム５０、各ルータ７０、および、プログラム提供システム９０の下に示されている４組の数字は、一般的なＩＰｖ４におけるＩＰアドレスを簡易的に示している。例えば、通信端末１０ａａのＩＰアドレスは「１．２．１．３」である。また、ＩＰｖ４ではなく、ＩＰｖ６を用いてもよいが、説明を簡略化するため、ＩＰｖ４を用いて説明する。
＜ハードウェア構成＞
次に、各機器のハードウェア構成を説明する。本実施形態では、中継先としての通信端末１０で画像データの受信に遅延が生じた場合に、中継装置３０によって画像データの画像の解像度を変更してから、中継先としての通信端末１０へ画像データを送信する場合について説明する。
図２は、通信端末１０のハードウェア構成図の一例である。図２に示されているように、本実施形態の通信端末１０は、通信端末１０全体の動作を制御するＣＰＵ(Central Processing Unit)１０１、通信端末用プログラムを記憶したＲＯＭ(Read Only Memory)１０２を備えている。さらに、通信端末１０は、ＣＰＵ１０１のワークエリアとして使用されるＲＡＭ(Random Access Memory)１０３、画像データや音声データ等の各種データを記憶するフラッシュメモリ１０４、ＣＰＵ１０１の制御にしたがってフラッシュメモリ１０４に対する各種データの読み出し又は書き込みを制御するＳＳＤ（Solid State Drive）１０５を備えている。さらに、通信端末１０は、フラッシュメモリ等の記録メディア１０６に対するデータの読み出し又は書き込み（記憶）を制御するメディアドライブ１０７、通信端末１０の宛先を選択する場合などに操作される操作ボタン１０８、通信端末１０の電源のＯＮ／ＯＦＦを切り換えるための電源スイッチ１０９を備えている。さらに、通信端末１０は、後述の通信ネットワーク２を利用してデータ伝送をするためのネットワークＩ／Ｆ１１１、ＣＰＵ１０１の制御に従って被写体を撮像し画像データを得るＣＣＤ(Charge Coupled Device)１１２、このＣＣＤ１１２の駆動を制御する撮像素子Ｉ／Ｆ１１３を備えている。さらに、通信端末１０は、音声を入力するマイク１１４、音声を出力するスピーカ１１５、ＣＰＵ１０１の制御に従ってマイク１１４およびスピーカ１１５との間で音声信号の入出力を処理する音声入出力Ｉ／Ｆ１１６を備えている。さらに、通信端末１０は、ＣＰＵ１０１の制御に従って外付けのディスプレイ１００に画像データを伝送するディスプレイＩ／Ｆ１１７、外部の装置と各種データを送受信する外部装置Ｉ／Ｆ１１８および上記各構成要素を図２に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン１１０を備えている。
なお、記録メディア１０６は、通信端末１０に対して着脱自在な構成となっている。また、ＣＰＵ１０１の制御にしたがってデータの読み出し又は書き込みを行う不揮発性メモリであれば、フラッシュメモリ１０４に限らず、ＥＥＰＲＯＭ（Electrically Erasable and Programmable ROM）等を用いてもよい。更に、ＣＣＤ１１２は、光を電荷に変換して被写体の画像（映像）を電子化する固体撮像素子であり、被写体を撮像するものであればＣＣＤに限らず、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を用いてもよい。また、ディスプレイ１００は、被写体の画像や操作用アイコン等を表示する液晶や有機ＥＬによって構成されている。
更に、上記通信端末用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア１０６等の、コンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。
図３は、本発明の一実施形態に係る遠隔通信管理システム５０のハードウェア構成図の一例である。遠隔通信管理システム５０は、遠隔通信管理システム５０全体の動作を制御するＣＰＵ２０１、遠隔通信管理用プログラムを記憶したＲＯＭ２０２、ＣＰＵ２０１のワークエリアとして使用されるＲＡＭ２０３、各種データを記憶するＨＤ(Hard Disk)２０４を備えている。さらに、遠隔通信管理システム５０は、ＣＰＵ２０１の制御にしたがってＨＤ２０４に対する各種データの読み出し又は書き込みを制御するＨＤＤ(Hard Disk Drive)２０５、フラッシュメモリ等の記録メディア２０６に対するデータの読み出し又は書き込み（記憶）を制御するメディアドライブ２０７、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示するディスプレイ２０８を備えている。さらに、遠隔通信管理システム５０は、後述の通信ネットワーク２を利用してデータ伝送をするためのネットワークＩ／Ｆ２０９、文字、数値、各種指示などの入力のための複数のキーを備えたキーボード２１１を備えている。さらに、遠隔通信管理システム５０は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行うマウス２１２、着脱可能な記録媒体の一例としてのＣＤ−ＲＯＭ(Compact Disc Read Only Memory)２１３に対するデータの読み出し又は書き込みを制御するＣＤ−ＲＯＭドライブ２１４を備えている。さらに、遠隔通信管理システム５０は、外部の装置と情報を送受信する外部装置Ｉ／Ｆ２１５および、上記各構成要素を図３に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン２１０を備えている。
なお、上記遠隔通信管理用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア２０６やＣＤ−ＲＯＭ２１３等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。
また、外部入力装置４０は、上記遠隔通信管理システム５０と同様のハードウェア構成が適用できる。但し、ＲＯＭ２０２には、外部入力装置４０を制御するための外部入力装置用プログラムが記録されている。この場合も、外部入力装置用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア２０６やＣＤ−ＲＯＭ２１３等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。
また、中継装置３０は、上記遠隔通信管理システム５０と同様のハードウェア構成を適用できる。但し、ＲＯＭ２０２には、中継装置３０を制御するための中継装置用プログラムが記録されている。この場合も、中継装置用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア２０６やＣＤ−ＲＯＭ２１３等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。
更に、プログラム提供システム９０は、上記遠隔通信管理システム５０と同様のハードウェア構成を適用できる。但し、ＲＯＭ２０２には、プログラム提供システム９０を制御するためのプログラム提供用プログラムが記録されている。この場合も、プログラム提供用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア２０６やＣＤ−ＲＯＭ２１３等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。
なお、上記着脱可能な記録媒体の他の例として、ＣＤ−Ｒ(Compact Disc Recordable)、ＤＶＤ(Digital Versatile Disk)、ブルーレイディスク等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
図４は、本実施形態の遠隔通信システム１を構成する各端末、装置およびシステムの機能ブロック図の一例である。図４では、通信端末１０、中継装置３０、および遠隔通信管理システム５０が、通信ネットワーク２を介してデータ通信することができるように接続されている。外部入力装置４０は、通信端末１０とデータを送受信することができるように、例えばＵＳＢケーブルにより接続されている。図１に示されているプログラム提供システム９０は、テレビ会議の通信において直接関係ないため、図４では省略されている。また、図５は、外部入力装置４０の機能ブロック図の一例であるが、説明を容易にするため、図４の通信端末１０の機能ブロック図を再掲した。
＜通信端末の機能構成＞
通信端末１０は、送受信部１１、操作入力受付部１２、ログイン要求部１３、撮像部１４ａ、画像表示制御部１４ｂ、表示画像解析部１４ｃ、品質同期判定部１４ｄ、音声入力部１５ａ、音声出力部１５ｂ、選択処理部１６、遅延検出部１７、外部情報送受信部１８、記憶・読出処理部１９、配置情報選択部２１、および、表示データ制御部２２を有している。これら各部は、図２に示されている各構成要素のいずれかが、ＲＯＭ２０２に記憶されているプログラムに従ったＣＰＵ２０１からの命令によって動作することで実現される機能又は手段である。
通信端末１０に外部入力装置４０が接続されている場合、外部入力装置４０は表示データを取得して通信端末１０に送信する。通信端末１０は表示データを受信すると、通信ネットワーク２を介して中継装置３０に送信する。
また、通信端末１０は、図２に示されているＲＯＭ１０２、ＲＡＭ１０３、フラッシュメモリ１０４のいずれかによって構築される記憶部１０００を有している。記憶部１０００には配置情報管理表２３、イベントフラグテーブル２４、資料管理テーブル２５、および、品質同期判断基準２６が記憶されている。
＜通信端末の各機能部＞
次に、通信端末の各部を詳細に説明する。通信端末１０の送受信部１１は、図２に示されているネットワークＩ／Ｆ１１１によって実現され、通信ネットワーク２を介して他の端末、装置又はシステムと各種データ（情報）の送受信を行う。操作入力受付部１２は、図２に示されている操作ボタン１０８、および電源スイッチ１０９によって実現され、利用者による各種入力を受け付ける。例えば、利用者が、図２に示されている電源スイッチ１０９をＯＮにすると、図４に示されている操作入力受付部１２が電源ＯＮを受け付けて、電源をＯＮにする。ログイン要求部１３は、図２に示されているＣＰＵ１０１からの命令によって実現され、上記電源ＯＮの受け付けを契機として、送受信部１１から通信ネットワーク２を介して遠隔通信管理システム５０に、ログインを要求する旨を示すログイン要求情報、および通信端末１０ａｂの現時点のＩＰアドレスを自動的に送信する。
撮像部１４ａは、図２に示されているＣＣＤ１１２、および撮像素子Ｉ／Ｆ１１３によって実現され、被写体を撮像して、この撮像して得た画像データを出力する。
画像表示制御部１４ｂは、図２に示されているディスプレイＩ／Ｆ１１７によって実現され、外付けのディスプレイ１００に対して画像データを送信するための制御を行う。画像表示制御部１４ｂは自機である通信端末１０および他の通信端末１０の撮像部１４ａで撮像された映像データの他に、自機である通信端末１０に接続された外部入力装置４０の表示装置４００で表示され、キャプチャされた表示データ、他の通信端末１０との間で共有する表示データを表示する。画像表示制御部１４ｂは、映像データや表示データの表示領域を制御する機能をもつ。
表示画像解析部１４ｃは、画像表示制御部１４ｂにより表示される他の通信端末１０の撮像部１４ａで撮像された映像データや表示データの品質を解析する。
品質同期判断部１４ｄは、品質同期判断基準２６に基づいて、表示画像解析部１４ｃにより品質の解析が行われる他の通信端末１０の撮像部１４ａで撮像された映像データや表示データと、画像表示制御部１４ｂにより表示される映像データや表示データとを比較し、品質の差異に基づいて、品質が同期しているか否かを判断する。
音声入力部１５ａは、図２に示されているマイク１１４、および音声入出力Ｉ／Ｆ１１６によって実現され、利用者の音声を入力し、この音声を音声信号に変換することで、音声信号に係る音声データを出力する。音声出力部１５ｂは、図２に示されているスピーカ１１５、および音声入出力Ｉ／Ｆ１１６によって実現され、音声データに係る音声信号を音声に変換して出力する。音声入力部１５ａは音声信号の入力レベルを測定しそれを閾値などと比較することで、音声信号の有無について判定する。
配置情報選択部２１は表示データの配信イベントに基づき、イベントフラグテーブル２４から共有フラグを選択し配置情報管理表２３に設定することで、画像表示制御部１４ｂにディスプレイ１００に表示させる画面の配置情報を指示する。配置情報管理表２３、イベントフラグテーブル２４、および品質同期判断基準２６を用いた制御の詳細は後述する。
選択処理部１６は、複数の中継装置３０から最終的に１つの中継装置３０に絞り込む最終絞り込み処理を行う。選択処理部１６は、送受信部１１によって受信された後述の事前送信情報毎に、送受信部１１によって事前送信情報が受信される際の受信日時を計測する。選択処理部１６は、受信日時が計測された事前送信情報毎に、この計測された受信時間と、この事前送信情報に含まれている送信日時との差に基づいて、事前送信情報の送信から受信までの所要時間を算出する。選択処理部１６は、算出された所要時間のうち最短の所要時間を要した事前送信情報が中継された中継装置３０を選択することで、最終的に１つの中継装置３０を選択する。
遅延検出部１７は、図２に示されているＣＰＵ１０１からの命令によって実現され、他の通信端末１０から中継装置３０を介して送られて来る画像データ又は音声データの遅延時間（ｍｓ）を検出する。また、外部情報送受信部１８は、外部装置Ｉ／Ｆ２１５により外部入力装置４０とデータを送受信する。また、記憶・読出処理部１９は、図２に示すＳＳＤ１０５を実体として、記憶部１０００に各種データを記憶したり、記憶部１０００に記憶された各種データを読み出したりする処理を行う。記憶部１０００には、通信端末１０を識別するための端末ＩＤ(Identification)、およびパスワード、並びに、画像データ、および音声データ、各種データを送信する中継装置３０を識別する中継装置ＩＤ、宛先端末のＩＰアドレス等が記憶される。
表示データ制御部２２は、外部入力装置４０の表示データを取得するものであり、取得した表示データを通信端末１０に送信する。表示データとは、表示装置４００の画面に表示された画像をＪＰＥＧ（Joint Photographic Experts Group）やＢｉｔｍａｐ等の形式にした画像データ、ＧＤＩ（Graphics Device Interface ）等の形式にした描画コマンドを表す。表示データには資料データが含まれる場合も資料データが含まれない単なるデスクトップ画面の場合もある。
また、表示データ制御部２２は、外部入力装置４０からの要求に応じて、中継装置３０に対して表示データの配信開始の要求や配信停止の要求を行う。また、中継装置３０からの配信イベントに応じてイベントフラグテーブル２４を参照して表示制御フラグの状態を決定し、表示制御フラグを外部入力装置４０へ送信する。表示制御フラグについては後述する。
なお、本実施形態の端末ＩＤ、および後述の中継装置ＩＤは、それぞれ通信端末１０、および中継装置３０を一意に識別するために使われる言語、文字、記号、又は各種のしるし等の識別情報を示す。また、端末ＩＤ、および中継装置ＩＤは、上記言語、文字、記号、および各種のしるしのうち、少なくとも２つが組み合わされた識別情報であってもよい。また、以下では、テレビ会議の開始を要求する要求元としての通信端末１０を「要求元端末１０Ａ」とし、要求先である宛先としての通信端末１０を「宛先端末１０Ｂ」として説明する。
＜外部入力装置の機能構成＞
外部入力装置４０は、図５に示されているように、送受信部４１、接続検出部４２、記憶部４３、表示データ取得部４５１、表示データ送信部４５２、メニュー制御部４４、操作入力受付部４６、および、記憶・読出処理部４９を有している。これら各部は、図３に示されている各構成要素のいずれかが、ＲＯＭ２０２に記憶されているプログラムに従ったＣＰＵ２０１からの命令によって動作することで実現される機能又は手段である。また、外部入力装置４０は、図３に示されているディスプレイ２０８によって構築される表示装置４００を有している。また、外部入力装置４０は、Ｗｉｎｄｏｗｓ（登録商標）等のＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）を搭載し、これにより、他の装置と接続したときにはプログラムを実行する機能を備えている。
＜外部入力装置の各機能部＞
次に、外部入力装置４０の各部を詳細に説明する。外部入力装置４０の送受信部４１は、図３に示されているネットワークＩ／Ｆ２０９によって実現され、通信端末１０から各種データ（情報）の送受信を行う。接続検出部４２は外部装置Ｉ／Ｆ２１５により通信端末１０とデータの送受信が可能となったことを検出する。操作入力受付部４６は、キーボードやマウスにより実現され利用者の操作による入力を受け付ける。
表示データ取得部４５１は、表示装置４００の画面をキャプチャするなどして外部入力装置４０の表示データを取得するものであり、表示データ送信部４５２は、表示データ取得部４５１が取得した表示データを通信端末１０に送信するものである。
記憶・読出処理部４９は、図３に示されているＨＤＤ２０５を実体とし各種データを記憶したり、記憶部４３に記憶された各種データを読み出したりする処理を行う。記憶部４３は、ＨＤＤ２０５を実体とし、資料管理テーブル４３２や遷移条件テーブル４３１等が記憶される。表示装置４００は、ディスプレイ２０８によって実現され、画面への表示を行う。メニュー制御部４４は、表示制御フラグに従って、メニューの内容や共有の状態を表示装置４００に表示させる。
＜資料管理テーブル＞
外部入力装置４０のＨＤＤ２０５には、資料管理テーブル４３２が記憶される。
図６は資料管理テーブル４３２の一例を示す図である。資料管理テーブル４３２では、資料の名称である資料名、資料の大きさを表すサイズ、資料が作成されるために用いられたアプリケーションソフトウェアの名称を表すアプリケーション名、資料が最後に更新された更新日時、資料データ等が関連付けられて管理される。
＜中継装置の機能構成＞
次に、中継装置３０の機能又は手段について説明する。中継装置３０は、送受信部３１、状態検知部３２、データ品質確認部３３、変更品質管理部３４、データ品質変更部３５、および記憶・読出処理部３９を有している。これら各部は、図３に示されている各構成要素のいずれかが、ＲＯＭ２０２に記憶されているプログラムに従ったＣＰＵ２０１からの命令によって動作することで実現される機能又は手段である。また、中継装置３０は、図３に示されているＨＤ２０４により構築される記憶部３０００を有している。
＜変更品質管理テーブル＞
記憶部３０００には、図７に示されているような変更品質管理テーブルによって構成されている変更品質管理ＤＢ３００１が構築される。変更品質管理テーブルでは、画像データの中継先としての通信端末１０のＩＰアドレス、およびこの中継先に中継装置３０が中継する画像データの画質が関連付けられて管理される。
解像度は、例えば、横が１６０画素、縦が１２０画素から成り、ベース画像となる低解像度の画像と、横が３２０画素、縦が２４０画素から成る中解像度の画像と、横が６４０画素、縦が４８０画素から成る高解像度の画像とがある。このうち、狭帯域経路を経由する場合には、ベース画像となる低解像度の画像データのみから成る低画質の画像データが中継される。帯域が比較的広い場合には、ベース画像となる低解像度の画像データ、および中解像度の画像データから成る中画質の画像データが中継される。また、帯域が非常に広い場合には、ベース画質となる低解像度の画像データ、中画解像度の画像データ、および高解像度の画像データから成る高画質の画像データが中継される。例えば、図７に示されている変更品質管理テーブルにおいて、中継装置３０が、ＩＰアドレス「１．３．２．４」の宛先端末１０ｄｂに対して画像データを中継する場合には、この中継される画像データの画質（画像の品質）は「高品質」である。
＜中継装置の各機能部＞
次に、中継装置３０の各機能構成について詳細に説明する。なお、以下では、中継装置３０の各部を説明するにあたって、図２に示されている各構成要素のうち、中継装置３０の各部を実現させるための主な構成要素との関係も説明する。
図４に示されている中継装置３０の送受信部３１は、図３に示されているネットワークＩ／Ｆ２０９によって実現され、通信ネットワーク２を介して他の端末、装置、又はシステムと各種データ（情報）の送受信を行う。状態検知部３２は、図３に示されているＣＰＵ２０１からの命令によって実現され、この状態検知部３２を有する中継装置３０の稼動状態を検知する。稼動状態としては、「ＯＮライン」、「ＯＦＦライン」、又は「故障中」の状態がある。
データ品質確認部３３は、図３に示されているＣＰＵ２０１からの命令によって実現される。データ品質確認部３３は、宛先端末１０ＢのＩＰアドレスを検索キーとして、図７の変更品質管理テーブルを検索し、対応した中継される画像データの画質を抽出することで、中継される画像データの画質を確認する。変更品質管理部３４は、図３に示されているＣＰＵ２０１からの命令によって実現され、遠隔通信管理システム５０から送られて来る、後述の品質情報に基づいて、変更品質管理ＤＢ３００１の内容を変更する。例えば、端末ＩＤが「０１ａａ」である要求元端末１０ａａと、端末ＩＤが「０１ｄｂ」である宛先端末１０ｄｂとの間で高画質の画像データを送受信することによってテレビ会議を行っている最中に、他のテレビ会議を行う要求元端末ｂｂと宛先端末ｃａが通信ネットワーク２を介してテレビ会議を開始することなどによって、宛先端末１０ｄｂで画像データの受信の遅延が生じた場合には、中継装置３０は今まで中継していた画像データの画質を、高画質から中画質に下げる必要がある。このような場合に、中画質を示す品質情報に基づいて、中継装置３０が中継する画像データの画質を高画質から中画質に下げるように、変更品質管理ＤＢ３００１の内容が変更される。
データ品質変更部３５は、図３に示されているＣＰＵ２０１からの命令によって実現され、送信元端末１０から送られて来た画像データの画質を、上記変更された変更品質管理ＤＢ３００１の内容に基づいて変更する。記憶・読出処理部３９は、図３に示されているＨＤＤ２０５によって実現され、記憶部３０００に各種データを記憶したり、記憶部３０００に記憶された各種データを読み出したりする処理を行う。
＜遠隔通信管理システムの機能構成＞
次に、遠隔通信管理システム５０の機能又は手段について説明する。遠隔通信管理システム５０は、送受信部５１、端末認証部５２、状態管理部５３、端末抽出部５４、端末状態取得部５５、絞込部５６、セッション管理部５７、品質決定部５８、記憶・読出処理部５９、および遅延時間管理部６０を有している。これら各部は、図３に示されている各構成要素のいずれかが、ＲＯＭ２０２に記憶されているプログラムに従ったＣＰＵ２０１からの命令によって動作することで実現される機能又は手段である。また、遠隔通信管理システム５０は、図３に示されているＨＤ２０４により構築される記憶部５０００を有している。
＜中継装置管理テーブル＞
記憶部５０００には、図８に示されているような中継装置管理テーブルによって構成されている中継装置管理ＤＢ５００１が構築されている。この中継装置管理テーブルでは、各中継装置３０の中継装置ＩＤ毎に、各中継装置３０の稼動状態、稼動状態が示される状態情報が遠隔通信管理システム５０で受信された受信日時、中継装置３０のＩＰアドレス、および中継装置３０における最大データ伝送速度（Ｍｂｐｓ）が関連付けられて管理される。例えば、図８に示されている中継装置管理テーブルにおいて、中継装置ＩＤが「１１１ａ」の中継装置３０ａは、稼動状態が「ＯＮライン」で、遠隔通信管理システム５０で状態情報が受信された日時が「２００９年１１月１０日の１３時００分」で、この中継装置３０ａのＩＰアドレスが「１．２．１．２」で、この中継装置３０ａにおける最大データ伝送速度が１００Ｍｂｐｓであることが示されている。
＜端末認証管理テーブル＞
更に、記憶部５０００には、図９に示されているような端末認証管理テーブルによって構成されている端末認証管理ＤＢ５００２が構築されている。この端末認証管理テーブルでは、遠隔通信管理システム５０によって管理される全ての通信端末１０の各端末ＩＤに対して、各パスワードが関連付けられて管理される。例えば、図９に示されている端末認証管理テーブルにおいて、通信端末１０ａａの端末ＩＤは「０１ａａ」で、パスワードは「ａａａａ」であることが示されている。
＜端末管理テーブル＞
また、記憶部５０００には、図１０に示されているような端末管理テーブルによって構成されている端末管理ＤＢ５００３が構築されている。この端末管理テーブルでは、各通信端末１０の端末ＩＤ毎に、各通信端末１０の稼動状態、後述のログイン要求情報が遠隔通信管理システム５０で受信された受信日時、および通信端末１０のＩＰアドレスが関連付けられて管理される。例えば、図１０に示されている端末管理テーブルにおいて、端末ＩＤが「０１ａａ」の通信端末１０ａａは、稼動状態が「ＯＮライン」で、遠隔通信管理システム５０でログイン要求情報が受信された日時が「２００９年１１月１０日の１３時４０分」で、この通信端末１０ａａのＩＰアドレスが「１．２．１．３」であることが示されている。
＜宛先リスト管理テーブル＞
更に、記憶部５０００には、図１１に示されているような宛先リスト管理テーブルによって構成されている宛先リスト管理ＤＢ５００４が構築されている。この宛先リスト管理テーブルでは、テレビ会議の開始を要求する要求元端末１０Ａの端末ＩＤに対して、宛先端末１０Ｂの候補として登録されている宛先端末１０Ｂの端末ＩＤが全て関連付けられて管理される。例えば、図１１に示されている宛先リスト管理テーブルにおいて、端末ＩＤが「０１ａａ」である要求元端末１０ａａからテレビ会議の開始を要求することができる宛先端末１０Ｂの候補は、端末ＩＤが「０１ａｂ」の通信端末１０ａｂ、端末ＩＤが「０１ｂａ」の通信端末１０ｂａ、および端末ＩＤが「０１ｄｂ」の通信端末１０ｄｂの３つであることが示されている。この宛先端末１０Ｂの候補は、要求元端末１０Ａから遠隔通信管理システム５０に対する追加又は削除の要請により、追加又は削除されることで更新される。
＜セッション管理テーブル＞
また、この記憶部５０００には、図１２に示されているようなセッション管理テーブルによって構成されているセッション管理ＤＢ５００５が構築されている。このセッション管理テーブルでは、中継装置３０を選択するためのセッションの実行に用いられる選択用セッションＩＤ毎に、画像データ、音声データおよび表示データの中継に使用される中継装置３０の中継装置ＩＤ、要求元端末１０Ａの端末ＩＤ、宛先端末１０Ｂの端末ＩＤ、宛先端末１０Ｂにおいて画像データが受信される際の受信の遅延時間（ｍｓ）、およびこの遅延時間が示されている遅延情報を宛先端末１０Ｂから送られて来て遠隔通信管理システム５０で受信された受信日時が関連付けられて管理される。
例えば、図１２に示されているセッション管理テーブルにおいて、選択用セッションＩＤ「ｓｅ１」を用いて実行されたセッションで選択された中継装置３０ａ（中継装置ＩＤ「１１１ａ」）は、端末ＩＤが「０１ａａ」の要求元端末１０ａａと、端末ＩＤが「０１ｄｂ」の宛先端末１０ｄｂとの間で、画像データおよび音声データを中継しており、宛先端末１０ｄｂにおいて「２００９年１１月１０日の１４時００分」時点における画像データの遅延時間が２００（ｍｓ）であることが示されている。なお、２つの通信端末１０の間でテレビ会議を行う場合には、上記宛先端末１０Ｂではなく要求元端末１０Ａから送信されてきた遅延情報に基づいて、遅延情報の受信日時を管理してもよい。但し、３つ以上の通信端末１０の間でテレビ会議を行う場合には、画像データ、音声データおよび表示データの受信側の通信端末１０から送信されてきた遅延情報に基づいて、遅延情報の受信日時を管理する。
＜アドレス優先度管理テーブル＞
更に、記憶部５０００には、図１３に示されているようなアドレス優先度管理テーブルによって構成されている優先度管理ＤＢ５００６が構築されている。このアドレス優先度管理テーブルでは、一般的なＩＰｖ４におけるＩＰアドレスのうちの４組のドットアドレス(Dot Address)部分の同異に応じて、アドレス優先度のポイントが高くなるように関連付けられて管理される。
例えば、図１３に示されているアドレス優先度管理テーブルにおいて、ドットアドレスの上位から下位にかけて３つの値が同じＩＰアドレスの場合には、アドレス優先度のポイントが「５」である。ドットアドレスの上位から下位にかけて２つの値が同じＩＰアドレスの場合には、アドレス優先度のポイントが「３」である。この場合、最下位のドットアドレスの値が同じであるか否かは優先度に関係ない。ドットアドレスの最上位の値が同じで、上位から２番目の値が異なるＩＰアドレスの場合には、アドレス優先度のポイントが「１」である。この場合、上位から３番目および最下位のドットアドレスの値が同じであるか否かは優先度には関係ない。ドットアドレスの最上位の値が異なるＩＰアドレスの場合には、アドレス優先度のポイントが「０」である。この場合、上位から２番目、３番目、および最下位のドットアドレスの値が同じであるか否かは優先度には関係ない。
＜伝送速度優先度管理テーブル＞
また、記憶部５０００に構築されている優先度管理ＤＢ５００６には、図１４に示されているような伝送速度優先度管理テーブルも含まれている。この伝送速度優先度管理テーブルでは、中継装置３０における最大データ伝送速度（Ｍｂｐｓ）の値に応じて、伝送速度優先度のポイントが高くなるように関連付けられて管理される。
例えば、図１４に示されている伝送速度優先度管理テーブルにおいて、中継装置３０における最大データ伝送速度が１０００Ｍｂｐｓ以上の場合には、伝送速度優先度のポイントが「５」である。中継装置３０における最大データ伝送速度が１００Ｍｂｐｓ以上１０００Ｍｂｐｓ未満の場合には、伝送速度優先度のポイントが「３」である。中継装置３０における最大データ伝送速度が１０Ｍｂｐｓ以上１００Ｍｂｐｓ未満の場合には、伝送速度優先度のポイントが「１」である。中継装置３０における最大データ伝送速度が１０Ｍｂｐｓ未満の場合には、伝送速度優先度のポイントが「０」である。
＜品質管理テーブル＞
更に、記憶部５０００には、図１５に示されているような品質管理テーブルによって構成されている品質管理ＤＢ５００７が構築されている。この品質管理テーブルでは、要求元端末１０Ａ又は宛先端末１０Ｂにおける画像データの遅延時間（ｍｓ）に応じて、中継装置３０で中継させる画像データの画質（画像の品質）が関連付けられて管理される。
＜遠隔通信管理システムの各機能部＞
次に、遠隔通信管理システム５０の各機能部について詳細に説明する。なお、以下では、遠隔通信管理システム５０の各部を説明するにあたって、図３に示されている各構成要素のうち、遠隔通信管理システム５０の各部を実現させるための主な構成要素との関係も説明する。
送受信部５１は、図３に示されているネットワークＩ／Ｆ２０９によって実行され、通信ネットワーク２を介して他の端末、装置又はシステムと各種データ（情報）の送受信を行う。端末認証部５２は、送受信部５１を介して受信されたログイン要求情報に含まれている端末ＩＤおよびパスワードを検索キーとし、記憶部５０００の端末認証管理ＤＢ５００２を検索し、端末認証管理ＤＢ５００２に同一の端末ＩＤおよびパスワードが管理されているかを判断することによって端末認証を行う。状態管理部５３は、ログイン要求してきた要求元端末１０Ａの稼動状態を管理すべく、端末管理テーブル（図１０参照）に、この要求元端末１０Ａの端末ＩＤ、要求元端末１０Ａの稼動状態、遠隔通信管理システム５０でログイン要求情報が受信された受信日時、および要求元端末１０ＡのＩＰアドレスを関連付けて記憶して管理する。
端末抽出部５４は、ログイン要求した要求元端末１０Ａの端末ＩＤをキーとして、宛先リスト管理テーブル（図１１参照）を検索し、要求元端末１０Ａと遠隔通信することができる宛先端末１０Ｂの候補の端末ＩＤを読み出すことで、端末ＩＤを抽出する。また、端末抽出部５４は、ログイン要求してきた要求元端末１０Ａの端末ＩＤをキーとして、宛先リスト管理テーブル（図１１参照）を検索し、上記要求元端末１０Ａの端末ＩＤを宛先端末１０Ｂの候補として登録している他の要求元端末１０Ａの端末ＩＤも抽出する。
端末状態取得部５５は、上記端末抽出部５４によって抽出された宛先端末１０Ｂの候補の端末ＩＤを検索キーとして、端末管理ＤＢテーブル（図１０参照）を検索し、上記端末抽出部５４によって抽出された端末ＩＤ毎に稼動状態を読み出す。これにより、端末状態取得部５５は、ログイン要求してきた要求元端末１０Ａと遠隔通信することができる宛先端末１０Ｂの候補の稼動状態を取得することができる。また、端末状態取得部５５は、上記端末抽出部５４によって抽出された端末ＩＤを検索キーとして、端末管理テーブル（図１０参照）を検索し、ログイン要求してきた要求元端末１０Ａの稼動状態も取得する。
絞込部５６は、複数の中継装置３０から最終的に１つの中継装置３０に絞り込む最終絞り込み処理を支援するため、最終絞り込み処理前の一次絞り込み処理を行うため、選択用セッションＩＤ生成部５６ａ、端末ＩＰアドレス抽出部５６ｂ、一次選択部５６ｃ、および優先度決定部５６ｄを有している。このうち、選択用セッションＩＤ生成部５６ａは、中継装置３０を選択するためのセッションの実行に用いられる選択用セッションＩＤを生成する。端末ＩＰアドレス抽出部５６ｂは、要求元端末１０Ａから送られてきた開始要求情報に含まれている要求元端末１０Ａの端末ＩＤ、および宛先端末１０Ｂの端末ＩＤに基づいて、端末管理テーブル（図１０参照）を検索することにより、対応するそれぞれの通信端末１０のＩＰアドレスを抽出する。一次選択部５６ｃは、中継装置管理テーブル（図７参照）で管理されている中継装置３０のうち、稼動状態が「ＯＮライン」となっている中継装置３０の中継装置ＩＤを選択することにより、中継装置３０の選択を行う。
また、一次選択部５６ｃは、上記端末ＩＰアドレス抽出部５６ｂによって抽出された、要求元端末１０ＡのＩＰアドレス、および宛先端末１０ＢのＩＰアドレスに基づいて、中継装置管理テーブル（図８参照）を検索することにより、上記選択された中継装置３０のＩＰアドレスのドットアドレス毎に、上記要求元端末１０Ａおよび宛先端末１０Ｂの各ＩＰアドレスにおける各ドットアドレスと同じであるか異なるかを調査する。更に、一次選択部５６ｃは、中継装置毎に、アドレス優先度のポイントにおいて通信端末１０に対する高い方のポイントと、伝送速度優先度のポイントを統合した統合ポイントのうち、ポイントが高い上位２つの中継装置３０を選択することにより、中継装置３０の更なる選択を行う。
なお、本実施形態では、ポイントが高い上位２つの中継装置３０を選択することにしているが、これに限られるものではなく、中継装置３０を１つでも多く絞り込むことができれば、ポイントが高い上位３つ以上の中継装置３０を選択するようにしてもよい。
優先度決定部５６ｄは、優先度管理テーブル（図１３参照）を参照して、上記一次選択部５６ｃによって調査された中継装置３０毎に、アドレス優先度のポイントを決定する。また、優先度決定部５６ｄは、中継装置管理テーブル（図８参照）で管理されている各中継装置３０の最大データ伝送速度に基づいて、伝送速度優先度管理テーブル（図１４参照）を検索することにより、上記一次選択部５６ｃによって絞り込まれた中継装置３０毎に伝送速度優先度のポイントを決定する。
セッション管理部５７は、記憶部５０００のセッション管理テーブル（図１２参照）に、選択用セッションＩＤ生成部５６ａで生成された選択用セッションＩＤ、要求元端末の端末ＩＤ、および宛先端末の端末ＩＤを関連付けて記憶して管理する。また、セッション管理部５７は、セッション管理テーブル（図１１参照）に対して、選択用セッションＩＤ毎に、通信端末１０の選択処理部１６が最終的に１つに選択した中継装置３０の中継装置ＩＤを記憶して管理する。
品質決定部５８は、上記遅延時間を検索キーとして、品質管理テーブル（図１５参照）を検索し、対応する画像データの画質を抽出することで、中継装置３０に中継させる画像データの画質を決定する。記憶・読出処理部５９は、図３に示されているＨＤＤ２０５によって実行され、記憶部５０００に各種データを記憶したり、記憶部５０００に記憶された各種データを読み出したりする処理を行う。遅延時間管理部６０は、上記宛先端末１０ＢのＩＰアドレスを検索キーとして、端末管理テーブル（図１０参照）を検索することで、対応する端末ＩＤを抽出し、更に、セッション管理テーブル（図１２参照）のセッション管理テーブルにおいて、抽出した端末ＩＤが含まれるレコードにおける遅延時間のフィールド部分に、上記遅延情報で示されている遅延時間を記憶して管理する。
〔表示データの表示制御について〕
以下、本実施形態の表示データの表示制御について詳述する。
＜配置情報管理表＞
図１６は、配置情報管理表２３の一例を示す図である。配置情報管理表２３には、表示データの配置を管理するための情報が登録されている。「配置情報No」はレコードを識別するための識別情報であり、「配置情報」は、映像データおよび表示データをディスプレイ１００にどのように配置するかの情報が記憶されている。配置情報には「VIEW_MULTI」と「SHARED_MULTI」がある。これらについては後述するが、「VIEW_MULTI」は映像データだけを表示することを、「SHARED_MULTI」は映像データと表示データを混在させて表示することを、それぞれ意味する。
また、「共有フラグ」は、配置情報選択部２１が配信イベントに基づき図２０のイベントフラグテーブル２４を参照して決定する。「共有フラグ」により「配置情報Ｎｏ」が一意に定まる。通信端末１０が表示データを受信する状態には以下の２つがある。
・外部入力装置４０が接続された通信端末１０で、この外部入力装置４０からの表示データを受信している状態
・通信端末１０が、他の通信端末１０と接続された外部入力装置４０から表示データを受信している状態
本実施形態ではこの２つの状態のいずれも「SHARED」と称する。また、通信端末１０が全く表示データを受信していない状態を「UNSHARED」と称する。配置情報管理表２３は、通信端末１０の共有フラグが「SHARED」であれば、配置情報No2の「SHARED_MULTI」の配置情報と結びつけ、共有フラグが「UNSHARED」であれば配置情報No1の「VIEW_MULTI」の配置情報と結びつける。
なお、共有フラグと配置情報の対応付けは一例であり、極端に言えば逆の対応づけも可能である。また、通信端末１０が表示データを受信する２つの状態を同じ「SHARED」とするのでなく、２つの受信状態を「SHARED１」「SHARED２」として、それぞれを異なる配置情報に対応づけることもできる。配置情報管理表２３の設定は、通信端末の各参加者が行うことができる。
図１７は、ディスプレイ１００の分割例と分割により生じる領域を示す図の一例である。領域１〜４はそれぞれに異なる映像データ又は表示データを表示することができるので、この例では最大で４つの映像データおよび表示データを表示することができる。図１７では、領域１が他の領域２〜４よりも広く割り当てられている。この領域１〜４のどの領域に映像データを表示し、どの領域に表示データを表示するかを定めるのが「配置情報」である。
図１８は、配置情報と、各領域１〜４に割り当てられる映像データ又は表示データの関係の一例を示す図である。図１８に示すように、配置情報＝「VIEW_MULTI」の場合、領域１には映像データ１が、領域２には映像データ２が、それぞれ表示され全ての領域１〜４に映像データが表示される。
配置情報＝「SHARED_MULTI」の場合、領域１には表示データが、領域２には映像データ１が、領域３には映像データ２が、それぞれ表示される。
配置情報についてより詳細に説明する。
・「VIEW_MULTI」の場合
領域１から順に各端末で受信している映像データの数だけ映像データが割当てられる配置情報である。例えば、２つの通信端末１０が遠隔通信システム１に接続されている場合は領域２まで映像データが表示され，領域３，領域４には何も表示されない。領域１には現在、参加者が注目すべき相手側の映像データを通信端末１０は表示するようにして、発話している側の通信端末１０の撮像部１４ａが撮影した映像データとする。この映像データを特定するため、各通信端末の音声入力部１５ａは音声レベルに基づき発話を検出した場合、表示データ制御部２２は、該当する通信端末１０の端末ＩＤを中継装置３０に転送する。中継装置３０はこの端末ＩＤを各通信端末１０に同報的に配信するので、各通信端末１０は領域１に表示すべき映像データを特定することができる。なお、表示データ制御部２２は中継装置３０でなく、該当する通信端末１０の端末ＩＤを遠隔通信管理システム５０に送信してもよい。また、領域２には発話していない側の映像データを表示する。
・「SHARED_MULTI」の場合
領域1には表示データが表示され，他の領域２〜４には映像データが割当てられる配置情報である。２つの通信端末１，２が遠隔通信システム１に接続されている場合は、領域２と領域３に各通信端末１０の映像データが表示され、領域４には何も表示されない。
配置情報選択部２１は、自機の通信端末１０と接続された外部入力装置４０から表示データを受信しているか否か、および、他の通信端末から表示データを受信しているか否かを定めることになる配信イベントに応じて、自機の共有フラグを「SHARED」又は「UNSHARED」に設定する。「SHARED」に設定するとは、共有フラグの値に「SHARED」「１」又は「ＯＮ」を代入することを、「UNSHARED」に設定するとは、共有フラグの値に「UNSHARED」「０」又は「ＯＦＦ」を代入することをいう。
上記のように、配置情報選択部２１は共有フラグを更新すると、配置情報管理表２３の共有フラグを参照した結果に基づき、画像表示制御部１４ｂに対し映像データおよび表示データの領域１〜４への割り当てを変更する。
図１９は、配置情報選択部２１が選択する配置情報の状態遷移図の一例である。初期状態が配置情報のNo1かNo2のいずれになるかは、自機である起動直後の通信端末１０に表示データが送信されているか否かに応じて変わってくる。図１９に示すように、配置情報No1が選択された状態で、配置情報選択部２１が共有フラグに「SHARED」をセットした場合、配置情報選択部２１は配置情報No2を選択する。配置情報No2が選択された状態で、配置情報選択部２１が共有フラグに「UNSHARED」をセットした場合、配置情報選択部２１は配置情報No１を選択する。配置情報No1が選択された状態で、配置情報選択部２１が共有フラグに「UNSHARED」をセットした場合、配置情報選択部２１はそのまま配置情報No１を選択し、配置情報No2が選択された状態で、配置情報選択部２１が共有フラグに「SHARED」をセットした場合、配置情報選択部２１はそのまま配置情報No2を選択する。
＜表示制御フラグ＞
表示制御フラグは、外部入力装置４０が外部入力装置４０の表示装置４００に表示するメニュー等の表示を通信端末１０が制御するために用いられる。
図２０は、中継装置３０から送信される配信イベントと、配信イベントに応じて配置情報選択部２１が設定する表示フラグ、および、表示データ制御部２２が決定する表示制御フラグの対応の一例（イベントフラグテーブル２４）である。
配信イベントには、「配信開始イベント」、「他からの配信開始イベント」、「配信停止イベント」、「他からの配信停止イベント」がある。前者２つの配信イベントの共有フラグは、通信端末１０が表示データを受信する配信イベントに対応して「SHARED」であり、後者２つの配信イベントの共有フラグは、通信端末１０が表示データを受信しない配信イベントに対応して「UNSHAED」である。
また、「配信開始イベント」に対応する表示制御フラグは「SHARED」であり、「他からの配信開始イベント」に対応する表示制御フラグは「SHARED＿ANOTHER」であり、「配信開始イベント」と「他からの配信停止イベント」に対応する表示制御フラグは「UNSHARED」である。表示制御フラグについては以下で説明する。外部入力装置４０のメニュー制御部４４は、表示制御フラグを通信端末１０から受信すると、表示装置４００に表示するメニューを遷移させる。
図２１（ａ）は、遷移条件テーブル４３１の一例を模式的に説明する図の一例である。起動直後の表示装置４００は、通信端末１０が表示データを共有していないという前提で「共有開始」を表示する。「共有開始」は外部入力装置４０の表示データを、外部入力装置４０に接続された通信端末以外の通信端末１０と共有することを開始させるメニューであり、具体的には参加者の操作を受け付ける「共有開始」ボタンである（以下、「共有開始」と「共有開始」ボタンを厳密には使い分けずに用いる。）。
「共有開始」の表示中に、外部入力装置４０が表示制御フラグ「SHARED」を受信すると、メニュー制御部４４は表示データの共有を解除させるための「共有停止」を表示する。「共有停止」は、当該外部入力装置４０が表示している表示データを、当該外部入力装置４０と直接接続されていない通信端末１０と共有することを停止させるメニューであり、具体的には参加者の操作を受け付ける「共有停止」ボタンである（以下、「共有停止」と「共有停止」ボタンを厳密には使い分けずに用いる。）
「共有停止」の表示中に、外部入力装置４０が表示制御フラグ「SHARED」以外（「UNSHARED」、「SHARED＿ANOTHER」）を受信すると、メニュー制御部４４は表示データの共有を開始できるように「共有開始」を表示する。
なお、外部入力装置４０が「共有開始」の表示中に、表示制御フラグ「SHARED」以外を受信した場合、メニューはそのままであり、外部入力装置４０が「共有停止」の表示中に表示制御フラグ「SHARED」を受信した場合は、メニューはそのままである。
このように、配信イベントに、共有フラグと表示制御フラグが対応づけられていることで、通信端末１０がディスプレイ１００に表示する表示データおよび映像データの表示態様に応じて、外部入力装置４０の表示装置４００の表示態様（メニュー）も決定することができる。
そして、外部入力装置４０の表示装置４００にメニューを表示している間、メニュー制御部４４は、表示制御フラグに応じて共有状態を表示する。
図２１（ｂ）は、表示制御フラグと共有状態の対応関係の一例を示す図である。このような対応関係は遷移条件テーブル４３１と共に記憶部４３に記憶されている。
この"共有状態"が後述するように、外部入力装置４０の画面のメッセージ欄に表示され、参加者は通信端末１０の"現在の共有状態"を把握できるようになっている。"共有状態"には、以下の状態がある。
・（ａ）通信端末１０が表示データを共有していない（UNSHARED）
・（ｂ）通信端末１０が自機に接続された外部入力装置４０が表示している表示データを共有している（SHARED）
・（ｃ）通信端末１０が他の通信端末１０に接続された外部入力装置４０が表示している表示データを共有している（SHARED＿ANOTHER）
〔表示データの品質判断について〕
以下、本実施形態の表示データの品質判断について詳述する。
（品質同期判断基準）
図２２は、品質同期判断基準２６の一例を示す図である。配置情報管理表２３には、対象となる品質情報に対して、比較を行うための項目情報が登録されている。「対象品質情報」は対象となる品質などの属性を識別するための識別情報である。対象品質情報には、「コンテンツ自体のキャプチャ」と「OCR(Optical Character Recognition)結果」と「色分布」と「周波数成分」と「エッジ情報」がある。さらに、「コンテンツ自体のキャプチャ」には、「文字主体」と「画面主体」がある。
図２３は、文字情報を主体とするコンテンツと図面情報を主体とするコンテンツを示す。通信端末間で共有されるコンテンツは、文字情報を主体とするコンテンツと図面情報を主体とするコンテンツである。文字情報を主体とするコンテンツは、文字主体のコンテンツであり、主にワープロソフトや表計算ソフトにより作成される。図面情報を主体とするコンテンツは、図面主体のコンテンツであり、主にプレゼンテーションソフトや製図ソフトにより作成される。通信端末間で共有されるコンテンツは、通信端末間で共有できるコンテンツであれば、文字情報を主体とするコンテンツや図面情報を主体とするコンテンツに限られない。さらに、通信端末間で共有されるコンテンツは、静止画であってもよいし、動画であってもよい。
文字主体のコンテンツ自体のキャプチャは、表示データの主に文字部分をデータとして保存することを意味する。図面主体のコンテンツ自体のキャプチャは、表示データの主に図面（画像部分）をデータとして保存することを意味する。
図２４は、OCR結果の一例を示す。図２４において、左図は送受信したコンテンツ自体をキャプチャした情報であり、右図は送受信したコンテンツにOCRを行った情報を示す。OCR結果は、文字認識の結果を意味する。
図２５は、「色分布」と「周波数成分」と「エッジ情報」の一例を示す。図２５において、左図は送受信したコンテンツ自体をキャプチャした情報であり、右上図は送受信したコンテンツから色分布を抽出した情報を示し、右中図は送受信したコンテンツを周波数成分に変換した情報を示し、右下図は送受信したコンテンツからエッジ部分を抽出した情報を示す。
色分布は、表示データの色の分布を意味する。周波数成分は、画像を空間周波数領域へ変換した場合に得られる周波数成分を意味する。エッジ情報は、表示データから検出されるエッジを意味する。
「判断項目」は対象品質情報に対してどのような比較を行うかを示す情報である。
文字主体のコンテンツ自体のキャプチャの判断項目は、「画像全体での色差」と「画像全体での画素値の差」がある。画像全体での色差は、表示データの文字部分において認識した色の差を意味する。画像全体での画素値の差は、表示データの文字部分の各画素の値の差を意味する。
画面主体のコンテンツ自体のキャプチャの判断項目は、「画像全体での色差」と「画像全体での画素値の差」がある。画像全体での色差は、表示データの画像部分において認識した色の差を意味する。画像全体での画素値の差は、表示データの画像部分の各画素の値の差を意味する。
OCR結果の判断項目は「文字の認識率」と「文字の誤認識率」がある。文字の認識率は、OCRにより認識した文字の認識率を示す。文字の誤認識率は、OCRにより認識した文字の誤認識率を示す。
色分布の判断項目は「分布のずれ（色調の変化）」と「分布の範囲の違い（彩度の変化）」がある。分布のずれは、表示データの色の分布のずれを意味する。分布の範囲の違いは、表示データの色の分布の範囲の差異を意味する。
周波数成分の判断項目は「低周波数成分の変化（エッジ強調・ボケの増減）」と「高周波数成分の変化（エッジ強調・ボケの増減）」がある。低周波数成分の変化は、画像を空間周波数領域へ変換した周波数領域において低周波数部分のエッジ強調の度合い、エッジ部分のボケの増減を意味する。高周波数成分の変化は、画像を空間周波数領域へ変換した周波数領域において高周波数部分のエッジ強調の度合い、エッジ部分のボケの増減を意味する。
エッジ情報の判断項目は「エッジ部分の増減（エッジ強調・ボケの増減）」がある。エッジ部分の増減は、表示データから検出されたエッジ部分のエッジ強調の度合い、エッジ部分のボケの増減を意味する。
「判断基準」は、判断項目に対して、どの程度変化、差があったときに品質が同期していると判断するかを示す情報が記憶されている。
文字主体のコンテンツ自体のキャプチャの判断基準は、「画像全体での色差が５００以内である」ことと「画像全体での画素値の差が５００以内である」ことがある。画像全体での色差が５００以内であることは、表示データの文字部分において認識した色の差が５００以内である場合に品質の差が小さいと判断できることを意味する。画像全体での画素値の差が５００以内であることは、表示データの文字部分の各画素の値の差が５００以内である場合に品質の差が小さいと判断できることを意味する。
画面主体のコンテンツ自体のキャプチャの判断基準は、「画像全体での色差が５００以内である」ことと「画像全体での画素値の差が５００以内である」ことがある。画面全体での色差が５００以内であることは、表示データの画像部分において認識した色の差が５００以内である場合に品質の差が小さいと判断できることを意味する。画像全体での画素値の差が５００以内であることは、表示データの画像部分の各画素の値の差が５００以内である場合に品質の差が小さいと判断できることを意味する。
OCR結果の判断基準は「文字の認識率の差が５％以内である」ことと「文字の誤認識率の差が５％以内である」ことがある。文字の認識率の差が５％以内であることは、OCRにより認識した文字の認識率の差が５％以内である場合に品質の差が小さいと判断できることを意味する。文字の誤認識率の差が５％以内であることは、OCRにより認識した文字の誤認識率の差が５％以内である場合に品質の差が小さいと判断できることを意味する。
色分布の判断基準は「白色点を基準とした主とする色方向に差がない」ことと「白色点を基準とした分布の面積差が小さい」ことがある。白色点を基準とした主とする色方向に差がないことは、表示データの色の分布のずれを判断する際に、白色点を基準として、所定の方向の色分布に差がない場合に品質の差が小さいと判断できることを意味する。白色点を基準とした分布の面積差が小さいことは、表示データの色の分布のずれを判断する際に、白色点を基準として、色分布の面積に差がない場合に品質の差が小さいと判断できることを意味する。
周波数成分の判断基準は「低周波数成分の振幅の差が１０％以内である」ことと「高周波数成分の振幅の差が１０％以内である」ことがある。低周波数成分の振幅の差が１０％以内であることは、画像を空間周波数領域へ変換した周波数領域において低周波数部分の振幅の差が１０％以内である場合に品質の差が小さいと判断できることを意味する。高周波数成分の振幅の差が１０％以内であることは、画像を空間周波数領域へ変換した周波数領域において高周波数部分の振幅の差が１０％以内である場合に品質の差が小さいと判断できることを意味する。
エッジ情報の判断基準は「エッジ情報の画素値の差が１００以内」であることがある。エッジ情報の画素値の差が１００以内であることは、表示データから検出されたエッジ部分の画素値の差が１００以内である場合に品質の差が小さいと判断できることを意味する。
上述した判断基準は一例であり、図２２に示した判断基準とは異なる判断基準が設定されてもよい。
外部入力装置４０が接続された通信端末１０で、この外部入力装置４０からの表示データを受信し、他の通信端末へ送信する場合について説明する。
通信端末１０は、他の通信端末へ表示データを送信する。
通信端末１０の表示画像解析部１４ｃは、対象となる品質情報に対応する項目情報について、他の通信端末へ送信した表示データの品質を解析し、解析結果（第１の解析結果）を得る。対象となる品質情報は予め設定される。
他の通信端末は、通信端末１０から表示データを受信する。他の通信端末の表示画像解析部１４ｃは、対象となる品質情報に対応する項目情報について、表示データの品質を解析し、解析結果（第２の解析結果）を得る。対象となる品質情報は予め設定される。他の通信端末は、通信端末１０へ、第２の解析結果を送信する。
通信端末１０は、他の通信端末から第２の解析結果を受信する。通信端末１０の品質同期判断部１４dは、他の通信端末からの第２の解析結果と、表示画像解析部１４ｃにより得られる第１の解析結果とを比較し、品質同期判断基準２６に基づいて、品質の差が小さいか否かを判断することにより、品質が同期しているか否かについて判断する。
通信端末１０は、品質の差が小さいと判断した場合データの送信を継続し、品質の差が大きいと判断した場合所定のアラームを送信する。
〔動作手順〕
図２６は、通信端末同士がセッションを確立する処理を示すフローチャート図の一例である。参加者が図２に示されている操作ボタン１０８を押下して通信端末１を選択すると、図４に示されている操作入力受付部１２は、通信端末２との遠隔通信を開始する要求を受け付ける。
S1： 通信端末１の送受信部１１は、開始要求情報を遠隔通信管理システム５０に送信する。開始要求情報には、要求元の通信端末１の端末ＩＤ「０１ａａ」、および、宛先の通信端末２の端末ＩＤ「０１ｄｂ」が含まれる。これにより、遠隔通信管理システム５０の送受信部５１は、開始要求情報を受信すると共に、送信元である通信端末１のＩＰアドレス「１．２．１．３」を把握することになる。
S2： 遠隔通信管理システム５０の端末ＩＰアドレス抽出部５６ｂは、要求元の通信端末１から送られてきた開始要求情報に含まれている要求元の通信端末２の端末ＩＤ、および、宛先の通信端末２の端末ＩＤに基づいて、端末管理テーブル（図１０参照）を検索することにより、対応するそれぞれの通信端末１、２のＩＰアドレスを抽出する。
S3： 次に、遠隔通信管理システム５０の送受信部５１は、通信ネットワーク２を介して中継装置３０へ、中継を開始する旨の要求が示された中継開始要求情報を送信する。この中継開始要求情報には、中継される要求元の通信端末１および宛先の通信端末２の各ＩＰアドレス（「１．２．１．３」，「１．３．２．４」）が含まれている。これにより、中継装置３０は、通信端末１，２の間で、低解像度、中解像度、および高解像度の３つ画像データ、並びに、音声データを遠隔通信するためのセッションを確立する。これにより、通信端末１，２は、テレビ会議を開始することができる。
S4： 中継装置３０は、通信端末１，２の間で、画像データ、並びに、音声データを遠隔通信するためのセッションを確立する。具体的には、通信端末１は中継装置３０と通信端末２のＩＰアドレスを取得し、通信端末２は中継装置３０と通信端末１のＩＰアドレスを取得する。
S5： 通信端末１の送受信部１１はセッション確立イベントを外部入力装置４０に送信する。セッション確立イベントは、通信端末間でセッションが確立したことを通知する情報である。
図２７は、通信端末１０間で画像データおよび音声データを送受信する処理を示したシーケンス図の一例である。通信端末１０から２つ（通信端末１と通信端末２）を取り出しこの２つの端末間で、テレビ会議を行うために、画像データおよび音声データを送受信する処理を説明する。
まず、通信端末１は、撮像部１４ａで撮像された被写体の画像データ、および音声入力部１５ａで入力された音声の音声データを、送受信部１１から通信ネットワーク２を介して中継装置３０へ送信する（ステップＳ８１）。なお、本実施形態では、低解像度、中解像度、および高解像度の３つから成る高画質の画像データ、並びに、音声データを送信している。これにより、中継装置３０では、送受信部３１で上記３つの解像度の画像データおよび音声データを受信する。そして、データ品質確認部３３が、通信端末２のＩＰアドレス「１．３．２．４」を検索キーとして、変更品質管理テーブル（図７参照）を検索し、対応した中継する画像データの画質を抽出することで、中継する画像データの画像の品質を確認する（ステップＳ８２）。本実施形態では、確認された画像データの画像の画質が「高画質」であり、送受信部３１で受信した画像データの画質と同じであるため、そのままの画質の画像データ、およびそのままの音質の音声データで、通信端末２に転送する（ステップＳ８３）。これにより、通信端末２は、送受信部１１で画像データおよび音声データを受信し、画像表示制御部１４ｂがディスプレイ１００に上記画像データに基づく画像を表示させると共に、音声出力部１５ｂが音声データに基づく音声を出力させることができる。
なお、不図示だが、中継装置３０は品質を変更した場合又は品質変更したか否かに関係なく映像データを通信端末１に返送してもよい。こうすることで、通信端末１がディスプレイ１００に表示する映像を他の通信端末２と同じ品質にすることができる。
次に、通信端末２の遅延検出部１７は、送受信部１１で受信された画像データの受信の遅延時間を一定時間毎（例えば、１秒毎）に検出する（ステップＳ８４）。なお、本実施形態では、遅延時間が２００（ｍｓ）である場合について、以下説明を続ける。
通信端末２の送受信部１１は、通信ネットワーク２を介して遠隔通信管理システム５０へ、遅延時間「２００（ｍｓ）」を示す遅延情報を送信する（ステップＳ８５）。
これにより、遠隔通信管理システム５０は、遅延時間を把握すると共に、遅延情報の送信元である通信端末２のＩＰアドレス「１．３．２．４」を把握することができる。
次に、遠隔通信管理システム５０の遅延時間管理部６０は、上記通信端末２のＩＰアドレス「１．３．２．４」を検索キーとして、端末管理テーブル（図１０参照）を検索することで、対応する端末ＩＤ「０１ｄｂ」を抽出し、更に、セッション管理ＤＢ５００５のセッション管理テーブル（図１２参照）において、上記端末ＩＤ「０１ｄｂ」のレコードにおける遅延時間のフィールド部分に、上記遅延情報で示されている遅延時間「２００（ｍｓ）」を記憶して管理する（ステップＳ８６）。
次に、品質決定部５８は、上記遅延時間「２００（ｍｓ）」を検索キーとして、品質管理テーブル（図１４参照）を検索し、対応する画像データの画質「中画質」を抽出することで、画質を「中画質」に決定する（ステップＳ８７）。
次に、送受信部５１は、セッション管理テーブル（図１２参照）において、上記端末ＩＤ「０１ｄｂ」に関連付けられている中継装置ＩＤ「１１１ａ」を検索キーとして、中継装置管理ＤＢテーブル（図８参照）を検索し、対応する中継装置３０のＩＰアドレス「１．２．１．２」を抽出する（ステップＳ８８）。そして、送受信部５１は、通信ネットワーク２を介して中継装置３０へ、上記ステップＳ８７によって決定された画像データの画質「中画質」を示す品質情報を送信する（ステップＳ８９）。この品質情報には、上記ステップＳ８６において検索キーとして用いた通信端末２のＩＰアドレス「１．３．２．４」が含まれている。これにより、中継装置３０では、変更品質管理部３４が、変更品質管理テーブル（図７参照）に、送信先の通信端末１０（ここでは、通信端末２）のＩＰアドレス「１．３．２．４」、および中継される画像データの画質「中画質」を関連付けて記憶して管理する（ステップＳ９０）。
次に、通信端末１は、引き続き上記ステップＳ８１と同様に、中継装置３０へ、低画質、中画質、および高画質の３つから成る高画質の画像データ、並びに、音声データを送信する（ステップＳ９１）。これにより、中継装置３０では、上記ステップＳ８２と同様に、データ品質確認部３３が、通信端末２のＩＰアドレス「１．３．２．４」を検索キーとして、変更品質管理テーブル（図７参照）を検索し、対応した中継する画像データの画質「中画質」を抽出することで、中継される画像データの画像の品質を確認する（ステップＳ９２）。本実施形態では、確認された画像データの画質が「中画質」であり、送受信部３１で受信された画像データの画質「高画質」よりも低くなるため、データ品質変更部３５は、画像データの画質を「高画質」から「中画質」に抑制することで、画像データの画像の品質を変更する（ステップＳ９３）。そして、送受信部３１は、通信ネットワーク２を介して通信端末２へ、上記画像データの画質が「中画質」に変更された画像データ、および音声の音質が変更されていない音声データを送信する（ステップＳ９４）。このように、画像データを受信する通信端末２で、受信の遅延が生じた場合には、中継装置３０は画像の品質を変更し、テレビ会議に参加している人に違和感を与えないようにすることができる。
＜表示データの送信＞
図２８（ａ）は外部入力装置４０から通信端末に表示データを送信する手順のフローチャート図の一例である。
外部入力装置４０と通信端末１０とが互いに接続されると、外部入力装置４０の接続検出部４２が、通信端末１０が接続されたことを検知する（Ｓ１０）。接続検出部４２は、例えば外部装置Ｉ／Ｆ２１５が電圧や信号を検知したことから通信端末１０とデータの送受信が可能となったことを検出する。
接続検出部４２は表示装置４００に表示データの共有開始を受け付けるメニューを表示させ、参加者がこのメニューを押下すると、操作入力受付部４６が共有開始という操作を受け付ける（Ｓ２０）。
操作入力受付部４６が共有開始という操作を受け付けると、表示データを送信するため表示データ取得部４５１が表示データを取得する（Ｓ３０）。表示データはテレビ会議に使用される画像データなので変化するものである。このため、表示データ取得部４５１は、定期的に（例えば１秒に１回）、又は、画面の画像データの変化を検出して表示データを取得する。
表示データ取得部４５１が表示データを取得すると、表示データ送信部４５２が、表示データ取得部４５１が取得した表示データを、通信端末１を介して通信端末２に対して送信する（Ｓ４０）。
テレビ会議に参加している（例えば、宛先リスト管理テーブルに登録されている）各通信端末１０と接続された外部入力装置４０は全て表示データを送信する可能性があり、上記のような手順で表示データを送信する。
図２８（ｂ）は外部入力装置４０から通信端末に表示データを送信する手順のフローチャート図の別の一例である。図２８（ｂ）では宛先の通信端末２とのセッションが確立していることを確認して表示データを宛先の通信端末に送信する。
外部入力装置４０と通信端末１０とが互いに接続されると、外部入力装置４０の接続検出部４２が、通信端末１０が接続されたことを検知する（Ｓ１０）。接続検出部４２は、例えば外部装置Ｉ／Ｆ２１５が電圧や信号を検知したことから通信端末１０とデータの送受信が可能となったことを検出する。
接続検出部４２が、通信端末１０が接続されたことを検知すると、外部入力装置１のメニュー制御部４４は、図３２（ａ）に示す画面を表示装置４００に表示する（Ｓ１２）。図３２の各画面は外部入力装置１に表示される画面例を示す。図３２（ａ）に示すようにメニュー４０１には何も文字は表示されず、メニュー４０２には「会議が行われていません」というメッセージが表示されている。このメッセージは、セッションが確立されていないことを示す。これにより参加者は、会議が行われていないことを把握できる。
メニュー制御部４４は通信端末１からセッション確立イベントが通知されているか否かを判定する（Ｓ１４）。このセッション確立イベントは、図２６のＳ５に対応し，通信端末１，２間でセッションが確立されたことを検知すると通信端末１０から外部入力装置４０へ通知されるようになっている。
セッション確立イベントが通知されていない場合（Ｓ１４のＮｏ）、外部入力装置４０は図３２（ａ）の画面を維持する。
セッション確立イベントが通知されている場合（Ｓ１４のＹｅｓ）、外部入力装置４０のメニュー制御部４４は図３２（ｂ）の画面を表示する（Ｓ１６）。
図３２（ｂ）では、メニュー４０１として「共有開始」ボタンが、共有状態４０２として「共有していません」というメッセージが表示されている。図３２（ｂ）の画面は、メニュー４０２に共有が行われていないことを示すと共に、メニュー４０１に共有開始の操作入力が可能なことを示している。「共有開始」ボタンは参加者がタッチパネルを押下することで直接、又は、キーボード２１１やマウス２１２を操作して押下することができる。
操作入力受付部４６が共有開始という操作を受け付けると、表示データを送信するため表示データ取得部４５１が通信端末１から表示データを取得する（Ｓ３０）。表示データはテレビ会議に使用される画像データなので変化するものである。このため、表示データ取得部４５１は、定期的に（例えば１秒に１回）、又は、画面の画像データの変化を検出して表示データを取得する。
表示データ取得部４５１が表示データを取得すると、表示データ送信部４５２が、表示データ取得部４５１が取得した表示データを、通信端末１を介して通信端末２に対して送信する（Ｓ４０）。
なお、すでにセッションが確立されている状態で、通信端末１に外部入力装置４０が接続された場合、接続の直後にセッション確立イベントが外部入力装置４０に通知されるので、図３２（ａ）の画面を飛ばして図３２（ｂ）の画面が表示される。
図２９は、通信端末１で撮像されている映像データ、通信端末２で撮像されている映像データ、および、通信端末１、２に接続された外部入力装置１、２から送信される表示データの送信のシーケンス図の一例である。なお、音声データは省略したが映像データと共に送受信される。
S1：通信端末１で撮像されている映像データは、いったん、画像表示制御部１４ｂによって送受信部１１を介して中継装置３０に送信される。
S1-1、S1-2:中継装置３０の送受信部３１は映像データを受信すると、映像データの品質変更処理を行った後に、送受信部３１によって各通信端末１、２に映像データを送信する。
S2：通信端末２が撮像している映像データも同様に、いったん、中継装置３０に送信される。
S2-1、S2-2：中継装置３０は、映像データの品質変更処理を行った後に、送受信部３１によって各通信端末１，２に映像データを送信する。
S3：外部入力装置１から表示データを送信する場合，表示データは，外部入力装置１の表示データ送信部４５２によって、送受信部４１を経由して通信端末１に送信される。（この処理は図２８のステップ４０の処理に相当する。）
S3-1：通信端末１の外部情報送受信部１８で受信された表示データは、映像データと同様にいったん、中継装置３０に送信される。
S3-1-1、S3-1-2：中継装置３０は、各通信端末１、２に表示データを送信する。
S4：外部入力装置２から表示データを送信する場合も同様に、表示データは、外部入力装置２の表示データ送信部４５２によって、送受信部４１を経由して通信端末２に送信される。
S4-1：通信端末２の外部情報送受信部１８で受信された表示データは、映像データと同様にいったん、中継装置３０に送信される。
S4-1-1、S4-1-2：中継装置３０は、各通信端末１、２に表示データを送信する。
なお、中継装置３０は固定でも、複数の中継装置３０の選択された１つでもよい。また、図２９では、説明を簡単にするために通信端末を２つにしているが、３つ以上でも同様の手順で送信できる。また、外部入力装置１は通信端末２にも接続可能であり、外部入力装置１は表示データを通信端末２側から送信してもよい。
このように、本実施形態の遠隔通信システム１は、外部入力装置４０の表示データを通信端末１０を経由して送信するので、映像データと共通のネットワーク基盤技術を用意するだけで、表示データを他の通信端末１０に送信することができる。
また、表示データがどの外部入力端末４０から送信されても、中継装置３０を経由することによって、各端末で受信するまでの遅延時間はほぼ同じになる。そのため、説明者が資料のページを変更しても、ほぼ同時期に各拠点の通信端末１０の表示内容が変更されるため、拠点間のコミュニケーションが阻害されることが少ない。
＜表示データの共有開始処理＞
図３０は、図２９のＳ３又はＳ４において外部入力装置１、２が表示データの送信を開始する際の制御手順を示すシーケンス図の一例である。
ところで、上述したように通信端末１０が表示データを受信するまでの表示フラグは「UNSHARED」である。したがって、通信端末１０のディスプレイ１００の画面には、映像データのみが表示される。
図３１（ａ）は、通信端末１０が表示データを受信するまでのディスプレイ１００の画面の状態を模式的に示す図の一例である。配置情報管理表２３の表示フラグが「UNSHARED」であることは、配置情報選択部２１が配置情報No1を選択している状態である。このため、図３１（ａ）に示すように、領域１、２は中継装置３０から受信した映像データが表示される。配置情報選択部２１が、領域１に自機の映像データを表示するか、他機の映像データを表示するかは配置情報管理表２３の説明で述べたとおりであるが、参加者の操作により切り替えるように実現してもよい。
また、通信端末１０が配信イベントを通知されるまで、表示データ制御部２２は何も表示制御フラグを外部入力装置４０に送信しないか、又は、「UNSHARED」の表示制御フラグを外部入力装置４０へ送信している。外部入力装置４０のメニュー制御部４４は、起動直後の状態として又は「UNSHARED」の表示制御フラグに応じたメニューを表示装置４００に表示する。
図３２は外部入力装置４０に表示されるいくつかの画面例を示す図である。図３２（ａ）についてはすでに説明した。図３２（ｂ）は外部入力装置４０に表示されるメニュー４０１および共有状態４０２の一例を示す。図３２（ｂ）では、メニュー４０１として「共有開始」ボタンが、共有状態４０２として「共有していません」というメッセージが表示されている。「共有開始」ボタンは参加者がタッチパネルを押下することで直接、又は、キーボード２１１やマウス２１２を操作して押下することができる。
なお、図３２（ｂ）では、外部入力装置４０が有する資料の表示データが表示され、その他、状態表示のウィンドウや別の資料の表示データが表示されている。参加者が、外部通信端末４０が表示中の表示データを他の通信端末２と共有する場合、「共有開始」ボタンを押下する。これにより、外部入力装置４０が表示データの送信を開始する。
図３０に戻り、
S１：操作入力受付部４６が、参加者による外部入力装置１に表示されている項目「共有開始」ボタンの押下を受け付ける。この処理は図２８のＳ２０に相当する。
S2：表示データ送信部４５２は通信端末１に共有開始を通知し、表示データの送信を開始する。この処理は、図２８のＳ４０、図２９のＳ３、Ｓ４に相当する。
S2-1：通信端末１の表示データ制御部２２は中継装置３０に対して配信開始を要求し，表示データを中継装置３０に送信する。この処理は、図２９のS3-1に相当する。
S3：中継装置３０のデータ品質変更部は表示データの品質を変更して「配信開始イベント」を通信端末１に通知し、表示データの配信を開始する。この処理は、図２９のＳ3-1-1、S4-1-1に相当する。
S3-1：通信端末１の配置情報選択部２１は「配信開始イベント」を取得すると、イベントフラグテーブル２４に従い共有フラグを「SHARED」に設定する。
S3-2：通信端末１の配置情報選択部２１は配置情報管理表２３に従って配置情報No2を選択して、画像表示制御部１４ｂに、領域１〜４毎に映像データおよび表示データの割り当てを指示する。
これにより、ディスプレイ１００の状態は図３１（ａ）から図３１（ｂ）の状態に変化する。図３１（ｂ）では、領域１に表示データが表示され、領域２と３に映像データが表示されている。
S3-3：ステップＳ３で通信端末１には「配信開始イベント」が通知されているため、表示データ制御部２２は、イベントフラグテーブル２４に従い表示制御フラグを「SHARED」に設定して外部入力装置１に通知する。
Ｓ3-3-1：外部入力装置１のメニュー制御部４４は、図２１（ａ）の遷移条件テーブル４３１に従って、表示制御フラグに応じてメニュー４０１の表示を変更するか否かを判定する。
S3-3-2：図３２（ｂ）に示したように「共有開始」ボタンが表示されている状態で、外部入力装置２が表示制御フラグ「SHARED」を受信したため、メニュー制御部４４は表示装置４００のメニュー４０１を「共有停止」ボタンへ変更させる。図３２（ｃ）は「共有停止」ボタンが表示された表示装置４００の画面例を示す。
S3-3-3：また、メニュー制御部４４は、表示制御フラグ「SHARED」を受信したため、図３２（ｃ）に示すように共有状態４０２に「この表示を共有しています」と表示する。
S4：中継装置３０のデータ品質変更部は表示データの品質を変更して「他からの配信開始イベント」を通信端末２に通知し、表示データの配信を開始する。この処理は、図２９のS3-1-2、S4-1-2に相当する。
S4-1：通信端末２の表示データ制御部２２は「他からの配信開始イベント」が通知された場合、配信停止を中継装置３０に要求するか否かを判定する。この判定は、すでに通信端末２が表示データを共有している場合に、どの表示データを表示するかを判定するために必要となる。この判定方法については後述するが、ここでは共有フラグは「UNSHARED」であるため配信停止要求は行わない。
S4-2：通信端末２の配置情報選択部２１は「他からの配信開始イベント」を受信すると、イベントフラグテーブル２４に従い配置情報管理表２３の共有フラグを「SHARED」にセットする。
S4-3：通信端末２の配置情報選択部２１は配置情報管理表２３から共有フラグが「SHARED」に設定されたため配置情報No2を選択して、画像表示制御部１４ｂに、領域１〜４毎に映像データおよび表示データの割り当てを指示する。これにより、ディスプレイ１００の状態は図３１（ａ）から図３１（ｂ）の状態に変化する。
S4-4：通信端末２はステップ４で「他からの配信開始イベント」が通知されているため、表示データ制御部２２はイベントフラグテーブル２４に従い表示制御フラグを「SHARED＿ANOTHER」に設定し外部入力装置２に通知する。
S4-4-1：外部入力装置１のメニュー制御部４４は、図２１（ａ）の遷移条件テーブル４３１に従って、表示制御フラグに応じてメニュー４０１の表示を変更するか否かを判定する。図３２（ｂ）に示したように「共有開始」ボタンが表示されている状態で、外部入力装置２が表示制御フラグ「SHARED＿ANOTHER」を受信したため，メニュー制御部４４は表示装置４００のメニュー４０１を変更しない。
S4-4-2：メニュー制御部４４は表示制御フラグを参照して表示装置４００に「他の表示を共有しています」という共有状態４０２を表示する。
図３２（ｄ）は通信端末２が通信端末１の表示データを共有している場合に、外部入力装置２の表示装置４００に表示される画面例を示す。図３２（ｄ）では、メニュー４０１が「共有開始」であるが、共有状態４０２に「他の表示を共有しています」と表示されている。
以上説明したように、外部入力端末1では、メニュー４０１が「共有開始」ボタンから「共有停止」ボタンに変更され、共有状態４０２は「共有していません」から「この表示を共有しています」に変更される。また、外部入力端末２では、メニュー４０１は変更されず、共有状態４０２が「共有していません」から「他の表示を共有しています」に変更される。したがって、参加者はメニュー４０１を操作することで、表示データを共有することができ、共有状態４０２を目視することで、操作対象の通信端末１０が自機と接続された外部入力装置４０と表示データを共有しているか否かを一目で把握できる。
＜共有する表示データの切り替え＞
図３０の処理の後、外部入力装置２から表示データを送信する際の処理手順について説明する。通信端末１および２のディスプレイ１００には図３１（ｂ）が、外部入力装置１の表示装置４００には図３２（ｃ）が、外部入力装置２の表示装置４００には図３２（ｄ）がそれぞれ表示されている。
図３３は、外部入力装置２が表示データの送信を開始する際の制御手順を示すシーケンス図の一例である。
Ｓ１〜Ｓ４については、図３０において外部入力装置１が外部入力装置２に変わっただけなので説明を省略する。
S4-1：通信端末１の表示データ制御部２２は「他からの配信開始イベント」が通知された場合、中継装置３０に配信停止を要求するか否かを判定する。
S4-2：後述するように、通信端末１の共有フラグは「SHARED」であるため、表示データ制御部２２は中継装置３０に配信停止を要求する。中継装置３０のデータ品質変更部は、後述する処理を行い、表示データの送信を停止する（図２９のS3-1-1、S3-1-2で送信していた表示データの送信を停止する。）。なお、ここでは中継装置３０は通信端末２から配信開始が要求されたので、中継装置３０が配信している表示データが他にあるため、配信停止イベントは発生しない。
S4-3：通信端末１の表示データ制御部２２は、「他からの配信開始イベント」に対応するため、表示データの送信停止を外部入力装置１に要求する。S4-6で次述する、これにより、共有対象の表示データを１つに制限できる。表示制御フラグ「SHARED＿ANOTHER」をもって、表示データの送信停止を要求してもよい。
S4-3-1：外部入力装置１の表示データ送信部４５２は表示データの送信を停止する。この停止により図２９のステップ3および3-1の表示データの送信が停止される。
S4-4：通信端末１の配置情報選択部２１は、「他からの配信開始イベント」を受信したため、イベントフラグテーブル２４に従い共有フラグを「SHARED」に設定する。
S4-5：通信端末１の配置情報選択部２１は配置情報管理表２３の配置情報No2を選択して画像表示制御部１４ｂに、領域１〜４と表示データと映像データの対応を指示する。
S4-6：また、通信端末１にはステップS4で「他からの配信開始イベント」が通知されているため、イベントフラグテーブル２４に従い表示データ制御部２２は表示制御フラグ「SHARED＿ANOTHER」を外部入力装置１に通知する。
S4-6-1：外部入力装置１のメニュー制御部４４は図２１（ａ）の遷移条件テーブル４３１に基づき、メニュー４０１の表示を変更するか否かを判定する。
S4-6-2：メニュー制御部４４が「共有停止」を表示している状態で、表示制御フラグ「SHARED＿ANOTHER」の通知を受けたため、メニュー制御部４４は表示装置４００に「共有開始」ボタンを表示させる。
S4-6-3：また、メニュー制御部４４は、表示制御フラグ「SHARED＿ANOTHER」を参照して表示装置４００に共有状態４０２に「他の表示を共有しています」というメッセージを表示する。S4-6-2とS4-6-3により外部入力装置１の表示装置４００は図３２（ｄ）のようになる。
S3-1：一方、通信端末２の配置情報選択部２１は配信開始イベントを取得すると、イベントフラグテーブル２４に従い共有フラグを「SHARED」に設定する。
S3-2：通信端末２の配置情報選択部２１は配置情報管理表２３に従って配置情報No2を選択して、画像表示制御部１４ｂに領域１〜４毎に映像データおよび表示データを割り当てる。すでに、図３０のS4-3で配置情報選択部２１は配置情報No2を選択しているので、配置情報No2が再度選択される。
S3-3：ステップＳ３で通信端末２には配信開始イベントが通知されているため、表示データ制御部２２はイベントフラグテーブル２４に従い表示制御フラグを「SHARED」に設定して外部入力装置２に通知する。
Ｓ3-3-1：外部入力装置２のメニュー制御部４４は、図２１（ａ）の遷移条件テーブル４３１に従って、表示制御フラグに応じてメニュー４０１の表示を変更するか否かを判定する。
S3-3-2：図３２（ｄ）に示したように「共有開始」ボタンが表示されている状態で、外部入力装置２が表示制御フラグ「SHARED」を受信したため、メニュー制御部４４は表示装置４００のメニュー４０１を「共有停止」ボタンに変更する。
S3-3-3：また、メニュー制御部４４は、表示制御フラグ「SHARED」を受信したため、図３２（ｃ）に示すように共有状態４０２に「この表示を共有しています」と表示する。したがって、表示装置４００の画面は図３２（ｃ）になる。
以上のように、図３３の処理が終了すると、外部入力端末１の表示装置４００は図３２（ｄ）のようになり、外部入力端末２の表示装置４００は図３２（ｃ）のようになる。すなわち、外部入力端末１では、メニュー４０１が「共有停止」から「共有開始」に変更され、共有状態４０２は「この表示を共有しています」から「他の表示を共有しています」に変更される。また、外部入力端末２では、メニュー４０１が「共有開始」から「共有停止」に変更され、共有状態４０２が「他の表示を共有しています」から「この表示を共有しています」に変更される。
S4-3で説明したように、外部入力装置１は中継装置３０からの「他からの配信開始イベント」に応じて表示データの送信を停止するので、各通信端末１０が表示する表示データを１つに制限できる。
＜図３０、図３３のＳ４−１の配信停止要求の判定＞
図３４は、通信端末１０が「他からの配信開始イベント」を受信した場合に配信停止を要求するか否かを判定する手順を示すフローチャートの一例である。
この処理は、通信端末１０が他から配信開始イベントを受信すると作動する（Ｓ４１０）。
表示データ制御部２２は、「他からの配信開始イベント」を受信すると、共有フラグが「SHARED」に設定されているか否かを判定する（Ｓ４２０）。共有フラグが「SHARED」であることは、自機に接続された外部入力装置１又はそれ以外の外部入力装置２が配信している表示データを共有している状態なので、通信端末１０はそのままでは「他からの配信開始イベント」に対応できない。
このため、共有フラグが「SHARED」の場合（Ｓ４２０のＹｅｓ）、表示データ制御部２２は中継装置３０に配信停止を要求する（Ｓ４３０）。中継装置３０は配信停止を要求した通信端末１０に対する表示データの配信を停止する。
＜図３３のＳ４−２の判定＞
中継装置３０は通信端末１０からの配信停止の要求に対し、通信端末１０の表示フラグや表示制御フラグを更新するため、他の全ての通信端末に「配信停止イベント」又は「他からの配信停止イベント」を通知するか否かを判定する。
図３５は、中継装置３０の判定手順を示すフローチャート図の一例である。
まず、中継装置３０は、配信停止が要求された表示データの配信を停止する（Ｓ５１０）。
次に、中継装置３０は、配信している表示データがまだあるか否かを判定する（Ｓ５２０）。すなわち、中継装置３０にテレビ会議に参加している拠点から表示データが送信されており、それを配信しているか否かを判定する。
配信している表示データがまだある場合（Ｓ５２０のＹｅｓ）、その表示データを配信するため、中継装置３０は通信端末に「配信停止イベント」を一切通知しない。
配信している表示データがもうない場合（Ｓ５２０のＮｏ）、全ての通信端末の表示フラグおよび表示制御フラグを更新するため、中継装置３０は、配信停止を要求した通信端末に「配信停止イベント」を通知し、他の通信端末に「他からの配信停止イベント」を通知する（Ｓ５３０）。
こうすることで、配信している表示データがまだある場合には、通信端末１、２は共有フラグが「SHARED」のまま表示データの配信を受け付けることができ、配信している表示データがない場合には、外部入力装置１、２に共有制御フラグ「UNSHARED」を通知できる。
〔表示データの送信停止〕
次に、図３６のシーケンス図を用いて図３３の処理が終了した状態で、外部入力装置２が表示データの送信を停止する手順を説明する。参加者が自機の外部入力装置２から表示データの送信を停止したい場合、参加者は外部入力装置２に表示されているメニュー４０１の「共有停止」ボタンを押下する。
S1：外部入力装置２の操作入力受け付け部４６は「共有停止」ボタンの押下を受け付ける。
S2：表示データ送信部４５２は、通信端末２に送信停止を通知する。
S2-1：通信端末２の表示データ制御部２２は中継装置３０に対して配信停止を要求する。
中継装置３０のデータ品質変更部は、図３５に従って「配信停止イベント」を通知するか否かを判定する。
S3、S4：すでに中継装置３０が配信している表示データは通信端末２から送信される表示データだけなので、中継装置３０は「配信停止イベント」を通信端末２に（S3）、「他からの配信停止イベント」を通信端末１に配信する（S4、図３５のS530）。これにより、図２９のS4-1-1、S4-1-2の表示データの配信が停止される。なお、中継装置３０は「配信停止イベント」を送信する際、図３５のＳ５１０の表示データの配信の停止を送信しなくてもよいし、「配信停止イベント」と重複するがＳ５１０の表示データの配信の停止を送信してもよい。
S3-1：通信端末２の表示データ制御部２２は、「配信停止イベント」を受信すると、表示データの送信停止を外部入力装置２に要求する。
S3-1-1：外部入力装置２の表示データ送信部４５２は、表示データの送信を停止する。この停止により、図２９のS-4、S4-1の表示データの送信が停止する。なお、Ｓ２で表示データの送信を停止してもよい。
S3-2：通信端末２の配置情報選択部２１は、図２０のイベントフラグテーブル２４に従って共有フラグを「UNSHARED」に設定する。
S3-3：通信端末２の配置情報選択部２１は、共有フラグの設定に応じて、配置情報管理表２３の配置情報No1を選択する。これにより、画像表示制御部１４ｂは図３１（ａ）のように、領域１、２に映像データを割り当てて画面を表示する。
S3-4：また、S3で通信端末２には「配信停止イベント」が通知されているため、表示データ制御部２２はイベントフラグテーブル２４に基づき、表示制御フラグ「UNSHARED」を外部入力装置２に通知する。
S3-4-1：外部入力装置２のメニュー制御部４４は図２１（ａ）の遷移条件テーブル４３１に従い、メニュー４０１を変更するか否かを判定する。
S3-4-2：外部入力装置２が「共有停止」を表示している状態で、表示制御フラグ「UNSHARED」を受信したため、メニュー制御部４４は表示装置４００にメニュー４０１として「共有開始」ボタンを表示する。
S3-4-3：また、メニュー制御部４４は表示制御フラグを参照して表示装置４００に共有状態４０２のメッセージを表示する。表示制御フラグが「UNSHARED」の場合、メッセージは「共有していません」となる。
S４：S4.1〜4.3.1はステップ3.2〜3.4を適用できる。
S4-1：通信端末２の表示データ制御部２２は、「他からの配信停止イベント」を受信すると、図２０のイベントフラグテーブル２４に従って共有フラグを「UNSHARED」に設定する。すでに表示データの送信は停止されているので、表示データの送信停止を外部入力装置１に要求する必要はない。
S4-2：通信端末１の配置情報選択部２１は、共有フラグの設定に応じて、配置情報管理表２３の配置情報No1を選択する。これにより、画像表示制御部１４ｂは図３１（ａ）のように、領域１、２に映像データを割り当てて画面を表示する。
S4-3：また、S4で通信端末１には「他からの配信停止イベント」が通知されているため、表示データ制御部２２はイベントフラグテーブル２４に基づき、表示制御フラグ「UNSHARED」を外部入力装置１に通知する。
S4-3-1：外部入力装置１のメニュー制御部４４は図２１（ａ）の遷移条件テーブル４３１に従い、メニュー４０１を変更するか否かを判定する。
S4-3-2：外部入力装置１が「共有開始」を表示している状態で、表示制御フラグ「UNSHARED」を受信したため、メニュー制御部４４はそのまま「共有開始」ボタンの表示を継続する。
S4-3-2：また、メニュー制御部４４は表示制御フラグを参照して表示装置４００に共有状態４０２のメッセージを表示する。表示制御フラグが「UNSHARED」の場合、メッセージは「共有していません」となる。
以上の処理が終了したことで、外部入力端末１および外部入力端末２の表示装置４００は、いずれも図３２（ｂ）のようになる。外部入力端末1では、メニュー４０１が「共有開始」のまま変更されないが、共有状態４０２のメッセージは「他の表示を共有しています」から「共有していません」に変更される。また、外部入力端末２では、メニュー４０１が「共有停止」から「共有開始」に変更され、共有状態４０２のメッセージが「この表示を共有しています」から「共有していません」に変更される。
＜セッション切断時＞
図３７は、通信端末同士がセッションを切断する処理を示すフローチャート図の一例である。参加者が図２に示されている操作ボタン１０８を操作して会議の終了（セッションの切断）を指示すると、図４に示されている操作入力受付部１２は、通信端末２との会議の終了要求を受け付ける。操作入力受付部１２はセッション切断イベントを外部入力装置４０に通知する。この他、参加者が通信端末１０と外部入力装置４０を接続するＵＳＢケーブルを外した場合、通信端末１の電源を落とした場合も、外部入力装置４０はセッション切断イベントを検出又は取得する。
メニュー制御部４４は、図３２（ｂ）〜（ｄ）の画面を表示中、セッション切断イベントの通知を取得したか否かを判定している（Ｓ１１０）。セッション切断イベントの通知を取得していない場合（Ｓ１１０のＮｏ）、メニュー制御部４４は図３２（ｂ）〜（ｄ）の画面の表示を維持する。
セッション切断イベントの通知を取得した場合（Ｓ１１０のＹｅｓ）、メニュー制御部４４は図３２（ａ）の画面を表示する（Ｓ１２０）。この画面は会議が行われていないことを参加者に通知する画面である。参加者は「会議が行われていません」というメッセージにより、外部入力装置４０を操作する必要がないことを把握できる。
外部入力装置４０の表示データ送信部４５２は、表示データを送信している場合には、通信端末１を介して表示データを通信端末２に送信することを停止する（Ｓ１３０）。
また、表示データ取得部４５１は通信端末１又は２から表示データを取得することを停止する（Ｓ１４０）。
本実施形態の遠隔通信システム１は、外部入力装置４０に表示データを共有開始させるためのメニュー４０１を表示させることができるので、表示データを他の拠点と共有したいテレビ会議の参加者は「共有開始」ボタンを押下するという簡単な操作で、他の拠点に表示データを表示させることができる。したがって、他の拠点の参加者は共有したい表示データを選択するといったような操作を全く行うことなく、注目すべき表示データを特定することができる。
さらに、外部入力装置４０は共有状態４０２のメッセージを表示するので，会議の参加者は、現在、外部入力装置４０が表示装置４００に表示している表示データが共有されているか否かを確実に知ることができる。例えば、複数の拠点において、同じ資料を表示した複数の外部入力装置４０が通信端末に接続されている場合、参加者はどちらの拠点の資料が共有されているのかを直ちに判別でき、操作性を向上できる。
また、図３４の処理のように通信端末１０が他からの配信イベントの通知を受けた場合、自機に接続された外部入力装置４０に配信停止を要求するので、共有可能な表示データを１つに制限できる。これにより、参加者が複数の表示データの中から注目する表示データを選択する、といった操作が不要になり操作性を向上することができる。
〔表示データの品質判断について〕
図３８は、表示データの品質判断処理の一実施例を示す。
外部入力装置４０が接続された通信端末１０で、この外部入力装置４０からの表示データを受信し、他の通信端末へ送信する場合について説明する。通信端末１０で作成した表示データを他の通信端末へ送信する場合についても適用できる。
通信端末１０は、他の通信端末へ表示データを送信する。
他の通信端末は、通信端末１０から表示データを受信する。他の通信端末の表示画像解析部１４ｃは、対象となる品質情報に対応する項目情報について、表示データの品質を解析し、解析結果（第２の解析結果）を得る。
S3802:他の通信端末の表示画像解析部１４ｃは、第２の解析結果を得る際に、コンテンツの分類を開始する。
S3804:他の通信端末の表示画像解析部１４ｃは、表示データのOCRを実施する。
S3806:他の通信端末の表示画像解析部１４ｃは、表示データの周波数成分抽出を実施する。
S3808:他の通信端末の表示画像解析部１４ｃは、表示データの色分布抽出を実施する。
S3810：他の通信端末の表示画像解析部１４ｃは、S3904によるOCRの実施結果、S3906による色分布抽出の実施結果に基づいて、コンテンツを分類する。
＜コンテンツの分類＞
図３９は、コンテンツの分類の一例を示す。表示画像解析部１４ｃは、表示データの品質判断を行う際に使用するコンテンツ分類テーブルを備える。
「判断対象となるコンテンツの分類」は、品質判断を行うコンテンツの種類情報である。判断対象となるコンテンツの分類には、「文字主体（モノクロ）」と「文字主体（カラー）」と「図面主体（モノクロ）」と「図面主体（カラー）」と「文字＋図面（モノクロ）」と「文字＋図面（カラー）」とがある。これらは、一例であり、異なるように分類してもよい。
文字主体（モノクロ）は、文字主体のコンテンツであり、かつ表示データが白黒からなるものである。文字主体（カラー）は、文字主体のコンテンツであり、かつ表示データがカラーからなるものである。
図面主体（モノクロ）は、画像情報を主体とするコンテンツであり、かつ表示データが白黒からなるものである。図面主体（カラー）は、画像情報を主体とするコンテンツであり、かつ表示データがカラーからなるものである。
文字＋図面（モノクロ）は、文字と画像からなるコンテンツであり、かつ表示データが白黒からなるものである。文字＋図面（カラー）は、文字と画像からなるコンテンツであり、かつ表示データがカラーからなるものである。
「OCR結果」は、OCRにより抽出できる文字の有無である。
文字主体（モノクロ）のOCR結果は、「あり」である。文字主体のコンテンツであるため、OCRにより文字を抽出できると想定されるためである。文字主体（カラー）のOCR結果は、「あり」である。文字主体のコンテンツであるため、OCRにより文字を抽出できると想定されるためである。
図面主体（モノクロ）のOCR結果は、「なし」である。画像主体のコンテンツであるため、OCRにより文字を抽出できないと想定されるためである。図面主体（カラー）のOCR結果は、「なし」である。画像主体のコンテンツであるため、OCRにより文字を抽出できないと想定されるためである。
文字＋図面（モノクロ）のOCR結果は、「あり」である。文字と画像からなるコンテンツであるため、OCRにより文字を抽出できると想定されるためである。文字＋図面（カラー）のOCR結果は、「あり」である。文字と画像からなるコンテンツであるため、OCRにより文字を抽出できると想定されるためである。
「周波数成分の抽出結果」は、周波数成分の分布情報である。
文字主体（モノクロ）の周波数成分の抽出結果は、「高周波数成分のみ」である。文字主体のコンテンツであるため、色の変化が大きく、高周波数成分のみしか得られないと想定されるためである。文字主体（カラー）の周波数成分の抽出結果は、「高周波数成分のみ」である。文字主体のコンテンツであるため、色の変化が大きく、高周波数成分のみしか得られないと想定されるためである。
図面主体（モノクロ）の周波数成分の抽出結果は、「高周波数成分のみ」または「高周波数成分＋低周波数成分」である。画像主体のコンテンツであるため、色の変化が大きい部分のみからなる場合と、色の変化が大きい部分と色の変化が小さい部分からなる場合があり得るためである。図面主体（カラー）の周波数成分の抽出結果は、「高周波数成分のみ」または「高周波数成分＋低周波数成分」である。画像主体のコンテンツであるため、色の変化が大きい部分のみからなる場合と、色の変化が大きい部分と色の変化が小さい部分からなる場合があり得るためである。
文字＋図面（モノクロ）の周波数成分の抽出結果は、「高周波数成分＋低周波数成分」である。文字と画像からなるコンテンツであるため、色の変化が大きい部分と色の変化が小さい部分がありうるためである。文字＋図面（カラー）の周波数成分の抽出結果は、「高周波数成分＋低周波数成分」である。文字と画像からなるコンテンツであるため、色の変化が大きい部分と色の変化が小さい部分があり得るためである。
「色分布抽出結果」は、表示データの色の分布を示す情報である。
文字主体（モノクロ）の色分布の抽出結果は、「分布なし」である。モノクロであるため、色の変化が大きく、色の分布はないと想定されるためである。ただし、輝度情報は得られる場合がある。文字主体（カラー）の色分布の抽出結果は、「分布あり」である。カラーであるため、色の変化があると想定されるためである。
図面主体（モノクロ）の色分布の抽出結果は、「分布なし」である。モノクロであるため、色の変化が大きく、色の分布はないと想定されるためである。ただし、輝度情報は得られる場合がある。図面主体（カラー）の色分布の抽出結果は、「分布あり」である。カラーであるため、色の変化があると想定されるためである。
文字＋図面（モノクロ）の色分布の抽出結果は、「分布なし」である。モノクロであるため、色の変化が大きく、色の分布はないと想定されるためである。ただし、輝度情報は得られる場合がある。文字＋図面（カラー）の色分布の抽出結果は、「分布あり」である。カラーであるため、色の変化があると想定されるためである。
他の通信端末の表示画像解析部１４ｃは、表示データが、図３９に示される文字主体（モノクロ）、文字主体（カラー）、図面主体（モノクロ）、図面主体（カラー）、文字＋図面（モノクロ）、文字＋図面（カラー）のいずれに該当するかを判断する。
表示画像解析部１４ｃは、コンテンツの分類に応じて、表示データの品質を解析する。
＜文字主体（モノクロ）である場合＞
図４０は、表示データの品質判断処理の一実施例（その１）を示す。
S4002：表示画像解析部１４ｃは、表示データの品質解析を開始する。
S4004：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であるか、OCR結果であるかを判断する。
S4006：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の色差が大きいか小さいかを判断する。
S4008：表示画像解析部１４ｃは、画像全体の色差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の画素値差が大きいか小さいかを判断する。
S4010：表示画像解析部１４ｃは、判断材料とする品質情報がOCR結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって文字の認識率の差が大きいか小さいかを判断する。
S4012：表示画像解析部１４ｃは、文字の認識率の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって文字の誤認識率の差が大きいか小さいかを判断する。
S4014：表示画像解析部１４ｃは、ステップS4006で画像全体の色差が大きいと判断した場合、ステップS4008で画像全体の画素値差の判断が終了した場合、ステップS4010で文字の認識率が大きいと判断した場合、ステップS4012で文字の誤認識率の判断が終了した場合、判断した結果から表示データの解析結果を作成する。
S4016：表示画像解析部１４ｃは、複数の判断材料を使用するか否かを判断する。複数の判断材料を使用すると判断した場合、ステップS4004に戻る。表示画像解析部１４ｃは、ステップS4016で複数の判断材料を使用すると判断しない場合、終了する。
＜文字主体（カラー）である場合＞
図４１は、表示データの品質判断処理の一実施例（その２）を示す。
S4102：表示画像解析部１４ｃは、表示データの品質解析を開始する。
S4104：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であるか、OCR結果であるか、色分布結果であるかを判断する。
S4106：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の色差が大きいか小さいかを判断する。
S4108：表示画像解析部１４ｃは、画像全体の色差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の画素値差が大きいか小さいかを判断する。
S4110：表示画像解析部１４ｃは、判断材料とする品質情報がOCR結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって文字の認識率の差が大きいか小さいかを判断する。
S4112：表示画像解析部１４ｃは、文字の認識率の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって文字の誤認識率の差が大きいか小さいかを判断する。
S4114：表示画像解析部１４ｃは、判断材料とする品質情報が色分布結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって色調の変化の差が大きいか小さいかを判断する。
S4116：表示画像解析部１４ｃは、色調の変化の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって彩度の差が大きいか小さいかを判断する。
S4118：表示画像解析部１４ｃは、ステップS4106で画像全体の色差が大きいと判断した場合、ステップS4108で画像全体の画素値差の判断が終了した場合、ステップS4110で文字の認識率が大きいと判断した場合、ステップS4112で文字の誤認識率の判断が終了した場合、ステップS4114で色調の変化の差が大きいと判断した場合、ステップS4116で彩度の変化の差の判断が終了した場合、判断した結果から表示データの解析結果を作成する。
S4120：表示画像解析部１４ｃは、複数の判断材料を使用するか否かを判断する。複数の判断材料を使用すると判断した場合、ステップS4104に戻る。表示画像解析部１４ｃは、ステップS4120で複数の判断材料を使用すると判断しない場合、終了する。
＜図面主体（モノクロ）である場合＞
図４２は、表示データの品質判断処理の一実施例（その３）を示す。
S4202：表示画像解析部１４ｃは、表示データの品質解析を開始する。
S4204：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であるか、周波数成分の抽出結果であるか、エッジ検出結果であるかを判断する。
S4206：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の色差が大きいか小さいかを判断する。
S4208：表示画像解析部１４ｃは、画像全体の色差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の画素値差が大きいか小さいかを判断する。
S4210：表示画像解析部１４ｃは、判断材料とする品質情報が周波数成分の抽出結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって高周波数成分の差が大きいか小さいかを判断する。
S4212：表示画像解析部１４ｃは、高周波数成分の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって低周波数成分の差が大きいか小さいかを判断する。
S4214：表示画像解析部１４ｃは、判断材料とする品質情報がエッジ抽出結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがってエッジ部分の情報量の差が大きいか小さいかを判断する。
S4216：表示画像解析部１４ｃは、ステップS4206で画像全体の色差が大きいと判断した場合、ステップS4208で画像全体の画素値差の判断が終了した場合、ステップS4210で高周波成分の差が大きいと判断した場合、ステップS4212で低周波数成分の判断が終了した場合、ステップS4214でエッジ部分の情報量の差の判断が終了した場合、判断した結果から表示データの解析結果を作成する。
S4218：表示画像解析部１４ｃは、複数の判断材料を使用するか否かを判断する。複数の判断材料を使用すると判断した場合、ステップS4204に戻る。表示画像解析部１４ｃは、ステップS4218で複数の判断材料を使用すると判断しない場合、終了する。
＜図面主体（カラー）である場合＞
図４３は、表示データの品質判断処理の一実施例（その４）を示す。
S4302：表示画像解析部１４ｃは、表示データの品質解析を開始する。
S4304：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（図面主体）であるか、色分布結果であるか、周波数成分の抽出結果であるか、エッジ検出結果であるかを判断する。
S4306：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の色差が大きいか小さいかを判断する。
S4308：表示画像解析部１４ｃは、画像全体の色差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の画素値差が大きいか小さいかを判断する。
S4310：表示画像解析部１４ｃは、判断材料とする品質情報が色分布結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって色調の変化の差が大きいか小さいかを判断する。
S4312：表示画像解析部１４ｃは、色調の変化の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって彩度の変化の差が大きいか小さいかを判断する。
S4314：表示画像解析部１４ｃは、判断材料とする品質情報が周波数成分の抽出結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって高周波数成分の差が大きいか小さいかを判断する。
S4316：表示画像解析部１４ｃは、高周波数成分の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって低周波数成分の差が大きいか小さいかを判断する。
S4318：表示画像解析部１４ｃは、判断材料とする品質情報がエッジ抽出結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがってエッジ部分の情報量の差が大きいか小さいかを判断する。
S4320：表示画像解析部１４ｃは、ステップS4306で画像全体の色差が大きいと判断した場合、ステップS4308で画像全体の画素値差の判断が終了した場合、ステップS4310で色調の変化の差が大きいと判断した場合、ステップS4312で彩度の変化の判断が終了した場合、ステップS4314で高周波数成分の差が大きいと判断した場合、ステップS4316で低周波数成分の判断が終了した場合、ステップS4318でエッジ部分の情報量の差の判断が終了した場合、判断した結果から表示データの解析結果を作成する。
S4322：表示画像解析部１４ｃは、複数の判断材料を使用するか否かを判断する。複数の判断材料を使用すると判断した場合、ステップS4304に戻る。表示画像解析部１４ｃは、ステップS4322で複数の判断材料を使用すると判断しない場合、終了する。
＜文字＋図面（モノクロ）である場合＞
図４４は、表示データの品質判断処理の一実施例（その５）を示す。
S4402：表示画像解析部１４ｃは、表示データの品質解析を開始する。
S4404：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であるか、OCR結果であるか、周波数成分の抽出結果であるか、エッジ検出結果であるかを判断する。
S4406：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の色差が大きいか小さいかを判断する。
S4408：表示画像解析部１４ｃは、画像全体の色差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の画素値差が大きいか小さいかを判断する。
S4410：表示画像解析部１４ｃは、判断材料とする品質情報がOCR結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって文字の認識率の差が大きいか小さいかを判断する。
S4412：表示画像解析部１４ｃは、文字の認識率の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって文字の誤認識率の差が大きいか小さいかを判断する。
S4414：表示画像解析部１４ｃは、判断材料とする品質情報が周波数成分の抽出結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって高周波数成分の差が大きいか小さいかを判断する。
S4416：表示画像解析部１４ｃは、高周波数成分の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって低周波数成分の差が大きいか小さいかを判断する。
S4418：表示画像解析部１４ｃは、判断材料とする品質情報がエッジ抽出結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがってエッジ部分の情報量の差が大きいか小さいかを判断する。
S4420：表示画像解析部１４ｃは、ステップS4006で画像全体の色差が大きいと判断した場合、ステップS4008で画像全体の画素値差の判断が終了した場合、ステップS4010で文字の認識率が大きいと判断した場合、ステップS4012で文字の誤認識率の判断が終了した場合、ステップS4414で高周波成分の差が大きいと判断した場合、ステップS4416で低周波数成分の判断が終了した場合、判断した結果から表示データの解析結果を作成する。
S4422：表示画像解析部１４ｃは、複数の判断材料を使用するか否かを判断する。複数の判断材料を使用すると判断した場合、ステップS4404に戻る。表示画像解析部１４ｃは、ステップS4422で複数の判断材料を使用すると判断しない場合、終了する。
＜文字＋図面（カラー）である場合＞
図４５は、表示データの品質判断処理の一実施例（その６）を示す。
S4502：表示画像解析部１４ｃは、表示データの品質解析を開始する。
S4504：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であるか、OCR結果であるか、色分布結果であるか、周波数成分の抽出結果であるか、エッジ検出結果であるかを判断する。
S4506：表示画像解析部１４ｃは、判断材料とする品質情報がコンテンツ自体のキャプチャ（文字主体）であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の色差が大きいか小さいかを判断する。
S4508：表示画像解析部１４ｃは、画像全体の色差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって画像全体の画素値差が大きいか小さいかを判断する。
S4510：表示画像解析部１４ｃは、判断材料とする品質情報がOCR結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって文字の認識率の差が大きいか小さいかを判断する。
S4512：表示画像解析部１４ｃは、文字の認識率の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって文字の誤認識率の差が大きいか小さいかを判断する。
S4514：表示画像解析部１４ｃは、判断材料とする品質情報が色分布結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって色調の変化の差が大きいか小さいかを判断する。
S4516：表示画像解析部１４ｃは、色調の変化の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって彩度の変化の差が大きいか小さいかを判断する。
S4518：表示画像解析部１４ｃは、判断材料とする品質情報が周波数成分の抽出結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって高周波数成分の差が大きいか小さいかを判断する。
S4520：表示画像解析部１４ｃは、高周波数成分の差が小さいと判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがって低周波数成分の差が大きいか小さいかを判断する。
S4522：表示画像解析部１４ｃは、判断材料とする品質情報がエッジ抽出結果であると判断した場合、記憶部１０００に格納された品質同期判断基準２６にしたがってエッジ部分の情報量の差が大きいか小さいかを判断する。
S4524：表示画像解析部１４ｃは、ステップS4506で画像全体の色差が大きいと判断した場合、ステップS4508で画像全体の画素値差の判断が終了した場合、ステップS4510で文字の認識率が大きいと判断した場合、ステップS4512で文字の誤認識率の判断が終了した場合、ステップS4514で色調の変化の差が大きいと判断した場合、ステップS4516で彩度の変化の判断が終了した場合、ステップS4518で高周波成分の差が大きいと判断した場合、ステップS4520で低周波数成分の判断が終了した場合、ステップS4522でエッジ部分の情報量の差の判断が終了した場合、判断した結果から表示データの解析結果を作成する。
S4526：表示画像解析部１４ｃは、複数の判断材料を使用するか否かを判断する。複数の判断材料を使用すると判断した場合、ステップS4504に戻る。表示画像解析部１４ｃは、ステップS4526で複数の判断材料を使用すると判断しない場合、終了する。
通信端末１０の表示画像解析部１４ｃは、対象となる品質情報に対応する項目情報について、他の通信端末へ送信した表示データの品質を解析し、解析結果（第１の解析結果）を得る。通信端末１０の表示画像解析部１４ｃが第１の解析結果を得る際に実行する処理は、図３８−図４５を適用できる。
他の通信端末は、通信端末１０へ、第２の解析結果を送信する。
通信端末１０は、他の通信端末から第２の解析結果を受信する。通信端末１０の品質同期判断部１４dは、他の通信端末からの第２の解析結果と、表示画像解析部１４ｃにより得られる第１の解析結果とを比較し、品質同期判断基準２６に基づいて、品質の差が小さいか否かを判断することにより、品質同期について判断する。
通信端末１０は、品質の差が小さいと判断した場合データの送信を継続し、品質の差が大きいと判断した場合所定のアラームを送信する。
図４６は、本実施例にかかる遠隔通信システムの動作を示すシーケンスチャートである。
ステップＳ４６０２では、外部入力装置４０から通信端末１０の外部情報送受信部１８へ、共有コンテンツが入力される。
ステップＳ４６０４では、外部情報送受信部１８は、送受信部１１へ、共有コンテンツを入力する。
ステップＳ４６０６では、送受信部１１は、通信ネットワーク２を介して、他の通信端末へ、共有コンテンツを送信する。
ステップＳ４６０８では、他の通信端末の送受信部１１で受信された共有コンテンツは、画像表示制御部１４ｂへ入力される。
ステップＳ４６１０では、他の通信端末の画像表示制御部１４ｂは、共有コンテンツを表示する。
ステップＳ４６１２では、他の通信端末の画像表示制御部１４ｂは、表示画像解析部１４ｃへ、共有コンテンツを入力する。
ステップＳ４６１４では、他の通信端末の表示画像解析部１４ｃは、品質同期判断基準を取得する。
ステップＳ４６１６では、他の通信端末の表示画像解析部１４ｃは、表示データの品質を解析する。
ステップＳ４６１８では、他の通信端末の表示画像解析部１４ｃは、送受信部へ、第２の解析結果を入力する。
ステップＳ４６２０では、他の通信端末の送受信部は、通信ネットワーク２を介して、通信端末１０へ、第２の解析結果を送信する。
ステップＳ４６２２では、通信端末１０の送受信部１１は、品質同期判断部１４ｄへ、他の通信端末から受信した第２の解析結果を入力する。
ステップＳ４６２４では、外部情報送受信部１８は、表示画像解析部１４ｃへ、共有コンテンツを入力する。
ステップＳ４６２６では、通信端末１０の表示画像解析部１４ｃは、品質同期判断基準を取得する。
ステップＳ４６２８では、通信端末１０の表示画像解析部１４ｃは、表示データの品質を解析する。
ステップＳ４６３０では、通信端末１０の表示画像解析部１４ｃは、品質同期判断部１４ｄへ、第１の解析結果を入力する。
ステップＳ４６３２では、通信端末１０の品質同期判断部１４ｄは、表示データの品質が同期しているか否かを判断する。
ステップＳ４６３４では、通信端末１０の品質同期判断部１４ｄは、表示データの品質が同期しているか否かの判断結果に基づいて、同期していないと判断した場合フィードバックを送受信部１１へ入力する。
ステップＳ４６３６では、送受信部１１は、通信ネットワーク２を介して、他の通信端末へ、フィードバックを送信する。
ステップＳ４６３８では、他の通信端末の送受信部１１で受信されたフィードバックは、画像表示制御部１４ｂへ入力される。
ステップＳ４６４０では、他の通信端末の画像表示制御部１４ｂは、フィードバックを表示する。
図４７は、フィードバックの表示の一例を示す。他の通信端末の画像表示制御部１４ｂは、通信端末１０からのフィードバックに基づいて、共有コンテンツ上に、該共有コンテンツに関する説明や、共有コンテンツに対する操作を待つことを促す文言を表示する。例えば、画像表示制御部１４ｂは、送信先との間で品質の同期がとれていないこと、コンテンツの説明や、コンテンツの操作を控えることをユーザに促すメッセージを表示する。ユーザに促すメッセージは、通信端末と他の通信端末との間で共有されるコンテンツの品質の同期の度合いに応じて変更されるのが好ましい。例えば、画像が多少乱れている場合から画像を全く認識できない場合へと同期がとれなくなるまでの間で１または複数の閾値を判断基準に設けて、異なるメッセージを送信する。また、文字が多少乱れている場合から文字を全く認識できない場合へと同期がとれなくなるまでの間で１または複数の閾値を判断基準に設けて、異なるメッセージを送信する。
図４６に示されるシーケンスチャートおける順序はこの順序に限られない。例えば、ステップ４６０４−Ｓ４６２２の処理と、ステップＳ４６２４−Ｓ４６３０の処理は逆の順序で行われてもよいし、同時に行われてもよい。
また、通信端末１０は、第１の解析結果を他の通信端末へ送信し、他の通信端末は、通信端末１０からの第１の解析結果と第２の解析結果とに基づいて、品質同期の判断を行うようにしてもよい。他の通信端末は、品質同期の判断結果に基づいて、同期していないと判断した場合に、共有コンテンツ上に、該共有コンテンツに関する説明や、共有コンテンツに対する操作を待つことを促す文言を表示する。他の通信端末は、品質同期の判断結果を通信端末１０へ送信する。このようにすることにより、送信側の処理負荷を低減できる。
図４８は、本実施例にかかる遠隔通信システムの効果を示す。
本実施例にかかる遠隔通信システムによれば、共有コンテンツの送信側と受信側との間で、共有するコンテンツの品質の同期を判断できる。例えば、ビデオ/Web会議においてコンテンツを共有し、同期する際に、送信側が送信したコンテンツと受信側が受信したコンテンツを比較し、その差異を一定の基準において判断することができる。
送信側と受信側との間で、共有するコンテンツの品質が同期しているか否かの判断結果をユーザへフィードバックできる。このため、ユーザは、コンテンツの品質が同期しているか否かを容易に判断できる。コンテンツの品質が同期しているか否かを容易に判断できることにより、会議の進行をこれまでよりもスムーズにできる。
本実施形態にかかる遠隔通信システムは、会議の他、教育、医療など離れた地点間で、情報をやり取りする通信システムに適用できる。
本発明は特定の実施例、変形例を参照しながら説明されてきたが、各実施例、変形例は単なる例示に過ぎず、当業者は様々な変形例、修正例、代替例、置換例等を理解するであろう。説明の便宜上、本発明の実施例に従った装置は機能的なブロック図を用いて説明されたが、そのような装置はハードウェアで、ソフトウエアで又はそれらの組み合わせで実現されてもよい。本発明は上記実施例に限定されず、本発明の精神から逸脱することなく、様々な変形例、修正例、代替例、置換例等が包含される。
１ 遠隔通信システム
１０ 通信端末
１１ 送受信部（表示データ送信手段の一例）
１２ 操作入力受付部
１３ ログイン要求部
１４ａ 撮像部
１４ｂ 画像表示制御部
１４ｃ 表示画像解析部
１４ｄ 品質同期判断部
１５ａ 音声入力部
１５ｂ 音声出力部
１６ 選択処理部
１７ 遅延検出部
１８ 外部情報送受信部（表示データ受信手段の一例）
１９ 記憶・読出処理部
２１ 配置情報選択部
２２ 表示データ制御部
２３ 配置情報管理表
２４ イベントフラグテーブル
２５ 資料管理テーブル
２６ 品質同期判断基準
３０ 中継装置
４０ 外部入力装置
４１ 送受信部
４２ 接続検出部
４３ 記憶部
４３１ 遷移条件テーブル
４４ メニュー制御部
４５１ 表示データ取得部
４５２ 表示データ送信部
４６ 操作入力受付部
４９ 記憶・読出処理部
５０ 遠隔通信管理システム
４００ 表示装置
１０００ 記憶部（宛先情報記憶手段の一例）
特開２００５−２０８７１０号公報

Claims (11)

  1. ネットワークを介して複数の通信端末が接続され、他の通信端末へ該他の通信端末との間で共有する画像データを送信する通信端末であって、
    前記通信端末が送信する第１の画像データと該第１の画像データが前記他の通信端末により受信されることにより得られる第２の画像データとを比較する際に取得する属性と、該属性に基づいて前記第１の画像データと前記第２の画像データとの間の品質の差を判断する際に使用する基準を示す情報とを格納する記憶部と、
    前記記憶部に格納した属性に基づいて、前記他の通信端末へ送信した第１の画像データの第１の属性を取得し、
    該第１の属性と前記他の通信端末により前記第２の画像データについて取得された第２の属性とに基づいて、前記第１の画像データと前記第２の画像データとの間の品質の差を前記基準を示す情報により判断する制御部とを備え、
    前記制御部は、前記第１の画像データと前記第２の画像データとの間の品質の差が所定の閾値以上である場合、前記他の通信端末へ品質の同期がとれていないことをフィードバックする通信端末。
  2. 前記制御部による前記フィードバックを前記他の通信端末に送信することによって、前記他の通信端末に前記フィードバックに基づいたメッセージを表示させる請求項１に記載の通信端末。
  3. 前記記憶部は、複数の属性と該複数の属性の各々について品質の差を判断する際に使用する基準を示す情報とを格納し、
    前記制御部は、前記他の通信端末へ送信した第１の画像データが、文字情報、図面情報、および文字情報と図面情報の両方を含むもののいずれかであるかに応じて、異なる属性を取得し、該異なる属性に対応する基準を示す情報により品質の差を判断する、請求項１または２に記載の通信端末。
  4. 前記制御部は、前記他の通信端末へ送信した第１の画像データが文字情報である場合に、該第１の画像データの文字部分をデータとして保存したもの、および該第１の画像データの文字部分の文字認識の結果の一方または両方を属性として取得し、該属性に対応する基準を示す情報により品質の差を判断する、請求項３に記載の通信端末。
  5. 前記制御部は、前記他の通信端末へ送信した第１の画像データが図面情報である場合に、該第１の画像データの図面部分をデータとして保存したもの、周波数成分を抽出した結果、およびエッジ部分を検出した結果の一つまたは複数を属性として取得し、該属性に対応する基準を示す情報により品質の差を判断する、請求項３に記載の通信端末。
  6. 前記制御部は、前記他の通信端末へ送信した第１の画像データが文字情報と図面情報の両方を含むものである場合に、該第１の画像データを保存したもの、該第１の画像データの文字部分の文字認識の結果、周波数成分を抽出した結果、およびエッジ部分を検出した結果の一つまたは複数を属性として取得し、該属性に対応する基準を示す情報により品質の差を判断する、請求項３に記載の通信端末。
  7. 前記制御部は、前記他の通信端末へ送信した第１の画像データがカラーである場合に、該第１の画像データの色分布を属性として取得し、該属性に対応する基準を示す情報により品質の差を判断する、請求項４ないし６のいずれか１項に記載の通信端末。
  8. ネットワークを介して複数の通信端末が接続され、第１の通信端末と第２の通信端末との間で画像データを共有する通信システムであって、
    前記第１の通信端末は、
    前記第１の通信端末が送信する第１の画像データと該第１の画像データが前記第２の通信端末により受信されることにより得られる第２の画像データとを比較する際に取得する属性と、該属性に基づいて前記第１の画像データと前記第２の画像データとの間の品質の差を判断する際に使用する基準を示す情報とを格納する第１の記憶部と、
    前記第１の記憶部に格納した属性に基づいて、前記第２の通信端末へ送信した第１の画像データの第１の属性を取得し、
    該第１の属性と前記第２の通信端末により前記第２の画像データについて取得された第２の属性とに基づいて、前記第１の画像データと前記第２の画像データとの間の品質の差を前記基準を示す情報により判断し、
    前記第１の画像データと前記第２の画像データとの間の品質の差が所定の閾値以上である場合、前記第２の通信端末へ品質の同期がとれていないことをフィードバックする第１の制御部と
    を備え、
    前記第２の通信端末は、
    前記第１の通信端末が送信する第１の画像データと該第１の画像データが前記第２の通信端末により受信されることにより得られる第２の画像データとを比較する際に取得する属性を格納する第２の記憶部と、
    前記第２の記憶部に格納した属性に基づいて、前記第１の通信端末からの第２の画像データについて第２の属性を取得し、前記第１の通信端末へ、該第２の属性を通知する第２の制御部と
    を備える、通信システム。
  9. 前記第１の制御部による前記フィードバックを前記第２の通信端末に送信することによって、前記第２の通信端末に前記フィードバックに基づいたメッセージを表示させる請求項８に記載の通信システム。
  10. ネットワークを介して複数の通信端末が接続され、他の通信端末へ該他の通信端末との間で共有する画像データを送信する通信端末が実行する通信方法であって、
    前記通信端末が送信する第１の画像データと、該第１の画像データが前記他の通信端末により受信されることにより得られる第２の画像データとを比較する際に取得する属性と、該属性に基づいて前記第１の画像データと前記第２の画像データとの間の品質の差を判断する際に使用する基準を示す情報とを格納する記憶部に格納した属性に基づいて、前記他の通信端末へ送信した第１の画像データの第１の属性を取得し、
    該第１の属性と前記他の通信端末により前記第２の画像データについて取得された第２の属性とに基づいて、前記第１の画像データと前記第２の画像データとの間の品質の差を前記基準を示す情報により判断し、
    前記第１の画像データと前記第２の画像データとの間の品質の差が所定の閾値以上である場合、前記他の通信端末へ品質の同期がとれていないことをフィードバックする通信方法。
  11. ネットワークを介して複数の通信端末が接続され、他の通信端末へ該他の通信端末との間で共有する画像データを送信する通信端末に、
    前記通信端末が送信する第１の画像データと、該第１の画像データが前記他の通信端末により受信されることにより得られる第２の画像データとを比較する際に取得する属性と、該属性に基づいて前記第１の画像データと前記第２の画像データとの間の品質の差を判断する際に使用する基準を示す情報とを格納する記憶部に格納した属性に基づいて、前記他の通信端末へ送信した第１の画像データの第１の属性を取得する手順と、
    該第１の属性と前記他の通信端末により前記第２の画像データについて取得された第２の属性とに基づいて、前記第１の画像データと前記第２の画像データとの間の品質の差を前記基準を示す情報により判断する手順と、
    前記第１の画像データと前記第２の画像データとの間の品質の差が所定の閾値以上である場合、前記他の通信端末へ品質の同期がとれていないことをフィードバックする手順とを実行させるプログラム。
JP2013165191A 2013-08-08 2013-08-08 通信端末、通信システムおよび通信方法並びにプログラム Active JP6255788B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013165191A JP6255788B2 (ja) 2013-08-08 2013-08-08 通信端末、通信システムおよび通信方法並びにプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013165191A JP6255788B2 (ja) 2013-08-08 2013-08-08 通信端末、通信システムおよび通信方法並びにプログラム

Publications (2)

Publication Number Publication Date
JP2015035696A JP2015035696A (ja) 2015-02-19
JP6255788B2 true JP6255788B2 (ja) 2018-01-10

Family

ID=52543935

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013165191A Active JP6255788B2 (ja) 2013-08-08 2013-08-08 通信端末、通信システムおよび通信方法並びにプログラム

Country Status (1)

Country Link
JP (1) JP6255788B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9781174B2 (en) * 2015-09-21 2017-10-03 Fuji Xerox Co., Ltd. Methods and systems for electronic communications feedback
JP6926697B2 (ja) * 2017-06-07 2021-08-25 オムロンヘルスケア株式会社 端末装置、治療システムおよびプログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3844445B2 (ja) * 2002-04-19 2006-11-15 日本電信電話株式会社 映像コンテンツ配信方法、装置、および映像コンテンツ配信プログラム
KR100824711B1 (ko) * 2003-08-22 2008-04-24 니뽄 덴신 덴와 가부시키가이샤 영상 정합 장치, 영상 정합 방법, 및 영상 정합 프로그램을기록한 기록매체
JP2005244384A (ja) * 2004-02-25 2005-09-08 Nippon Telegr & Teleph Corp <Ntt> 受信品質通知方法、受信品質通知装置及び受信品質通知プログラム
JP2009181594A (ja) * 2009-05-18 2009-08-13 Fuji Xerox Co Ltd 画像読み取り装置

Also Published As

Publication number Publication date
JP2015035696A (ja) 2015-02-19

Similar Documents

Publication Publication Date Title
JP5887756B2 (ja) 外部入力装置、通信端末、表示データ共有システム、プログラム
JP6954402B2 (ja) 伝送端末、伝送方法、伝送用プログラム及び伝送システム
JP5962098B2 (ja) 伝送端末、伝送システム、表示制御方法、及びプログラム
JP5793869B2 (ja) 伝送管理システム、伝送管理方法、及び伝送管理プログラム
JP6171303B2 (ja) 伝送端末、伝送方法、及びプログラム
JP5927900B2 (ja) 電子機器
JP6672588B2 (ja) 伝送システム、方法、プログラム及びシステム
JP5983792B2 (ja) 伝送システム、及び伝送方法
JP5561079B2 (ja) 通話端末、通話システム、通話端末用プログラム、及び通信方法
JP7264205B2 (ja) 伝送システム、第一の伝送端末、伝送方法、表示方法、及びプログラム
JP5754117B2 (ja) 外部入力装置、表示データ作成方法、プログラム
JP7196951B2 (ja) 情報処理装置、プログラム、方法、システム
JP6255788B2 (ja) 通信端末、通信システムおよび通信方法並びにプログラム
JP5621516B2 (ja) 遠隔通信端末、及び遠隔通信プログラム
JP2013131161A (ja) 電子機器
JP2012134939A (ja) 通信端末、通信方法、及び通信端末用プログラム
JP6593392B2 (ja) 伝送方法、中継装置、及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160722

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170509

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170707

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171120

R151 Written notification of patent or utility model registration

Ref document number: 6255788

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151