JP2014082573A - 伝送端末、伝送方法、及びプログラム - Google Patents

Abstract

【課題】テレビ会議システム等において、通信ネットワークの混雑等により伝送容量が低下するような環境下でも音声データが途切れないようにする。
【解決手段】相手側の伝送端末に音データ以外のコンテンツデータの送信を中断してもらうのではなく、自分側の伝送端末からの音データ以外のコンテンツデータの送信を中断する。これにより、通信ネットワークの混雑等が解消され、音データの送受信は確保することが可能になる。更に、相手側の伝送端末に音データ以外のコンテンツデータの送信を中断してもらうのではないため、わざわざ自分側から相手側に音データ以外のコンテンツデータの送信を中断して欲しい旨を伝える必要がない。
【選択図】図３５

Description

本発明は、相手側の伝送端末との間で、音声データを含むコンテンツデータの送受信を行うことで、相手側の伝送端末との通話を実現させる発明に関する。

出張経費及び出張時間の削減要請に伴い、遠隔地とテレビ会議を行うためのテレビ会議システムが普及している。このようなテレビ会議システムでは、複数のテレビ会議端末間で、直接、画像データ及び音データの送受信を行うことで、会話（通話）を実現している。

また、近年は、複数のテレビ会議端末間に中継装置が介在し、この中継装置が画像データ及び音データを中継するテレビ会議システムも普及しつつある。このように中継装置が介在するテレビ会議システムでは、一時的な通信ネットワークの不具合や，テレビ会議端末の処理能力が不足していても、通信の不具合を最小限に抑えることができる映像符号化技術が採用されている。そして、この映像符号化技術には、H.264/SVC(Scalable Video Coding)と呼ばれる規格が使われている（特許文献１参照）。

しかしながら、通信ネットワークの混雑等により伝送容量が低下するような環境下では、テレビ会議端末で画像データの受信に遅延が生じることがある。また、遅延が更に進むと、画像データが途切れるだけでなく、画像データよりもデータ量が少ない音声データまでも途切れるようになってしまうという課題が生じる。

請求項１に係る発明は、相手側の伝送端末との間で、音データを含むコンテンツデータの送受信を行うことで、前記相手側の伝送端末との通話を実現させる伝送端末であって、前記コンテンツデータのうち、前記相手側の伝送端末から送られて来た第１のコンテンツデータを受信する受信手段と、前記コンテンツデータのうち、自分側の伝送端末から前記相手側の伝送端末に第２のコンテンツデータを送信する送信手段と、前記受信手段によって受信される際の前記第１のコンテンツデータの遅延時間を検出する遅延検出手段と、を有し、前記遅延検出手段によって検出された遅延時間が所定値を越える場合には、前記送信手段は、前記第２のコンテンツデータのうち音データ以外の送信を停止することを特徴とする伝送端末である。

以上説明したように本発明によれば、通信ネットワークの混雑等により伝送容量が低下するような環境下では、相手側の伝送端末に音データ以外のコンテンツデータの送信を中断してもらうのではなく、自分側の伝送端末からの音データ以外のコンテンツデータの送信を中断する。これにより、通信ネットワークの混雑等が解消され、音データの送受信は確保することが可能になるという効果を奏する。

更に、相手側の伝送端末に音データ以外のコンテンツデータの送信を中断してもらうのではないため、わざわざ自分側から相手側に音データ以外のコンテンツデータの送信を中断して欲しい旨を伝える必要がないという効果を奏する。

本発明の実施形態の前提となる伝送システムの概略図である。 伝送システムにおける画像データ、音データ、及び各種管理情報の送受信の状態を示した概念図である。 画像データの画質を説明する概念図である。 端末の外観図である。 端末のハードウェア構成図である。 管理システム、中継装置、プログラム提供システム、又はメンテナンスシステムのハードウェア構成図である。 伝送システムを構成する各端末、装置及びシステムの機能ブロック図である。 画面管理テーブルを示す概念図である。 最終絞込部の機能構成図である。 一次絞込部の機能構成図である。 変更画像状態管理テーブルを示す概念図である。 中継装置管理テーブルを示す概念図である。 端末認証管理テーブルを示す概念図である。 端末管理テーブルを示す概念図である。 宛先リスト管理テーブルを示す概念図である。 セッション管理テーブルを示す概念図である。 アドレス優先度管理テーブルを示す概念図である。 伝送速度優先度管理テーブルを示す概念図である。 画像状態管理テーブルを示す概念図である。 各中継装置の稼動状態を示す状態情報を管理する処理を示したシーケンス図である。 端末間で遠隔通信を開始する準備段階の処理を示したシーケンス図である。 中継装置を絞り込む処理を示したシーケンス図である。 中継装置を絞り込む処理を示した処理フロー図である。 中継装置の絞り込み処理を行う際の優先度のポイントの計算状態を示した図である。 伝送端末が中継装置を選択する処理を示したシーケンス図である。 伝送端末で中継装置を選択する処理を示した処理フロー図である。 伝送端末間で画像データ及び音データを送受信する処理を示したシーケンス図である。 ディスプレイに表示された画面例を示す図である。 ディスプレイに表示された画面を変更する処理を示したフローチャートである。 内容が変更された後の画面管理テーブルを示す概念図である。 ディスプレイに表示された変更後の画面例を示す図である。 メッセージの作成、送信、及び表示の処理を示したシーケンス図である。 メッセージの作成の処理を示した処理フロー図である。 メッセージの表示を示したフローチャートである。 ディスプレイに表示された第１の表示パターンの画面例を示す図である。 ディスプレイに表示された第２の表示パターンの画面例を示す図である。 ディスプレイに表示された第３の表示パターンの画面例を示す図である。 本発明の第１の実施形態に係る遅延を解消する処理を示したフローチャートである。 本発明の第２の実施形態に係る遅延を解消する処理を示したフローチャートである。

まずは、以下、図１乃至図３７を用いて、本発明の実施形態を案出するために前提となるに発明について説明する。なお、前提となるだけであって、公知であると自認している訳ではない。
〔実施形態の前提となる発明の内容〕
＜＜全体構成＞＞
図１は、本発明の実施形態の前提となる伝送システムの概略図である。図２は、伝送システムにおける画像データ、音データ、及び各種管理情報の送受信の状態を示した概念図である。図３は、画像データの画質を説明する概念図である。

ここでは、利用者がテレビ会議端末等の伝送端末を用いて相手側の利用者と通話することにより、テレビ会議を行う場合について説明する。なお、ここでは、「テレビ会議」として説明するが、一般に「ビデオ会議」と言われることもあり、両者は同じ内容である。

まず、図１に示されている伝送システム１は、複数の伝送端末（１０ａａ，１０ａｂ，…）、各伝送端末（１０ａａ，１０ａｂ，…）用のディスプレイ（１２０ａａ，１２０ａｂ，…）、複数の中継装置（３０ａ，３０ｂ，３０ｃ，３０ｄ）、伝送管理システム５０、プログラム提供システム９０、及びメンテナンスシステム１００によって構築されている。

複数の端末１０は、コンテンツデータの一例としての画像データ及び音データの送受信による伝送を行う。

なお、以下では、「伝送端末」は単に「端末」として表され、「伝送管理システム」は単に「管理システム」として表されている。また、複数の端末（１０ａａ，１０ａｂ，…）のうち任意の端末は、「端末１０」と表され、複数のディスプレイ（１２０ａａ，１２０ａｂ，…）のうち任意のディスプレイは「ディスプレイ１２０」と表され、複数の中継装置（３０ａ，３０ｂ，３０ｃ，３０ｄ）のうち任意の中継装置は「中継装置３０」と表されている。更に、テレビ会議の開始を要求する要求元としての端末は「要求元端末」と表され、要求先である宛先（中継先）としての端末は「宛先端末」と表されている。

また、図２に示されているように、伝送システム１において、要求元端末と宛先端末との間では、管理システム５０を介して、各種の管理情報を送受信するための管理情報用セッションｓｅｉが確立される。また、要求元端末と宛先端末との間では、中継装置３０を介して、高解像度の画像データ、中解像度の画像データ、低解像度の画像データ、及び音データの４つの各データを送受信するための４つのセッションが確立される。ここでは、これら４つのセッションをまとめて、画像・音データ用セッションｓｅｄとして示している。

ここで、画像データの画像の解像度について説明する。図３（ａ）に示されているように、横が１６０画素、縦が１２０画素から成り、ベース画像となる低解像度の画像と、図３（ｂ）に示されているように、横が３２０画素、縦が２４０画素から成る中解像度の画像と、図３（ｃ）に示されているように、横が６４０画素、縦が４８０画素から成る高解像度の画像とがある。このうち、狭帯域経路を経由する場合には、ベース画像となる低解像度の画像データのみから成る低画質の画像データが中継される。帯域が比較的広い場合には、ベース画像となる低解像度の画像データ、及び中解像度の画像データから成る中画質の画像データが中継される。また、帯域が非常に広い場合には、ベース画質となる低解像度の画像データ、中画解像度の画像データ、及び高解像度の画像データから成る高画質の画像データが中継される。なお、音データは、画像データに比べてデータ量が小さいため、通信ネットワーク２において、狭帯域経路を経由する場合、帯域が比較的広い場合、又は、帯域が非常に広い場合のいずれであっても中継される。

次に、図１に示されている中継装置３０は、複数の端末１０の間で、コンテンツデータの中継を行う。管理システム５０は、端末１０からのログイン認証、端末１０の伝送（通話）状況の管理、宛先リストの管理等、及び中継装置３０の通信状況等を一元的に管理する。なお、画像データの画像は、動画であっても静止画であってもよく、動画と静止画の両方であってもよい。

複数のルータ（７０ａ，７０ｂ，７０ｃ，７０ｄ，７０ａｂ，７０ｃｄ）は、画像データ及び音データの最適な経路の選択を行う。なお、以下では、ルータ（７０ａ，７０ｂ，７０ｃ，７０ｄ，７０ａｂ，７０ｃｄ）のうち任意のルータは「ルータ７０」と表されている。

プログラム提供システム９０は、後述のＨＤ(Hard Disk)２０４を備えており、端末１０に各種機能を実現させる（又は、端末１０を各種手段として機能させる）ための端末用プログラムが記憶され、端末１０に端末用プログラムを送信することができる。また、プログラム提供システム９０のＨＤ２０４には、中継装置３０に各種機能を実現させる（又は、中継装置３０を各種手段として機能させる）ための中継装置用プログラムも記憶されており、中継装置３０に、中継装置用プログラムを送信することができる。更に、プログラム提供システム９０のＨＤ２０４には、管理システム５０に各種機能を実現させる（又は、管理システム５０を各種手段として機能させる）ための伝送管理用プログラムも記憶されており、管理システム５０に、伝送管理用プログラムを送信することができる。

メンテナンスシステム１００は、端末１０、中継装置３０、管理システム５０、及びプログラム提供システム９０のうちの少なくとも１つの維持、管理、又は保守を行うためのコンピュータである。例えば、メンテナンスシステム１００が国内に設置され、端末１０、中継装置３０、管理システム５０、又はプログラム提供システム９０が国外に設置されている場合、メンテナンスシステム１００は、通信ネットワーク２を介して遠隔的に、端末１０、中継装置３０、管理システム５０、及びプログラム提供システム９０のうちの少なくとも１つの維持、管理、保守等のメンテナンスを行う。また、メンテナンスシステム１００は、通信ネットワーク２を介さずに、端末１０、中継装置３０、管理システム５０、及びプログラム提供システム９０のうちの少なくとも１つにおける機種番号、製造番号、販売先、保守点検、又は故障履歴の管理等のメンテナンスを行う。

また、端末（１０ａａ，１０ａｂ，１０ａｃ，・・・）、中継装置３０ａ、及びルータ７０ａは、ＬＡＮ２ａによって通信可能に接続されている。端末（１０ｂａ，１０ｂｂ，１０ｂｃ，・・・）、中継装置３０ｂ、及びルータ７０ｂは、ＬＡＮ２ｂによって通信可能に接続されている。また、ＬＡＮ２ａ及びＬＡＮ２ｂは、ルータ７０ａｂが含まれた専用線２ａｂによって通信可能に接続されており、所定の地域Ａ内で構築されている。例えば、地域Ａは日本であり、ＬＡＮ２ａは東京の事業所内で構築されており、ＬＡＮ２ｂは大阪の事業所内で構築されている。

一方、端末（１０ｃａ，１０ｃｂ，１０ｃｃ，・・・）、中継装置３０ｃ、及びルータ７０ｃは、ＬＡＮ２ｃによって通信可能に接続されている。端末１０ｄ（ａ，１０ｄｂ，１０ｄｃ，・・・）、中継装置３０ｄ、及びルータ７０ｄは、ＬＡＮ２ｄによって通信可能に接続されている。また、ＬＡＮ２ｃ及びＬＡＮ２ｄは、ルータ７０ｃｄが含まれた専用線２ｃｄによって通信可能に接続されており、所定の地域Ｂ内で構築されている。例えば、地域Ｂはアメリカ合衆国であり、ＬＡＮ２ｃはニューヨークの事業所内で構築されており、ＬＡＮ２ｄはワシントンＤ．Ｃ．の事業所内で構築されている。地域Ａ及び地域Ｂは、それぞれルータ（７０ａｂ，７０ｃｄ）からインターネット２ｉを介して通信可能に接続されている。

また、管理システム５０、及びプログラム提供システム９０は、インターネット２ｉを介して、端末１０、及び中継装置３０と通信可能に接続されている。管理システム５０、及びプログラム提供システム９０は、地域Ａ又は地域Ｂに設置されていてもよいし、これら以外の地域に設置されていてもよい。

なお、ＬＡＮ２ａ、ＬＡＮ２ｂ、専用線２ａｂ、インターネット２ｉ、専用線２ｃｄ、ＬＡＮ２ｃ、及びＬＡＮ２ｄによって、通信ネットワーク２が構築されている。この通信ネットワーク２には、有線だけでなく、ＷｉＦｉ（Wireless Fidelity）や、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の無線による通信が行われる箇所があってもよい。

また、図１において、各端末１０、各中継装置３０、管理システム５０、各ルータ７０、プログラム提供システム９０、及びメンテナンスシステム１００の下に示されている４組の数字は、一般的なＩＰｖ４におけるＩＰアドレス（宛先情報の一例）を簡易的に示している。例えば、端末１０ａａのＩＰアドレスは「１．２．１．３」である。また、ＩＰｖ４ではなく、ＩＰｖ６を用いてもよいが、説明を簡略化するため、ＩＰｖ４を用いて説明する。

なお、各端末１０は、複数の事業所間での通話や、同じ事業所内の異なる部屋間での通話だけでなく、同じ部屋内での通話や、屋外と屋内又は屋外と屋外での通話で使われてもよい。各端末１０が屋外で使われる場合には、携帯電話通信網等の無線による通信が行われる。

＜＜ハードウェア構成＞＞
次に、ハードウェア構成を説明する。図４は、端末１０の外観図である。以下、端末１０の長手方向をＸ軸方向、水平面内でＸ軸方向に直交する方向をＹ軸方向、Ｘ軸方向及びＹ軸方向に直交する方向（鉛直方向）をＺ軸方向として説明する。

図４に示されているように、端末１０は、筐体１１００、アーム１２００、及びカメラハウジング１３００を備えている。このうち、筐体１１００の前側壁面１１１０には、複数の吸気孔によって形成された不図示の吸気面が設けられており、筐体１１００の後側壁面１１２０には、複数の排気孔が形成された排気面１１２１が設けられている。これにより、筐体１１００に内蔵された冷却ファンの駆動によって、不図示の吸気面を介して端末１０の後方の外気を取り込み、排気面１１２１を介して端末１０の後方へ排気することができる。筐体１１００の右側壁面１１３０には、収音用孔１１３１が形成され、後述する内蔵型のマイク１１４によって音声、物音、雑音等の音が収音可能となっている。

筐体１１００の右側壁面１１３０側には、操作パネル１１５０が形成されている。この操作パネル１１５０には、後述の複数の操作ボタン（１０８ａ〜１０８ｅ）、後述の電源スイッチ１０９、及び後述のアラームランプ１１９が設けられていると共に、後述の内蔵型のスピーカ１１５からの出力音を通すための複数の音出力孔によって形成された音出面１１５１が形成されている。また、筐体１１００の左側壁面１１４０側には、アーム１２００及びカメラハウジング１３００を収容するための凹部としての収容部１１６０が形成されている。筐体１１００の右側壁面１１３０には、後述の外部機器接続Ｉ／Ｆ１１８に対して電気的にケーブルを接続するための複数の接続口（１１３２ａ〜１１３２ｃ）が設けられている。一方、筐体１１００の左側壁面１１４０には、後述の外部機器接続Ｉ／Ｆ１１８に対して電気的にディスプレイ１２０用のケーブル１２０ｃを接続するための不図示の接続口が設けられている。

なお、以下では、操作ボタン（１０８ａ〜１０８ｅ）のうち任意の操作ボタンを示す場合には「操作ボタン１０８」を用い、接続口（１１３２ａ〜１１３２ｃ）のうち任意の接続口を示す場合には「接続口１１３２」を用いて説明する。

次に、アーム１２００は、トルクヒンジ１２１０を介して筐体１１００に取り付けられており、アーム１２００が筐体１１００に対して、１３５度のチルト角θ１の範囲で、上下方向に回転可能に構成されている。図４は、チルト角θ１が９０度の状態を示している。

カメラハウジング１３００には、後述の内蔵型のカメラ１１２が設けられており、利用者、書類、及び部屋等を撮像することができる。また、カメラハウジング１３００には、トルクヒンジ１３１０が形成されている。カメラハウジング１３００は、トルクヒンジ１３１０を介して、アーム１２００に取り付けられている。そして、カメラハウジング１３００は、トルクヒンジ１３１０を介してアーム１２００に取り付けられており、カメラハウジング１３００がアーム１２００に対して、図４で示されている状態を０度として±１８０度のパン角θ２の範囲で、且つ、±４５度のチルト角θ３の範囲で、上下左右方向に回転可能に構成されている。

なお、中継装置３０、伝送管理システム５０、プログラム提供システム９０、及びメンテナンスシステム１００は、それぞれ一般のサーバ・コンピュータの外観と同じであるため、外観の説明を省略する。

図５は、端末１０のハードウェア構成図である。図５に示されているように、端末１０は、端末１０全体の動作を制御するＣＰＵ(Central Processing Unit)１０１、ＩＰＬ(Initial Program Loader)等のＣＰＵ１０１の駆動に用いられるプログラムを記憶したＲＯＭ(Read Only Memory)１０２、ＣＰＵ１０１のワークエリアとして使用されるＲＡＭ(Random Access Memory)１０３、端末用プログラム、画像データ、及び音データ等の各種データを記憶するフラッシュメモリ１０４、ＣＰＵ１０１の制御にしたがってフラッシュメモリ１０４に対する各種データの読み出し又は書き込みを制御するＳＳＤ（Solid State Drive）１０５、フラッシュメモリ等の記録メディア１０６に対するデータの読み出し又は書き込み（記憶）を制御するメディアドライブ１０７、端末１０の宛先を選択する場合などに操作される操作ボタン１０８、端末１０の電源のＯＮ／ＯＦＦを切り換えるための電源スイッチ１０９、通信ネットワーク２を利用してデータ伝送をするためのネットワークＩ／Ｆ(Interface)１１１を備えている。

また、端末１０は、ＣＰＵ１０１の制御に従って被写体を撮像して画像データを得る内蔵型のカメラ１１２、このカメラ１１２の駆動を制御する撮像素子Ｉ／Ｆ１１３、音を入力する内蔵型のマイク１１４、音を出力する内蔵型のスピーカ１１５、ＣＰＵ１０１の制御に従ってマイク１１４及びスピーカ１１５との間で音信号の入出力を処理する音入出力Ｉ／Ｆ１１６、ＣＰＵ１０１の制御に従って外付けのディスプレイ１２０に画像データを伝送するディスプレイＩ／Ｆ１１７、各種の外部機器を接続するための外部機器接続Ｉ／Ｆ１１８、端末１０の各種機能の異常を知らせるアラームランプ１１９、及び上記各構成要素を図５に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン１１０を備えている。

ディスプレイ１２０は、被写体の画像や操作用アイコン等を表示する液晶や有機ＥＬによって構成された表示部である。また、ディスプレイ１２０は、ケーブル１２０ｃによってディスプレイＩ／Ｆ１１７に接続される。このケーブル１２０ｃは、アナログＲＧＢ（ＶＧＡ）信号用のケーブルであってもよいし、コンポーネントビデオ用のケーブルであってもよいし、ＨＤＭＩ(High-Definition Multimedia Interface)やＤＶＩ(Digital Video Interactive)信号用のケーブルであってもよい。

カメラ１１２は、レンズや、光を電荷に変換して被写体の画像（映像）を電子化する固体撮像素子を含み、固体撮像素子として、ＣＭＯＳ(Complementary Metal Oxide Semiconductor)や、ＣＣＤ（Charge Coupled Device）等が用いられる。

外部機器接続Ｉ／Ｆ１１８には、図４に示されている筐体１１００の接続口１１３２に差し込まれたＵＳＢ(Universal Serial Bus)ケーブル等によって、外付けカメラ、外付けマイク、及び外付けスピーカ等の外部機器がそれぞれ電気的に接続可能である。外付けカメラが接続された場合には、ＣＰＵ１０１の制御に従って、内蔵型のカメラ１１２に優先して、外付けカメラが駆動する。同じく、外付けマイクが接続された場合や、外付けスピーカが接続された場合には、ＣＰＵ１０１の制御に従って、それぞれが内蔵型のマイク１１４や内蔵型のスピーカ１１５に優先して、外付けマイクや外付けスピーカが駆動する。

なお、記録メディア１０６は、端末１０に対して着脱自在な構成となっている。また、ＣＰＵ１０１の制御にしたがってデータの読み出し又は書き込みを行う不揮発性メモリであれば、フラッシュメモリ１０４に限らず、ＥＥＰＲＯＭ（Electrically Erasable and Programmable ROM）等を用いてもよい。

また、端末１０には、カメラ１１２、マイク１１４、及びスピーカ１１５が設けられているが、これに限らず、カメラ１１２、マイク１１４、及びスピーカ１１５の少なくとも１つが設けられていなくてもよい。この場合には、設けられていないものの代わりに、外部機器接続Ｉ／Ｆ１１８に外付け用機器が設けられることで、カメラ１１２、マイク１１４、又はスピーカ１１５の代わりの役割を果たすことができる。

更に、上記端末用プログラムは、インストール可能な形式又は実行可能な形式のファイルによって、コンピュータで読み取り可能な記録媒体（記録メディア１０６等）に記録されて流通されるようにしてもよい。また、上記端末用プログラムは、フラッシュメモリ１０４ではなくＲＯＭ１０２に記憶させるようにしてもよい。

図６は、管理システムのハードウェア構成図である。管理システム５０は、管理システム５０全体の動作を制御するＣＰＵ２０１、ＩＰＬ等のＣＰＵ２０１の駆動に用いられるプログラムを記憶したＲＯＭ２０２、ＣＰＵ２０１のワークエリアとして使用されるＲＡＭ２０３、伝送管理用プログラム等の各種データを記憶するＨＤ２０４、ＣＰＵ２０１の制御にしたがってＨＤ２０４に対する各種データの読み出し又は書き込みを制御するＨＤＤ(Hard Disk Drive)２０５、フラッシュメモリ等の記録メディア２０６に対するデータの読み出し又は書き込み（記憶）を制御するメディアドライブ２０７、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示するディスプレイ２０８、通信ネットワーク２を利用してデータ伝送をするためのネットワークＩ／Ｆ２０９、文字、数値、各種指示などの入力のための複数のキーを備えたキーボード２１１、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行うマウス２１２、着脱可能な記録媒体の一例としてのＣＤ−ＲＯＭ(Compact Disc Read Only Memory)２１３に対する各種データの読み出し又は書き込みを制御するＣＤ−ＲＯＭドライブ２１４、及び、上記各構成要素を図６に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン２１０を備えている。

なお、上記伝送管理用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア２０６やＣＤ−ＲＯＭ２１３等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。また、上記伝送管理用プログラムは、ＨＤ２０４ではなくＲＯＭ２０２に記憶されるようにしてもよい。

また、中継装置３０は、上記管理システム５０と同様のハードウェア構成を有しているため、その説明を省略する。但し、ＨＤ２０４には、中継装置３０を制御するための中継装置用プログラムが記録されている。この場合も、中継装置用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア２０６やＣＤ−ＲＯＭ２１３等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。また、上記中継装置用プログラムは、ＨＤ２０４ではなくＲＯＭ２０２に記憶されるようにしてもよい。

また、プログラム提供システム９０及びメンテナンスシステム１００は、上記管理システム５０と同様のハードウェア構成を有しているため、その説明を省略する。但し、ＨＤ２０４には、プログラム提供システム９０を制御するためのプログラム提供用プログラムが記録されている。この場合も、プログラム提供用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア２０６やＣＤ−ＲＯＭ２１３等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。また、上記プログラム提供システム用プログラムは、ＨＤ２０４ではなくＲＯＭ２０２に記憶されるようにしてもよい。

なお、上記着脱可能な記録媒体の他の例として、ＣＤ−Ｒ(Compact Disc Recordable)、ＤＶＤ(Digital Versatile Disk)、ブルーレイディスク等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。

＜＜機能構成＞＞
次に、機能構成について説明する。図７は、伝送システム１を構成する各端末、装置及びシステムの機能ブロック図である。図７では、端末１０、中継装置３０、及び管理システム５０が、通信ネットワーク２を介してデータ通信することができるように接続されている。また、図１に示されているプログラム提供システム９０及びメンテナンスシステム１００は、テレビ会議の通信において直接関係ないため、図７では省略されている。

＜端末の機能構成＞
端末１０は、送受信部１１、操作入力受付部１２、ログイン要求部１３、撮像部１４、音入力部１５ａ、音出力部１５ｂ、最終絞込部１６、表示制御部１７、遅延検出部１８、記憶・読出処理部１９、抽出部２０、音判断部２１、及び変更部２２を有している。これら各部は、図５に示されている各構成要素のいずれかが、フラッシュメモリ１０４からＲＡＭ１０３上に展開された端末用プログラムに従ったＣＰＵ１０１からの命令によって動作することで実現される機能、又は機能する手段である。また、端末１０は、図５に示されているＲＡＭ１０３、及び図５に示されているフラッシュメモリ１０４によって構築される記憶部１０００を有している。

（画面管理テーブル）
記憶部１０００には、図８に示されているような画面管理テーブルによって構成されている画面管理ＤＢ(Data Base)１００１が構築される。画面管理テーブルでは、ディスプレイ１２０内に表示される複数の画面をそれぞれ特定するための画面番号（ディスプレイ１２０内に表示される画面を特定する画面特定情報の一例）、及び、これら複数の画面に表示される画像に係る画像データの送信元である伝送端末１０を識別するための端末ＩＤ（端末１０の識別情報の一例）を関連付けて管理されている。図８では、ディスプレイ１２０内に表示される画面を特定する画面番号として、「１」から「８」までが示されている。

また、画面管理テーブルでは、ディスプレイ１２０に表示されない仮想の画面を特定するための画面番号、及び、これらの表示されない画面に割り当てられる画像に係る画像データの送信元である伝送端末１０を識別するための端末ＩＤを関連付けて管理されている。図８では、ディスプレイ１２０内に表示されない画面を特定する画面番号として、「補１」から「補３」まで、及びこれ以降が示されている。

（伝送端末の各機能構成）
次に、図５及び図７を用いて、端末１０の各機能構成について詳細に説明する。なお、以下では、端末１０の各機能構成を説明するにあたって、図５に示されている各構成要素のうち、端末１０の各機能構成を実現させるための主な構成要素との関係も説明する。

図７に示されている端末１０の送受信部１１は、図５に示されているＣＰＵ１０１からの命令、及び図５に示されているネットワークＩ／Ｆ１１１によって実現され、通信ネットワーク２を介して他の端末、装置又はシステムと各種データ（または情報）の送受信を行う。この送受信部１１は、所望の宛先端末と通話を開始する前から、管理システム５０より、宛先候補としての各端末の状態を示す各状態情報の受信を開始する。なお、この状態情報は、各端末１０の稼動状態（オンラインかオフラインかの状態）だけでなく、オンラインであっても更に通話可能であるか、通話中であるか、離席中であるか等の詳細な状態を示す。また、この状態情報は、各端末１０の稼動状態だけでなく、端末１０でケーブル１２０ｃが端末１０から外れていたり、音を出力するが画像は出力させなかったり、音を出力さないようにする（ＭＵＴＥ）等、様々な状態を示す。以下では、一例として、状態情報が稼動状態を示す場合について説明する。

操作入力受付部１２は、図５に示されているＣＰＵ１０１からの命令、並びに図５に示されている操作ボタン１０８及び電源スイッチ１０９によって実現され、利用者による各種入力を受け付ける。例えば、利用者が、図５に示されている電源スイッチ１０９をＯＮにすると、図７に示されている操作入力受付部１２が電源ＯＮを受け付けて、電源をＯＮにする。

ログイン要求部１３は、図５に示されているＣＰＵ１０１からの命令によって実現され、上記電源ＯＮの受け付けを契機として、送受信部１１から通信ネットワーク２を介して管理システム５０に、ログインを要求する旨を示すログイン要求情報、及び要求元端末の現時点のＩＰアドレスを自動的に送信する。また、利用者が電源スイッチ１０９をＯＮの状態からＯＦＦにすると、送受信部１１が管理システム５０へ電源をＯＦＦする旨の状態情報を送信した後に、操作入力受付部１２が電源を完全にＯＦＦにする。これにより、管理システム５０側では、端末１０が電源ＯＮから電源ＯＦＦになったことを把握することができる。

撮像部１４は、図５に示されているＣＰＵ１０１からの命令、並びに図５に示されているカメラ１１２及び撮像素子Ｉ／Ｆ１１３によって実現され、被写体を撮像して、この撮像して得た画像データを出力する。

音入力部１５ａは、図５に示されているＣＰＵ１０１からの命令、及び図５に示されている音入出力Ｉ／Ｆ１１６によって実現され、マイク１１４によって利用者の音が音信号に変換された後、この音信号に係る音データを入力する。音出力部１５ｂは、図５に示されているＣＰＵ１０１からの命令、及び図５に示されている音入出力Ｉ／Ｆ１１６によって実現され、音データに係る音信号をスピーカに出力し、スピーカ１１５から音を出力させる。

最終絞込部１６は、複数の中継装置３０から最終的に１つの中継装置３０に絞り込む最終絞り込み処理を行うため、図５に示されているＣＰＵ１０１からの命令によって、図９に示されるような計測部１６ａ、算出部１６ｂ、及び最終選択部１６ｃを実現する。

このうち、計測部１６ａは、送受信部１１によって受信された後述の事前送信情報毎に、送受信部１１によって事前送信情報が受信される際の受信日時を計測する。算出部１６ｂは、計測部１６ａによって受信日時が計測された事前送信情報毎に、この計測された受信時間と、この事前送信情報に含まれている送信日時との差に基づいて、事前送信情報の送信から受信までの所要時間(T)を算出する。最終選択部１６ｃは、算出部１６ｂによって算出された所要時間のうち最短の所要時間を要した事前送信情報が中継された中継装置３０を選択することで、最終的に１つの中継装置を選択する。

表示制御部１７は、図５に示されているＣＰＵ１０１からの命令、及び図５に示されているディスプレイＩ／Ｆ１１７によって実現され、後述のように、受信された解像度の異なる画像データを組み合わせ、この組み合わされた画像データをディスプレイ１２０に送信するための制御を行う。

また、表示制御部１７は、管理システム５０から受信した宛先リストの情報及び各種メッセージをディスプレイ１２０に送信して、ディスプレイ１２０に宛先リスト及び各種メッセージを表示させることができる。

更に、表示制御部１７は、複数の相手側の端末１０から送られて来た画像データで示される画像をディスプレイ１２０内に表示される複数の画面にそれぞれ表示させることができる。また、表示制御部１７が画像又はメッセージを表示させる場合、表示制御部１７は、画面管理テーブル（図８参照）の画面番号で特定されているディスプレイ１２０上の画面に対し、画像データ又はメッセージデータと共に送られて来た端末ＩＤに基づいて、画像又はメッセージを表示させる。なお、画面管理テーブル（図８参照）で、「補１」等のように、画面番号がディスプレイ１２０に表示されない画面を示す場合には、表示制御部１７は、ディスプレイ１２０上の上記複数の画面とは別の画面にメッセージを表示させる。

遅延検出部１８は、図５に示されているＣＰＵ１０１からの命令によって実現され、他の端末１０から中継装置３０を介して送られて来る画像データの遅延時間（ｍｓ）を検出する。具体的には、遅延検出部１８は、予め定められたフレームレート３０fps(Frames Per Second)から、現時点で受信される画像データのフレームレートを差し引くことで、遅延時間を算出する。

記憶・読出処理部１９は、図５に示されているＣＰＵ１０１からの命令及び図５に示すＳＳＤ１０５によって実行され、又はＣＰＵ１０１からの命令によって実現され、記憶部１０００に各種データを記憶したり、記憶部１０００に記憶された各種データを読み出す処理を行う。この記憶部１０００には、端末１０を識別するための端末ＩＤ(Identification）、及びパスワード等が記憶される。更に、記憶部１０００には、宛先端末との通話を行う際に受信される画像データ及び音データが、受信される度に上書き記憶される。このうち、上書きされる前の画像データによってディスプレイ１２０に画像が表示され、上書きされる前の音データによってスピーカ１１５から音が出力される。

抽出部２０は、図５に示されているＣＰＵ１０１からの命令によって実現される。この抽出部２０は、送受信部１１によって、メッセージデータと共に、このメッセージデータの送信元である端末１０の端末ＩＤが受信された場合に、この受信された端末１０の端末ＩＤに基づいて画面管理テーブル（図８参照）を検索し、対応する画面番号を抽出する。

音判断部２１は、図５に示されているＣＰＵ１０１からの命令によって実現される。音判断部２１は、受信された各音データに対して音声区間の検出を行い、有声区間がある音データが存在するか否かを判断する。この音声区間の検出は、公知の技術を用いて実現することができる（例えば、非特許文献 新美、「音声認識」、共立出版、ｐｐ．６８−７２、１９７９を参照）。

変更部２２は、図５に示されているＣＰＵ１０１からの命令によって実現される。上記音声区間がある音データが存在すると判断された場合には、変更部２２は、画面管理テーブル（図８参照）において、上記音声区間がある音データと共に送られて来た端末１０の端末ＩＤを、端末１０の製造又は販売者によって予め定められた画面番号に関連付け直すことで、画面管理テーブルの内容を変更する。この場合、表示制御部１７は、変更された後の画面管理テーブルの内容に基づいて、ディスプレイ１２０内に表示される複数の画面のそれぞれに、対応する画像を表示させる。

なお、端末ＩＤ及び後述の中継装置ＩＤは、それぞれ端末１０及び中継装置３０を一意に識別するために使われる言語、文字、記号、又は各種のしるし等の識別情報を示す。また、端末ＩＤ及び中継装置ＩＤは、上記言語、文字、記号、及び各種のしるしのうち、少なくとも２つが組み合わされた識別情報であってもよい。

＜中継装置の機能構成＞
中継装置３０は、送受信部３１、状態検知部３２、画像状態確認部３３、変更品質管理部３４、画像状態変更部３５、及び記憶・読出処理部３９を有している。これら各部は、図６に示されている各構成要素のいずれかが、ＨＤ２０４からＲＡＭ２０３上に展開された中継装置用プログラムに従ったＣＰＵ２０１からの命令によって動作することで実現される機能又は機能する手段である。また、中継装置３０は、図６に示されているＲＡＭ２０３、及び／又は図６に示されているＨＤ２０４によって構築される記憶部３０００を有している。

（変更画像状態管理テーブル）
記憶部３０００には、図１１に示されているような変更画像状態管理テーブルによって構成されている変更品質管理ＤＢ３００１が構築される。変更画像状態管理テーブルでは、画像データの中継先（宛先）としての端末１０のＩＰアドレス、及び画像状態情報が関連付けて管理されている。この画像状態情報には、中継先に中継装置３０が中継する画像データの画質又は画像データの中継を中断する旨が示されている。

（中継装置の各機能構成）
次に、中継装置３０の各機能構成について詳細に説明する。なお、以下では、中継装置３０の各機能構成を説明するにあたって、図６に示されている各構成要素のうち、中継装置３０の各機能構成を実現させるための主な構成要素との関係も説明する。

図７に示されている中継装置３０の送受信部３１は、図６に示されているＣＰＵ２０１からの命令、及び図６に示されているネットワークＩ／Ｆ２０９によって実現され、通信ネットワーク２を介して他の端末、装置、又はシステムと各種データ（または情報）の送受信を行う。

状態検知部３２は、図６に示されているＣＰＵ２０１からの命令によって実現され、この状態検知部３２を有する中継装置３０の稼動状態を検知する。稼動状態としては、「オンライン」、「オフライン」、「通話中」又は「一時中断」の状態がある。

画像状態確認部３３は、図６に示されているＣＰＵ２０１からの命令によって実現され、宛先端末のＩＰアドレスを検索キーとして、変更画像状態管理テーブル（図１１参照）を検索し、対応した画像状態情報を抽出することで、中継される画像データの画質を確認するか又は画像データの中継を中断することを確認する。

変更品質管理部３４は、図６に示されているＣＰＵ２０１からの命令によって実現され、管理システム５０から送られて来る、後述の品質情報に基づいて、変更画像状態管理ＤＢ３００１の内容を変更する。例えば、端末ＩＤが「０１ａａ」である要求元端末（端末１０ａａ）と、端末ＩＤが「０１ｄｂ」である宛先端末（端末１０ｄｂ）との間で高画質の画像データを送受信することによってテレビ会議を行っている最中に、他のテレビ会議を行う要求元端末（端末１０ｂｂ）と宛先端末（端末１０ｃａ）が通信ネットワーク２を介してテレビ会議を開始すること等によって、宛先端末（端末１０ｄｂ）で画像データの受信の遅延が生じた場合には、中継装置３０は今まで中継していた画像データの画質を、高画質から中画質に下げる。このような場合に、中画質を示す品質情報に基づいて、中継装置３０が中継する画像データの画質を高画質から中画質に下げるように、変更画像状態管理ＤＢ３００１の内容が変更される。

画像状態変更部３５は、図６に示されているＣＰＵ２０１からの命令によって実現され、送信元端末から送られて来た画像データの画質を、上記変更された変更画像状態管理ＤＢ３００１の内容に基づいて変更するか、又は画像データの中継を中断する。

記憶・読出処理部３９は、図６に示されているＣＰＵ２０１からの命令、及び図６に示されているＨＤＤ２０５によって実現され、記憶部３０００に各種データを記憶したり、記憶部３０００に記憶された各種データを読み出す処理を行う。

＜管理システムの機能構成＞
管理システム５０は、送受信部５１、端末認証部５２、状態管理部５３、端末抽出部５４、端末状態取得部５５、一次絞込部５６、セッション管理部５７、画像状態決定部５８、記憶・読出処理部５９、遅延時間管理部６０、及びメッセージ作成部６１を有している。これら各部は、図６に示されている各構成要素のいずれかが、ＨＤ２０４からＲＡＭ２０３上に展開された管理システム用プログラムに従ったＣＰＵ２０１からの命令によって動作することで実現される機能又は機能する手段である。また、管理システム５０は、図６に示されているＨＤ２０４により構築される記憶部５０００を有している。

（中継装置管理テーブル）
記憶部５０００には、図１２に示されているような中継装置管理テーブルによって構成されている中継装置管理ＤＢ５００１が構築されている。この中継装置管理テーブルでは、各中継装置３０の中継装置ＩＤ毎に、各中継装置３０の稼動状態、稼動状態が示される状態情報が管理システム５０で受信された受信日時、中継装置３０のＩＰアドレス、及び中継装置３０における最大データ伝送速度（Ｍｂｐｓ）が関連付けられて管理される。例えば、図１２に示されている中継装置管理テーブルにおいて、中継装置ＩＤが「１１１ａ」の中継装置３０ａは、稼動状態が「オンライン」で、管理システム５０で状態情報が受信された日時が「２００９年１１月１０日の１３時００分」で、この中継装置３０ａのＩＰアドレスが「１．２．１．２」で、この中継装置３０ａにおける最大データ伝送速度が１００Ｍｂｐｓであることが示されている。

（端末認証管理テーブル）
更に、記憶部５０００には、図１３に示されているような端末認証管理テーブルによって構成されている端末認証管理ＤＢ５００２が構築されている。この端末認証管理テーブルでは、管理システム５０によって管理される全ての端末１０の各端末ＩＤに対して、各パスワードが関連付けられて管理される。例えば、図１３に示されている端末認証管理テーブルにおいて、端末１０ａａの端末ＩＤは「０１ａａ」で、パスワードは「ａａａａ」であることが示されている。

（端末管理テーブル）
また、記憶部５０００には、図１４に示されているような端末管理テーブルによって構成されている端末管理ＤＢ５００３が構築されている。この端末管理テーブルでは、各端末１０の端末ＩＤ毎に、各宛先としての端末１０の名称を示す端末名、各端末１０の稼動状態、後述のログイン要求情報が管理システム５０で受信された受信日時、及び端末１０のＩＰアドレスが関連付けられて管理される。例えば、図１４に示されている端末管理テーブルにおいて、端末ＩＤが「０１ａａ」の端末１０ａａは、端末名が「日本 東京事業所 ＡＡ端末」で、稼動状態が「オンライン（通話可能）」で、管理システム５０でログイン要求情報が受信された日時が「２００９年１１月１０日の１３時４０分」で、この端末１０ａａのＩＰアドレスが「１．２．１．３」であることが示されている。

（宛先リスト管理テーブル）
更に、記憶部５０００には、図１５に示されているような宛先リスト管理テーブルによって構成されている宛先リスト管理ＤＢ５００４が構築されている。この宛先リスト管理テーブルでは、テレビ会議における通話の開始を要求する要求元端末の端末ＩＤに対して、宛先端末の候補として登録されている宛先端末の端末ＩＤが全て関連付けられて管理される。例えば、図１５に示されている宛先リスト管理テーブルにおいて、端末ＩＤが「０１ａａ」である要求元端末（端末１０ａａ）からテレビ会議における通話の開始を要求することができる宛先端末の候補は、端末ＩＤが「０１ａｂ」の端末１０ａｂ、端末ＩＤが「０１ｂａ」の端末１０ｂａ、及び端末ＩＤが「０１ｂｂ」の端末１０ｂｂ等であることが示されている。この宛先端末の候補は、任意の要求元端末から管理システム５０に対する追加又は削除の要請により、追加又は削除されることで更新される。

（セッション管理テーブル）
また、この記憶部５０００には、図１６に示されているようなセッション管理テーブルによって構成されているセッション管理ＤＢ５００５が構築されている。このセッション管理テーブルでは、中継装置３０を選択するためのセッションの実行に用いられる選択用セッションＩＤ毎に、画像データ及び音データの中継に使用される中継装置３０の中継装置ＩＤ、要求元端末の端末ＩＤ、宛先端末の端末ＩＤ、宛先端末において画像データが受信される際の受信の遅延時間（ｍｓ）、及びこの遅延時間が示されている遅延情報を宛先端末から送られて来て管理システム５０で受信された受信日時が関連付けられて管理される。例えば、図１６に示されているセッション管理テーブルにおいて、選択用セッションＩＤ「ｓｅ１」を用いて実行されたセッションで選択された中継装置３０ａ（中継装置ＩＤ「１１１ａ」）は、端末ＩＤが「０１ａａ」の要求元端末（端末１０ａａ）と、端末ＩＤが「０１ｄｂ」の宛先端末（端末１０ｄｂ）との間で、画像データ及び音データを中継しており、宛先端末（端末１０ｄｂ）において「２００９年１１月１０日の１４時００分」時点における画像データの遅延時間が２００（ｍｓ）であることが示されている。なお、２つの端末１０の間でテレビ会議を行う場合には、上記宛先端末ではなく要求元端末から送信されてきた遅延情報に基づいて、遅延情報の受信日時を管理してもよい。但し、３つ以上の端末１０の間でテレビ会議を行う場合には、画像データ及び音データの受信側の端末１０から送信されてきた遅延情報に基づいて、遅延情報の受信日時を管理する。

（アドレス優先度管理テーブル）
更に、記憶部５０００には、図１７に示されているようなアドレス優先度管理テーブルによって構成されている優先度管理ＤＢ５００６が構築されている。このアドレス優先度管理テーブルでは、任意の端末１０と任意の中継装置３０において、一般的なＩＰｖ４におけるＩＰアドレスのうちの４組のドットアドレス(Dot Address)部分の「同」が多い程、アドレス優先度のポイントが高くなるように、ドットアドレスの同異とアドレス優先度とが関連付けられて管理される。この「同」は、ドットアドレス部分が同じであることを意味し、「異」は、ドットアドレス部分が異なることを意味する。例えば、図１７に示されているアドレス優先度管理テーブルにおいて、ドットアドレスの上位から下位にかけて３つの値が同じＩＰアドレスの場合には、アドレス優先度のポイントが「５」である。ドットアドレスの上位から下位にかけて２つの値が同じＩＰアドレスの場合には、アドレス優先度のポイントが「３」である。この場合、最下位のドットアドレスの値が同じであるか否かは優先度に関係ない。ドットアドレスの最上位の値が同じで、上位から２番目の値が異なるＩＰアドレスの場合には、アドレス優先度のポイントが「１」である。この場合、上位から３番目及び最下位のドットアドレスの値が同じであるか否かは優先度には関係ない。ドットアドレスの最上位の値が異なるＩＰアドレスの場合には、アドレス優先度のポイントが「０」である。この場合、上位から２番目、３番目、及び最下位のドットアドレスの値が同じであるか否かは優先度には関係ない。

（伝送速度優先度管理テーブル）
また、記憶部５０００に構築されている優先度管理ＤＢ５００６には、図１８に示されているような伝送速度優先度管理テーブルも含まれている。この伝送速度優先度管理テーブルでは、中継装置３０における最大データ伝送速度（Ｍｂｐｓ）の値が大きくなる程、伝送速度優先度のポイントが高くなるように、最大テータ伝送速度と伝送速度優先度とが関連付けられて管理される。例えば、図１８に示されている伝送速度優先度管理テーブルにおいて、中継装置３０における最大データ伝送速度が１０００Ｍｂｐｓ以上の場合には、伝送速度優先度のポイントが「５」である。中継装置３０における最大データ伝送速度が１００Ｍｂｐｓ以上１０００Ｍｂｐｓ未満の場合には、伝送速度優先度のポイントが「３」である。中継装置３０における最大データ伝送速度が１０Ｍｂｐｓ以上１００Ｍｂｐｓ未満の場合には、伝送速度優先度のポイントが「１」である。中継装置３０における最大データ伝送速度が１０Ｍｂｐｓ未満の場合には、伝送速度優先度のポイントが「０」である。

（画像状態管理テーブル）
更に、記憶部５０００には、図１９に示されているような画像状態管理テーブルによって構成されている画像状態管理ＤＢ５００７が構築されている。この画像状態管理テーブルでは、端末１０における画像データの受信の遅延時間（ｍｓ）、及び画像状態情報が関連付けられて管理される。具体的には、要求元端末又は宛先端末における画像データの受信の遅延時間（ｍｓ）が長い程、中継装置３０で中継させる画像データの画質を下げるように、画像データの受信の遅延時間と画像データの画質（画像の品質）とが関連付けられて管理される。また、遅延時間が非常に長い場合には（例えば、５００（ｍｓ）以上）、中継装置３０に画像データの中継を中断させるように、画像データの受信の遅延時間と画像データの中継を中断する旨とが関連付けられて管理される。

（管理システムの各機能構成）
次に、管理システム５０の各機能構成について詳細に説明する。なお、以下では、管理システム５０の各機能構成を説明するにあたって、図６に示されている各構成要素のうち、管理システム５０の各機能構成を実現させるための主な構成要素との関係も説明する。

送受信部５１は、図６に示されているＣＰＵ２０１からの命令、及び図６に示されているネットワークＩ／Ｆ２０９によって実行され、通信ネットワーク２を介して他の端末、装置又はシステムと各種データ（または情報）の送受信を行う。

端末認証部５２は、図６に示されているＣＰＵ２０１からの命令によって実現され、送受信部５１を介して受信されたログイン要求情報に含まれている端末ＩＤ及びパスワードを検索キーとして、記憶部５０００の端末認証管理ＤＢ５００２を検索し、端末認証管理ＤＢ５００２に同一の端末ＩＤ及びパスワードが管理されているかを判断することによって端末認証を行う。

状態管理部５３は、図６に示されているＣＰＵ２０１からの命令によって実現され、ログイン要求してきた要求元端末の稼動状態を管理すべく、端末管理テーブル（図１４参照）に、この要求元端末の端末ＩＤ、要求元端末の稼動状態、管理システム５０でログイン要求情報が受信された受信日時、及び要求元端末のＩＰアドレスを関連付けて記憶して管理する。また、状態管理部５３は、利用者が端末１０の電源スイッチ１０９の状態をＯＮからＯＦＦにすることで、端末１０から送られてきた、電源をＯＦＦする旨の状態情報に基づいて、端末管理テーブル（図１４参照）のオンラインを示す稼動状態をオフラインに変更する。

端末抽出部５４は、図６に示されているＣＰＵ２０１からの命令によって実現され、ログイン要求した要求元端末の端末ＩＤをキーとして、宛先リスト管理テーブル（図１５参照）を検索し、要求元端末と通話することができる宛先端末の候補の端末ＩＤを読み出すことで、端末ＩＤを抽出する。また、端末抽出部５４は、ログイン要求してきた要求元端末の端末ＩＤをキーとして、宛先リスト管理テーブル（図１５参照）を検索し、上記要求元端末の端末ＩＤを宛先端末の候補として登録している他の要求元端末の端末ＩＤも抽出する。

端末状態取得部５５は、図６に示されているＣＰＵ２０１からの命令によって実現され、上記端末抽出部５４によって抽出された宛先端末の候補の端末ＩＤを検索キーとして、端末管理テーブル（図１４参照）を検索し、上記端末抽出部５４によって抽出された端末ＩＤ毎に稼動状態を読み出す。これにより、端末状態取得部５５は、ログイン要求してきた要求元端末と通話することができる宛先端末の候補の稼動状態を取得することができる。また、端末状態取得部５５は、上記端末抽出部５４によって抽出された端末ＩＤを検索キーとして、端末管理ＤＢ５００３を検索し、ログイン要求してきた要求元端末の稼動状態も取得する。

一次絞込部５６は、図６に示されているＣＰＵ２０１からの命令によって実現され、複数の中継装置３０から最終的に１つの中継装置３０に絞り込む最終絞り込み処理を支援するため、この最終絞り込み処理前の一次絞り込み処理を行う。そのために、一次絞込部５６は、図５に示されているＣＰＵ２０１からの命令によって、図１０に示されているように、選択用セッションＩＤ生成部５６ａ、端末ＩＰアドレス抽出部５６ｂ、一次選択部５６ｃ、及び優先度決定部５６ｄを実現する。

このうち、選択用セッションＩＤ生成部５６ａは、中継装置３０を選択するためのセッションの実行に用いられる選択用セッションＩＤを生成する。端末ＩＰアドレス抽出部５６ｂは、要求元端末から送られてきた開始要求情報に含まれている要求元端末の端末ＩＤ、及宛先端末の端末ＩＤに基づいて、端末管理テーブル（図１４参照）を検索することにより、対応するそれぞれの端末１０のＩＰアドレスを抽出する。一次選択部５６ｃは、中継装置管理テーブル（図１２参照）で管理されている中継装置３０のうち、稼動状態が「オンライン」となっている中継装置３０の中継装置ＩＤを選択することにより、中継装置３０の選択を行う。

また、一次選択部５６ｃは、上記端末ＩＰアドレス抽出部５６ｂによって抽出された、要求元端末のＩＰアドレス、及び宛先端末のＩＰアドレスに基づいて、中継装置管理テーブル（図１２参照）を検索することにより、上記選択された中継装置３０のＩＰアドレスのドットアドレス毎に、上記要求元端末及び宛先端末の各ＩＰアドレスにおける各ドットアドレスと同じであるか異なるかを調査する。更に、一次選択部５６ｃは、中継装置毎に、アドレス優先度のポイントにおいて端末１０に対する高い方のポイントと、伝送速度優先度のポイントを統合した統合ポイントのうち、ポイントが高い上位２つの中継装置３０を選択することにより、中継装置３０の更なる選択を行う。なお、ここでは、ポイントが高い上位２つの中継装置３０を選択することにしているが、これに限られるものではなく、中継装置３０を１つでも多く絞り込むことができれば、ポイントが高い上位３つ以上の中継装置３０を選択するようにしてもよい。

優先度決定部５６ｄは、優先度管理テーブル（図１７参照）を参照して、上記一次選択部５６ｃによって調査された中継装置３０毎に、アドレス優先度のポイントを決定する。また、優先度決定部５６ｄは、中継装置管理テーブル（図１２参照）で管理されている各中継装置３０の最大データ伝送速度に基づいて、優先度管理テーブル（図１８参照）を検索することにより、上記一次選択部５６ｃによる第１次の絞り込み処理によって絞り込まれた中継装置３０毎に伝送速度優先度のポイントを決定する。

続いて、セッション管理部５７は、図６に示されているＣＰＵ２０１からの命令によって実現され、記憶部５０００のセッション管理テーブル（図１６参照）に、選択用セッションＩＤ生成部５６ａで生成された選択用セッションＩＤ、要求元端末の端末ＩＤ、及び宛先端末の端末ＩＤを関連付けて記憶して管理する。また、セッション管理部５７は、セッション管理テーブル（図１６参照）に対して、選択用セッションＩＤ毎に、端末１０の最終選択部１６ｃで最終的に１つに選択された中継装置３０の中継装置ＩＤを記憶して管理する。

画像状態決定部５８は、上記遅延時間を検索キーとして、画像状態管理テーブル（図１９参照）を検索し、対応する画像データの画像状態を抽出することで、中継装置３０に中継させる画像データの画質を決定、又は、中継装置に画像データの中継を中断させる決定を行う。

記憶・読出処理部５９は、図６に示されているＣＰＵ２０１からの命令、及び図６に示されているＨＤＤ２０５によって実行され、記憶部５０００に各種データを記憶したり、記憶部５０００に記憶された各種データを読み出す処理を行う。

遅延時間管理部６０は、図６に示されているＣＰＵ２０１からの命令によって実現され、上記宛先端末のＩＰアドレスを検索キーとして、端末管理テーブル（図１４参照）を検索することで、対応する端末ＩＤを抽出し、更に、セッション管理テーブル（図１６参照において、上記抽出した端末ＩＤが含まれるレコードにおける遅延時間のフィールド部分に、上記遅延情報で示されている遅延時間を記憶して管理する。

メッセージ作成部６１は、送受信部５１によって受信された遅延情報を検索キーとして画像状態管理テーブル（図１９参照）を検索することにより、対応する画像状態情報を抽出し、この画像状態情報で示される変更の内容が画像データの中継を中断する旨を示している場合には、画像データを受信しない旨又は前記音データのみを受信する旨のメッセージを作成する。具体的には、メッセージ作成部６１は、送受信部５１によって遅延情報を受信する際に受信した宛先情報を検索キーとして端末管理テーブル（図１４参照）を検索することにより、対応する端末１０の端末ＩＤ（第２の識別情報の一例）を抽出する。また、メッセージ作成部６１は、端末ＩＤ（第２の識別情報の一例）を検索キーとしてセッション管理テーブル（図１６参照）を検索することにより、同じセッションで対応する端末ＩＤ（第１の識別情報の一例）を抽出する。更に、メッセージ作成部６１は、端末ＩＤ（第１の識別情報の一例）を検索キーとして端末管理テーブル（図１４参照）を検索することにより、対応する端末１０の端末名情報を抽出する。更にまた、メッセージ作成部６１は、この端末名情報で示された端末の名称を上記メッセージに含める。

＜＜処理または動作＞＞
次に、図２０乃至図２７を用いて、伝送システム１における処理方法を説明する。なお、図２０は、各中継装置３０から管理システム５０に送信された各中継装置３０の状態を示す状態情報を管理する処理を示したシーケンス図である。図２１は、複数の端末１０の間で通話を開始する準備段階の処理を示したシーケンス図である。図２２は、中継装置３０を絞り込む処理を示したシーケンス図である。図２３は、中継装置３０を絞り込む処理を示した処理フロー図である。図２４は、中継装置３０の絞り込み処理を行う際の優先度のポイントの計算状態を示した図である。図２５は、端末１０が中継装置３０を選択する処理を示したシーケンス図である。図２６は、端末で中継装置３０を選択する処理を示した処理フロー図である。図２７は、端末間で画像データ及び音データを送受信する処理を示したシーケンス図である。

まず、図２０を用いて、各中継装置３０から管理システム５０に送信された各中継装置３０の状態を示す状態情報を管理する処理を説明する。まず、各中継装置３０では、図７に示されている状態検知部３２が、自装置である中継装置３０の稼動状態を定期的に検知している（ステップＳ１−１〜４）。そして、管理システム５０側で各中継装置３０の稼動状態をリアルタイムで管理させるべく、各中継装置３０の送受信部３１は、定期的に通信ネットワーク２を介して管理システム５０へ各状態情報を送信する（ステップＳ２−１〜４）。これら各状態情報には、中継装置３０毎の中継装置ＩＤと、これら各中継装置ＩＤに係る中継装置３０の状態検知部３２で検知された稼動状態とが含まれている。なお、ここでは、中継装置（３０ａ，３０ｂ，３０ｄ）は、正常に稼動して「オンライン」となっている一方で、中継装置３０ｃは稼働中ではあるが、中継装置３０ｃの中継動作を実行するためのプログラムに何らかの不具合が生じて、「オフライン」となっている場合が示されている。

次に、管理システム５０では、各中継装置３０から送られて来た各状態情報を送受信部５１が受信し、記憶・読出処理部５９を介して記憶部５０００の中継装置管理テーブル（図１２参照）に、中継装置ＩＤ毎に状態情報を記憶して管理する（ステップＳ３−１〜４）。これにより、図１２に示されるような中継装置管理テーブルに対して、中継装置ＩＤ毎に「オンライン」、「オフライン」、又は「故障中」のいずれかの稼動状態が記憶されて管理される。またこの際に、中継装置ＩＤ毎に、管理システム５０で状態情報が受信された受信日時も記憶されて管理される。なお、中継装置３０から状態情報が送られない場合には、図１２に示されている中継装置管理テーブルの各レコードにおける稼動状態のフィールド部分及び受信日時のフィールド部分が空白になるか、又は、前回の受信時の稼動状態及び受信日時をそれぞれ示す。

次に、図２１を用いて、端末１０ａａと端末１０ｄｂとの間で、通話を開始する前の準備段階における各管理情報の送受信処理について説明する。なお、図２１では、全て図２に示されている管理情報用セッションｓｅｉによって、各種管理情報が送受信される。

まず、利用者が、図５に示されている電源スイッチ１０９をＯＮにすると、図７に示されている操作入力受付部１２が電源ＯＮを受け付けて、電源をＯＮにする（ステップＳ２１）。そして、ログイン要求部１３は、上記電源ＯＮの受け付けを契機とし、送受信部１１から通信ネットワーク２を介して管理システム５０に、ログイン要求を示すログイン要求情報を自動的に送信する（ステップＳ２２）。このログイン要求情報には、要求元としての自端末である端末１０ａａを識別するための端末ＩＤ及びパスワードが含まれている。これら端末ＩＤ及びパスワードは、記憶・読出処理部１９を介して記憶部１０００から読み出されて、送受信部１１に送られたデータである。なお、端末１０ａａから管理システム５０へログイン要求情報が送信される際は、受信側である管理システム５０は、送信側である端末１０ａｂのＩＰアドレスを把握することができる。

次に、管理システム５０の端末認証部５２は、送受信部５１を介して受信したログイン要求情報に含まれている端末ＩＤ及びパスワードを検索キーとして、記憶部５０００の端末認証管理テーブル（図１３参照）を検索し、この端末認証管理テーブルに同一の端末ＩＤ及びパスワードが管理されているかを判断することによって端末認証を行う（ステップＳ２３）。この端末認証部５２によって、同一の端末ＩＤ及びパスワードが管理されているため、正当な利用権限を有する端末１０からのログイン要求であると判断された場合には、状態管理部５３は、端末管理テーブル（図１４参照）に、端末１０ａａの端末ＩＤ、稼動状態、上記ログイン要求情報が受信された受信日時、及び端末１０ａａのＩＰアドレスを関連付けて記憶する（ステップＳ２４）。これにより、図１４に示されている端末管理テーブルには、端末ＩＤ「０１ａａ」に、稼動状態「オンライン」、受信日時「２００９．１１．１０．１３：４０」及び端末１０ａａのＩＰアドレス「１．２．１．３」が関連付けて管理されることになる。

そして、管理システム５０の送受信部５１は、上記端末認証部５２によって得られた認証結果が示された認証結果情報を、通信ネットワーク２を介して、上記ログイン要求してきた要求元端末（端末１０ａａ）に送信する（ステップＳ２５）。ここでは、端末認証部５２によって正当な利用権限を有する端末であると判断された場合につき、以下続けて説明する。

管理システム５０の端末抽出部５４は、ログイン要求した要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」を検索キーとして、宛先リスト管理テーブル（図１５参照）を検索し、要求元端末（端末１０ａａ）と通信することができる宛先端末の候補の端末ＩＤを読み出すことによって抽出する（ステップＳ２６）。ここでは、要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」に対応する宛先端末（端末１０ａｂ，１０ｂａ，１０ｄｂ）のそれぞれの端末ＩＤ（「０１ａｂ」、「０１ｂａ」、「０１ｄｂ」）が抽出されることになる。

次に、端末状態取得部５５は、上記端末抽出部５４によって抽出された宛先端末の候補の端末ＩＤ（「０１ａｂ」、「０１ｂａ」、「０１ｄｂ」）を検索キーとして、端末管理テーブル（図１４参照）を検索し、上記端末抽出部５４によって抽出された端末ＩＤ毎に稼動状態（「オフライン」、「オンライン」、「オンライン」）を読み出すことにより、端末（１０ａｂ，１０ｂａ，１０ｄｂ）の各稼動状態を取得する（ステップＳ２７）。

次に、送受信部５１は、上記ステップＳ２７で使用された検索キーとしての端末ＩＤ（「０１ａｂ」、「０１ｂａ」、「０１ｄｂ」）と、それぞれに対応する宛先端末（端末１０ａｂ，１０ｂａ，１０ｄｂ）のそれぞれの稼動状態（「オフライン」、「オンライン」、「オンライン」）とが含まれた宛先状態情報を、通信ネットワーク２を介して要求元端末（端末１０ａａ）に送信する（ステップＳ２８）。これにより、要求元端末（端末１０ａａ）は、この要求元端末（端末１０ａａ）と通信することができる宛先端末の候補である端末（１０ａｂ，１０ｂａ，１０ｄｂ）の現時点のそれぞれの稼動状態（「オフライン」、「オンライン」、「オンライン」）を把握することができる。

更に、管理システム５０の端末抽出部５４は、ログイン要求してきた要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」を検索キーとして、宛先リスト管理テーブル（図１５参照）を検索し、上記要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」を宛先端末の候補として登録している他の要求元端末の端末ＩＤを抽出する（ステップＳ２９）。図１５に示されている宛先リスト管理テーブルでは、抽出される他の要求元端末の端末ＩＤは、「０１ａｂ」、「０１ｂａ」、及び「０１ｄｂ」である。

次に、管理システム５０の端末状態取得部５５は、上記ログイン要求して来た要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」を検索キーとして、端末状態管理テーブル（図１４参照）を検索し、ログイン要求してきた要求元端末（端末１０ａａ）の稼動状態を取得する（ステップＳ３０）。

そして、送受信部５１は、上記ステップＳ２９で抽出された端末ＩＤ（「０１ａｂ」、「０１ｂａ」、「０１ｄｂ」）に係るそれぞれの端末（１０ａｂ，１０ｂａ，１０ｄｂ）のうち、端末管理テーブル（図１４参照）で稼動状態が「オンライン」となっている端末（１０ｂａ，１０ｄｂ）に、上記ステップＳ３０で取得された要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」と稼動状態「オンライン」が含まれる宛先状態情報を送信する（ステップＳ３１−１，２）。なお、送受信部５１が端末（１０ｂａ，１０ｄｂ）に宛先状態情報を送信する際に、各端末ＩＤ（「０１ｂａ」、「０１ｄｂ」）に基づいて、図１４に示されている端末管理テーブルで管理されている端末のＩＰアドレスを参照する。これにより、ログイン要求した要求元端末（端末１０ａａ）を宛先として通信することができる他の宛先端末（端末１０ｄｂ，１０ｂａ）のぞれぞれに、上記ログイン要求した要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」、及び稼動状態「オンライン」を伝えることができる。

一方、他の端末１０でも、上記ステップＳ２１と同様に、利用者が図６に示されている電源スイッチ１０９をＯＮにすると、図７に示されている操作入力受付部１２が電源ＯＮを受け付け、上記ステップＳ２２〜Ｓ３１−１,２の処理と同様の処理を行うため、その説明を省略する。

続いて、図２２を用いて、中継装置３０を絞り込む処理を説明する。なお、図２２では、全て図２２に示されている管理情報用セッションｓｅｉによって、各種管理情報が送受信される。また、要求元端末（端末１０ａａ）は、宛先の候補としての端末１０のうち、上記ステップＳ３２によって受信した端末の状態情報により、稼動状態がオンラインである端末（１０ｂａ，１０ｄｂ）の少なくとも一方と通話を行うことができる。そこで、以下では、要求元端末（端末１０ａａ）の利用者が、宛先端末（端末１０ｄｂ）と通話を開始することを選択した場合について説明する。

まず、利用者が図５に示されている操作ボタン１０８を押下して端末１０ｄｂを選択すると、図７に示されている操作入力受付部１２は、宛先端末（端末１０ｄｂ）との通話を開始する要求を受け付ける（ステップＳ４１）。そして、要求元端末（端末１０ａａ）の送受信部１１は、端末１０ａａの端末ＩＤ「０１ａａ」、及び宛先端末（端末１０ｄｂ）の端末ＩＤ「０１ｄｂ」が含まれ、通話を開始したい旨を示す開始要求情報を、管理システム５０へ送信する（ステップＳ４２）。これにより、管理システム５０の送受信部５１は、上記開始要求情報を受信すると共に、送信元である要求元端末（端末１０ａａ）のＩＰアドレス「１．２．１．３」を把握することができる。

そして、状態管理部５３は、開始要求情報に含まれる要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」及び宛先端末（端末１０ｄｂ）の端末ＩＤ「０１ｄｂ」に基づき、端末管理テーブル（図１４参照）において、上記端末ＩＤ「０１ａａ」及び端末ＩＤ「０１ｄｂ」がそれぞれ含まれるレコードの稼動状態のフィールド部分を、ともに「通話中」に変更する（ステップＳ４３）。なお、この状態では、要求元端末（端末１０ａａ）と宛先端末（端末１０ｄｂ）は、通話を開始していないが、通話中状態となり、他の端末１０が要求元端末（端末１０ａａ）又は宛先端末（端末１０ｄｂ）と通話しようとすると、いわゆる通話中状態を示す旨の通知音又は表示が出力される。

次に、中継装置３０を選択するためのセッションを実行する処理を説明する。まず、図１０に示されている選択用セッションＩＤ生成部５６ａは、中継装置３０を選択するためのセッションの実行に用いられる選択用セッションＩＤを生成する（ステップＳ４４）。そして、セッション管理部５７は、記憶部５０００のセッション管理テーブル（図１６参照）に、上記ステップＳ４４で生成された選択用セッションＩＤ「ｓｅ１」、要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」、及び宛先端末（端末１０ｄｂ）の端末ＩＤ「０１ｄｂ」を関連付けて記憶して管理する（ステップＳ４５）。

次に、図７に示されている管理システム５０の一次絞込部５６は、中継装置管理ＤＢ５００１、端末管理ＤＢ５００３、及び優先度管理ＤＢ５００６に基づいて、要求元端末（端末１０ａａ）と、宛先端末（端末１０ｄｂ）との通話を中継するための中継装置３０の一次絞り込みを行う（ステップＳ４６）。

ここで、図１０及び図２３を用いて、ステップＳ４６における処理を更に詳細に説明する。まず、図１０に示されている端末ＩＰアドレス抽出部５６ｂは、要求元端末（端末１０ａａ）から送られてきた開始通信情報に含まれている要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」、及宛先端末（端末１０ｄｂ）の端末ＩＤ「０１ｄｂ」に基づいて、端末管理テーブル（図１４参照）を検索することにより、それぞれに対応する端末（１０ａａ，１０ｄｂ）のＩＰアドレス（「１．２．１．３」,「１．３．２．４」）を抽出する（ステップＳ４６−１）。

次に、一次選択部５６ｃは、中継装置管理テーブル（図１２参照）で管理されている中継装置３０の稼動状態のうち、「オンライン」になっている中継装置（３０ａ，３０ｂ，３０ｄ）の各中継装置ＩＤ（１１１ａ，１１１ｂ，１１１ｄ）を選択する（ステップＳ４６−２）。また、一次選択部５６ｃは、上記ステップＳ４６−１で抽出された、要求元端末（端末１０ａａ）のＩＰアドレス「１．２．１．３」、及び宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」に基づいて、中継装置管理テーブル（図１２参照）を検索することにより、上記ステップＳ４６−２によって選択された中継装置（３０ａ，３０ｂ，３０ｄ）の各ＩＰアドレス（「１．２．１．２．」，「１．２．２．２」，「１．３．２．２」）のドットアドレス毎に、上記要求元端末（端末１０ａａ）及び宛先端末（端末１０ｄｂ）の各ＩＰアドレス（「１．２．１．３」，「１．３．２．４」）における各ドットアドレスと同じであるか異なるかを調査する（ステップＳ４６−３）。

次に、優先度決定部５６ｄは、優先度管理テーブル（図１７参照）を参照して、上記ステップ４６−３によって調査された中継装置（３０ａ，３０ｂ，３０ｄ）毎に、アドレス優先度のポイントを決定する（ステップＳ４６−４）。この決定処理の結果を表に表すと、図２４に示されているような状態になる。なお、図２４は、中継装置３０の絞り込み処理を行う際の優先度のポイントの計算状態を示した図である。この図２４では、中継装置ＩＤ毎に、アドレス優先度のポイント、伝送速度優先度のポイント、及び統合ポイントが示されている。また、アドレス優先度のポイントは、更に、各中継装置３０の要求元端末（端末１０ａａ）に対するポイント及び宛先端末（端末１０ｄｂ）に対するポイントが示されている。統合ポイントは、アドレス優先度の２つのポイントのうちの高い方のポイントと、伝送速度優先度のポイントの合計である。

ここでは、中継装置３０ａのＩＰアドレス「１．２．１．２」は要求元端末（端末１０ａａ）のＩＰアドレス「１．２．１．３」に対して、「同．同．同．異」であるため、図２４に示されているように、アドレス優先度のポイントは「５」になる。また、図１に示されているように、中継装置３０ａのＩＰアドレス「１．２．１．２」は宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」に対して、図１７に示されているように、「同．異．異．異」であるため、図２４に示されているように、アドレス優先度のポイントは「１」になる。また、中継装置３０ｂのＩＰアドレス「１．２．２．２」は要求元端末（端末１０ａａ）のＩＰアドレス「１．２．１．３」に対して、「同．同．異．異」であるため、アドレス優先度のポイントは「３」になる。また、中継装置３０ｂのＩＰアドレス「１．２．２．２」は宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」に対して、「同．異．同．異」であるため、アドレス優先度のポイントは「１」になる。更に、中継装置３０ｄのＩＰアドレス「１．３．２．２」は要求元端末（端末１０ａａ）のＩＰアドレス「１．２．１．３」に対して、「同．異．異．異」であるため、アドレス優先度のポイントは「１」になる。また、中継装置３０ｄのＩＰアドレス「１．３．２．２」は宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」に対して、「同．同．同．異」であるため、アドレス優先度のポイントは「５」になる。

次に、図２３に戻って、優先度決定部５６ｄは、中継装置管理テーブル（図１２参照）で管理されている各中継装置３０の最大データ伝送速度に基づいて、優先度管理テーブル（図１８参照）を検索することにより、上記ステップＳ４６−２によって第１次絞り込み処理によって絞り込まれた中継装置（３０ａ，３０ｂ，３０ｄ）毎に伝送速度優先度のポイントを決定する（ステップＳ４６−５）。ここでは、図１２に示されているように、中継装置３０ａの最大データ伝送速度が１００（Ｍｂｐｓ）であるため、図１８に示されている伝送速度優先度を参照すると、伝送速度優先度が３ポイントになる。また、同様に、中継装置３０ｂの最大データ伝送速度について計算すると１０００（Ｍｂｐｓ）であるため、伝送速度優先度が５ポイントになる。また同様に、中継装置３０ｄの最大データ伝送速度について計算すると１０（Ｍｂｐｓ）であるため、伝送速度優先度が１ポイントになる。

次に、一次選択部５６ｃは、中継装置（３０ａ，３０ｂ，３０ｄ）毎に、アドレス優先度のポイントにおいて端末（１０ａａ，１０ｄｂ）のうち高い方のポイントと、伝送速度優先度のポイントを統合した統合ポイントのうち、ポイントが高い上位２つの中継装置３０を選択する（ステップ４６−６）。ここでは、図２４に示されているように、中継装置ＩＤ（１１１ａ，１１１ｂ，１１１ｄ）は、それぞれ統合ポイントが「８」、「８」、「６」であるため、中継装置ＩＤ「１１１ａ」に係る中継装置３０ａ、及び中継装置ＩＤ「１１１ｂ」に係る中継装置３０ｂが選択されることになる。

以上のステップＳ４６における絞り込み処理が終了すると、図７に示されている送受信部５１は、通信ネットワーク２を介して、宛先端末（端末１０ｄｂ）へ、上記絞り込まれた中継装置３０の数を伝達するための中継装置絞込情報を送信する（ステップＳ４７）。この中継装置絞込情報には、上記ステップ４６によって絞り込まれた中継装置３０の数「２」、要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」、及び上記選択用セッションＩＤ「ｓｅ１」が含まれている。これにより、端末１０ｄｂは、選択用セッションＩＤ「ｓｅ１」におけるセッションの実行において、中継装置３０の数がいくつで、どの端末１０から通話を開始したいとの要求があったのかを把握することができると共に、中継装置絞込情報の送信元である管理システム５０のＩＰアドレス「１．１．１．２」を把握することができる。

そして、端末１０ｄｂは、送受信部１１から通信ネットワーク２を介して管理システム５０へ、上記中継装置絞込情報の受信が完了した旨を示す受信完了情報を送信する（ステップＳ４８）。この受信完了情報には、セッションＩＤ「ｓｅ１」が含まれている。これにより、管理システム５０は、セッションＩＤ「ｓｅ１」で実行されている中継装置数の伝達が完了した旨と共に、送信元である宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」を把握することができる。

次に、図２５及び図２６を用いて、宛先端末（端末１０ｄｂ）が中継装置３０を選択する処理を説明する。なお、図２５では、全て図２に示されている管理情報用セッションｓｅｉによって、各種管理情報が送受信される。

まず、管理システム５０は、テレビ会議の通話を開始する前に、上記ステップＳ４６によって絞り込まれた中継装置（３０ａ，３０ｂ）のそれぞれに対して、事前に中継を要求する旨の事前中継要求情報を送信する（ステップＳ６１−１，２）。この事前中継要求情報には、セッションＩＤ「ｓｅ１」、要求元端末（端末１０ａａ）のＩＰアドレス「１．２．１．３」、及び宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」が含まれている。これにより、各中継装置（３０ａ，３０ｂ）は、どの選択用セッションのものであるか、要求元端末が何であるか、及び宛先端末が何であるかを把握することができると共に、事前中継要求情報の送信元である管理システム５０のＩＰアドレス「１．１．１．２」を把握することができる。

次に、各中継装置（３０ａ，３０ｂ）のそれぞれは、送受信部３１から通信ネットワーク２を介して、上記ステップＳ６１−１，２によって把握した要求元端末（端末１０ａａ）へ、通話の開始前に自装置としての各中継装置（３０ａ，３０ｂ）へ、後述のｐｉｎｇ(Packet Internet Groper)が含まれた事前送信情報を送信させる旨を示す事前送信要求情報を送信する（ステップＳ６２−１，２）。この事前送信情報には、セッションＩＤ「ｓｅ１」が含まれている。これにより、要求元端末（端末１０ａａ）は、セッションＩＤ「ｓｅ１」で実行されている中継装置３０の選択処理において、各中継装置（３０ａ，３０ｂ）に事前送信情報を送信することを把握すると共に、事前送信要求情報の送信元である中継装置（３０ａ，３０ｂ）のそれぞれのＩＰアドレス（「１．２．１．２」，「１．２．２．２」）を把握することができる。

なお、管理システム５０から直接、要求元端末に対して、宛先端末のＩＰアドレスを通知せずに、上記ステップＳ６１−１のように中継装置３０ａに対して宛先端末のＩＰアドレスを通知し、上記ステップＳ６１−２のように中継装置３０ａが要求元端末に対し、自装置（中継装置３０ａ）に対して事前送信要求情報を送信するように要求するのは、各端末１０には、他の端末１０のＩＰアドレスを知らせないようにして、セキュリティーを確保するためである。

次に、要求元端末（端末１０ａａ）は、送受信部１１から通信ネットワーク２を介して各中継装置（３０ａ，３０ｂ）へ事前送信情報を送信する（ステップＳ６３−１，２）。この事前送信情報は、画像データ及び音データの送信に先立って、これら画像データ及び音データの代わりに各中継装置（３０ａ，３０ｂ）を介して宛先端末（端末１０ｄｂ）へ送信されることで、要求元端末（端末１０ａａ）の送信から宛先端末（端末１０ｄｂ）の受信までの所要時間を計測するために用いられる情報である。また、この事前送信情報には、要求元端末（端末１０ａａ）、中継装置（３０ａ，３０ｂ）、及び宛先端末（端末１０ｄｂ）が通信可能に接続されていることを確認するためのｐｉｎｇ、要求元端末（端末１０ａａ）から事前送信情報が送信された送信日時、及びセッションＩＤ「ｓｅ１」が含まれている。これにより、各中継装置（３０ａ，３０ｂ）は、選択用セッションＩＤ「ｓｅ１」におけるセッションの実行において、事前送信情報が送られて来たことを把握できると共に、この事前送信情報の送信元である要求元端末（端末１０ａａ）のＩＰアドレス「１．２．１．３」を把握することができる。

次に、各中継装置（３０ａ，３０ｂ）は、上記ステップＳ６１−１，２によって受信された事前中継要求情報に含まれている宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」に対して、上記事前送信情報を中継する（ステップＳ６４−１，２）。これにより、宛先端末（端末１０ｄｂ）は、セッションＩＤ「ｓｅ１」におけるセッションの実行において、事前送信情報が送られて来たことを把握できると共に、この事前送信情報の送信元（中継元）である中継装置（３０ａ，３０ｂ）のＩＰアドレス（「１．２．１．２」，「１．２．２．２」）を把握することができる。

次に、宛先端末（端末１０ｄｂ）の最終絞込部１６は、事前送信情報に基づいて、最終的にテレビ会議の通話で画像データ及び音データを中継する１つの中継装置３０に絞り込む（ステップＳ６５）。

ここで、図９及び図２６を用いて、ステップＳ６５における処理を更に詳細に説明する。まず、図９に示されている最終絞込部１６の計測部１６ａは、各中継装置（３０ａ，３０ｂ）によって中継された事前送信情報毎に、端末１０ｄｂの送受信部１１で受信した際の受信日時を計測する（ステップＳ６５−１）。次に、算出部１６ｂは、上記受信時間が計測された事前送信情報毎に、上記受信日時と上記事前送信情報に含まれている送信日時との差に基づいて、各事前送信情報の送信から受信までの所要時間を算出する（ステップＳ６５−２）。次に、最終選択部１６ｃは、セッションＩＤ「ｓｅ１」におけるセッションの実行において、中継予定の中継装置３０の数「２」に相当する数の事前送信情報を全て受信したかを判断する（ステップＳ６５−３）。そして、全て受信していない場合には（ＮＯ）、最終選択部１６ｃは、端末１０ｄｂで事前送信情報を受信してから所定時間（ここでは１分間）経過したかを判断する（ステップＳ６５−４）。更に、所定時間経過していない場合には（ＮＯ）、上記ステップＳ６５−１に戻る。一方、上記ステップ６５−３において、全て受信した場合（ＹＥＳ）、又は上記ステップＳ６５−４において、所定時間経過した場合（ＹＥＳ）には、最終選択部１６ｃは、これまでに算出部１６ｂで算出された所要時間のうち最短の所要時間を要した事前送信情報を中継した中継装置３０を１つ選択する（ステップＳ６５−５）。ここでは、中継装置３０ａによって中継された事前送信情報が、中継装置３０ｂによって中継された事前送信情報よりも送信から受信までの所要時間が短かったものとして、中継装置３０ａが選択される例を示している。

次に、宛先端末（端末１０ｄｂ）は、送受信部１１から通信ネットワーク２を介して管理システム５０へ、中継装置３０ａを選択した旨を示す選択情報を送信する（ステップＳ６６）。この選択情報には、セッションＩＤ「ｓｅ１」、及び、選択された中継装置３０ａの中継装置ＩＤ「１１１ａ」が含まれている。これにより、管理システム５０は、セッションＩＤ「ｓｅ１」におけるセッションの実行において、中継装置３０ａが選択されたことを把握できると共に、選択情報の送信元である宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」を把握することができる。

次に、管理システム５０のセッション管理部５７は、セッション管理テーブル（図１６参照）のセッション管理テーブルにおいて、セッションＩＤ「ｓｅ１」が含まれるレコードの中継装置ＩＤのフィールド部分に、上記最終的に１つに選択された中継装置３０ａの中継装置ＩＤ「１１１ａ」を記憶して管理する（ステップＳ６７）。そして、管理システム５０の送受信部５１は、通信ネットワーク２を介して中継装置３０ａへ、中継を開始する旨の要求が示された中継開始要求情報を送信する（ステップＳ６８）。この中継開始要求情報には、中継される要求元端末（端末１０ａａ）及び宛先端末（端末１０ｄｂ）の各ＩＰアドレス（「１．２．１．３」，「１．３．２．４」）が含まれている。これにより、中継装置３０ａは、自装置である中継装置３０ａが選択されたことを把握できるため、端末（１０ａａ，１０ｄｂ）の間で、低解像度、中解像度、及び高解像度の３つ画像データ、並びに、音データを通話するためのセッションを確立する（ステップＳ６９）。よって、端末（１０ａａ，１０ｄｂ）は、テレビ会議の通話を開始することができる。

なお、上記ステップＳ４７において、管理システム５０が宛先端末（端末１０ｄｂ）に中継装置絞込情報を送信することに伴い、ステップＳ４８〜Ｓ６４−１，２を経て、宛先端末（端末１０ｄｂ）側で中継装置の選択処理（ステップＳ６５）を行ったが、これに限るものではなく、上記ステップＳ４７において、管理システム５０が要求元端末（端末１０ａａ）に中継装置絞込情報を送信することで、その後ステップＳ６４−１，２までは、各情報の送信元と受信元が、要求元端末（端末１０ａａ）と宛先端末（端末１０ｄｂ）とで入れ替わるようにしてもよい。これにより、要求元端末（端末１０ａａ）が上記ステップＳ６５に替わって中継装置の選択処理を行うことができ、また、上記ステップＳ６６に替わって選択情報の送信も行うことができる。

続いて、図７及び図２７を用いて、要求元端末と宛先端末との間で、テレビ会議の通話を行うために、画像データ及び音データを送受信する処理を説明する。なお、端末１０ａａから端末１０ｄｂに画像データ及び音データを送信する一方向の処理と、端末１０ｄｂから端末１０ａａに画像データ及び音データを送信する逆方向の処理とで、画像データ及び音データの送受信や後述の遅延時間の検出等は同じ処理であるため、上記一方向の通信について説明し、上記逆方向の通信は省略する。

まず、要求元端末（端末１０ａａ）は、図２に示されている画像・音データ用セッションｓｅｄによって、撮像部１４で撮像された被写体の画像データ、及び音入力部１５ａで入力された音の音データ、並びに、端末１０ａａの端末ＩＤ「０１ａａ」を、送受信部１１から通信ネットワーク２を介して中継装置３０ａへ送信する（ステップＳ８１）。なお、ここでは、図３に示されている低解像度、中解像度、及び高解像度の３つから成る高画質の画像データ、並びに、音データを送信している。これにより、中継装置３０ａでは、送受信部３１で上記３つの解像度の画像データ及び音データを受信する。そして、画像状態確認部３３が、宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」を検索キーとして、変更画像状態管理テーブル（図１１参照）を検索し、対応した画像状態情報を抽出することで、中継する画像データの画像の品質を確認するか又は画像データの中継を中断することを確認する（ステップＳ８２）。ここでは、確認された画像データの画質が「高画質」であり、送受信部３１で受信した画像データの画質と同じであるため、中継装置３０ａは、画像・音データ用セッションｓｅｄによって、そのままの画質の画像データ、及びそのままの音質の音データで、宛先端末（端末１０ｄｂ）に送信する（ステップＳ８３）。また、この際、要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」も送信される。これにより、宛先端末（端末１０ｄｂ）は、送受信部１１で、低解像度、中解像度、高解像度の３つから成る高画質の画像データ、及び音データを受信する。そして、表示制御部１７が、３つの画質の画像データを組み合わせて、ディスプレイ１２０に画像を表示させると共に、音出力部１５ｂが音データに基づく音を出力させることができる。

次に、端末１０ｄｂの遅延検出部１８は、送受信部１１で受信された画像データの受信の遅延時間を一定時間毎（例えば、１秒毎）に検出する（ステップＳ８４）。なお、遅延時間が２００（ｍｓ）である場合について、以下説明を続ける。

宛先端末（端末１０ｄｂ）の送受信部１１は、図２に示されている管理情報用セッションｓｅｉによって、通信ネットワーク２を介して管理システム５０へ、遅延時間「２００（ｍｓ）」を示す遅延情報を送信する（ステップＳ８５）。これにより、管理システム５０は、遅延時間を把握すると共に、遅延情報の送信元である端末１０ｄｂのＩＰアドレス「１．３．２．４」を把握することができる。

次に、管理システム５０の遅延時間管理部６０は、上記宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」を検索キーとして、端末管理テーブル（図１４参照）を検索することで、対応する端末ＩＤ「０１ｄｂ」を抽出し、更に、セッション管理テーブル（図１６参照）において、上記端末ＩＤ「０１ｄｂ」のレコードにおける遅延時間のフィールド部分に、上記遅延情報で示されている遅延時間「２００（ｍｓ）」を記憶して管理する（ステップＳ８６）。

次に、画像状態決定部５８は、上記遅延時間「２００（ｍｓ）」を検索キーとして、画像状態管理テーブル（図１９参照）を検索し、対応する画像状態情報を抽出することで、中継装置３０ａが変更すべき画像データの画像状態を決定する（ステップＳ８７）。ここでは、画像状態決定部５８は、画像状態情報「中画質」を抽出することで、中継装置３０ａで中継される画像データの画質を「中画質」に決定する。

次に、送受信部５１は、セッション管理テーブル（図１６参照）において、上記端末ＩＤ「０１ｄｂ」に関連付けられている中継装置ＩＤ「１１１ａ」を検索キーとして、中継装置管理テーブル（図１２参照）を検索し、対応する中継装置３０ａのＩＰアドレス「１．２．１．２」を抽出する（ステップＳ８８）。そして、送受信部５１は、図２に示されている管理情報用セッションｓｅｉによって、通信ネットワーク２を介して中継装置３０ａへ、上記ステップ８７によって決定された画像データの画質「中画質」を示す品質情報を送信する（ステップＳ８９）。この品質情報には、上記ステップＳ８６において検索キーとして用いた宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」が含まれている。これにより、中継装置３０ａでは、変更品質管理部３４が、変更画像状態管理テーブル（図１１参照）に、送信先の端末１０（ここでは、端末１０ｄｂ）のＩＰアドレス「１．３．２．４」、及び中継される画像データの画質「中画質」を関連付けて記憶して管理する（ステップＳ９０）。

次に、端末１０ａａは、引き続き上記ステップＳ８１と同様に、画像・音データ用セッションｓｅｄによって、中継装置３０ａへ、低解像度、中解像度、高解像度の３つから成る高画質の画像データ、及び、音データ、並びに、端末１０ａａの端末ＩＤ「０１ａａ」を送信する（ステップＳ９１）。これにより、中継装置３０ａでは、上記ステップＳ８２と同様に、画像状態確認部３３が、宛先端末（端末１０ｄｂ）のＩＰアドレス「１．３．２．４」を検索キーとして、変更画像状態管理テーブル（図１１参照）を検索し、対応した中継する画像データの画質「中画質」を抽出することで、中継される画像データの画像の品質を確認するか又は画像データの中継を中断することを確認する（ステップＳ９２）。ここでは、確認された画像データの画質が「中画質」であり、送受信部３１で受信された画像データの画質「高画質」よりも低くなるため、画像状態変更部３５は、画像データの画質を「高画質」から「中画質」に抑制することで、画像データの画像の品質を変更する（ステップＳ９３）。

そして、送受信部３１は、画像・音データ用セッションｓｅｄによって、通信ネットワーク２を介して端末１０ｄｂへ、上記画像データの画質が「中画質」に変更された画像データ、及び音の音質が変更されていない音データを送信する（ステップＳ９４）。また、この際、要求元端末（端末１０ａａ）の端末ＩＤ「０１ａａ」も送信される。これにより、宛先端末（端末１０ｄｂ）は、送受信部１１で、低解像度、中解像度の２つから成る中画質の画像データ、及び音データを受信する。そして、表示制御部１７が、２つの解像度の画像データを組み合わせて、ディスプレイ１２０に画像を表示させると共に、音出力部１５ｂが音データに基づく音を出力させることができる。

このように、画像データを受信する宛先端末（端末１０ｄｂ）で、受信の遅延が生じた場合には、中継装置３０ａは画像の品質を変更し、テレビ会議に参加している人に違和感を与えないようにすることができる。

なお、一旦、画像の品質が下がった場合であっても、その後に、通信ネットワーク２の混雑が解消することで、遅延検出部１８による遅延時間が１００（ｍｓ）よりも短縮すると、上記ステップＳ８５〜Ｓ９２を介して、上記ステップＳ９３により、元の画質「高画質」に変更される。

次に、図２８乃至図３７を用い、宛先端末（端末１０ｄｂ）のディスプレイ１２０ｄｂで表示される画面について説明する。なお、以下では、端末１０ａａ、端末１０ｃａ、及び端末１０ｄｂの３拠点（３者）でテレビ会議をする場合について説明する。

図２８は、ディスプレイに表示された画面例を示す図である。これは、端末１０ｄｂのディスプレイ１２０ｄｂに示された画面例である。図２８に示されているように、ディスプレイ１２０ｄｂに表示されたテレビ会議用画面Ｐ０には、会議のメインの相手側の画像を表示するメイン画面Ｐ１、自端末側の画像を表示するサブ画面Ｐ２、及び、会話のサブとなる相手側の画像を表示させるサブ画面Ｐ３〜Ｐ８が含まれている。なお、メイン画面Ｐ１は、ディスプレイ１２０に表示される複数の画面の中で最大面積を有する。

また、テレビ会議用画面Ｐ０の最下部の左側には、各種メッセージを表示させるメッセージ表示画面Ｐ１０が表示されている。更に、テレビ会議用画面Ｐ０の最下部の中央部には、上記メイン画面とサブ画面で表示されている画像を切り換える際にマウスのポインタ等で押下される「画面切り換え」ボタンＰ１１が表示されている。

また、テレビ会議用画面Ｐ０の最下部の右側には、自端末（端末１０ｄｂ）のカメラ１１２の電源がオンされて自端末側から画像通信を行っているか又は自端末のカメラ１１２の電源がオフされて自端末側から画像通信を行っていないかを示すカメラアイコンＰ１２が表示されている。なお、カメラアイコンＰ１２に「×」が表示されている場合には、自端末のカメラ１１２の電源がオンになっている状態であり、利用者がこれから電源をオフにできることが表示されている。一方、カメラアイコンＰ１２に「×」が表示されていない場合には、自端末のカメラ１１２の電源がオフになっている状態であり、利用者がこれから電源をオンにできることが「×」の表示の代わりに表示されている。

次に、図２９乃至図３１を用い、第１の表示パターンにおいて、会話をしている相手側の画像をメイン画面Ｐ１に表示させる場合について説明する。なお、図２９は、ディスプレイに表示された画面を変更する処理を示したフローチャートである。図３０は、内容が変更された後の画面管理テーブルを示す概念図である。図３１は、ディスプレイに表示された変更後の画面例を示す図である。

図２９に示されているように、端末１０（ここでは、宛先端末（端末１０ｄｂ））の音判断部２１は、自端末の送受信部１１によって受信された複数の音データのうち、常時、所定値以上の音信号レベルが含まれている音データがあるか否かを判断している（ステップＳ１０１，ＮＯ）。

次に、ステップＳ１０１によって、所定値以上の音信号レベルが含まれている音データがあると判断された場合には（ＹＥＳ）、変更部２２は、図３０に示されているように、画面管理テーブルにおいて、所定値以上の音信号レベルが含まれている音データと共に送られて来た端末１０ｃａの端末ＩＤ「０１ｃａ」を、予め定められた画面番号「１」に関連付け直すことで、画面管理テーブルの内容を変更する（ステップＳ１０２）。この場合、表示制御部１７は、変更された後の画面管理テーブルの内容に基づき、図３１に示されているように、ディスプレイ１２０ｄｂにおける複数の画面（Ｐ１，Ｐ２，Ｐ３）のそれぞれに、対応する画像を表示させる。図３１では、図２８に対して、端末１０ｃａ側の画像と端末１０ａａ側の画像が入れ替わって表示されている。

これにより、話し始めた相手の画像がメイン画面Ｐ１に表示されることになり、テレビ会議を行い易くなるという効果を奏する。

ところで、上記では、ステップＳ８５において、遅延時間が２００（ｍｓ）である場合について説明したが、以下では、図３２乃至図３５を用い、遅延時間が６００（ｍｓ）である場合について説明する。

遅延時間が６００（ｍｓ）の場合、遅延時間管理部６０は、上記ステップＳ８６において、セッション管理テーブル（図１６参照）に対し、端末ＩＤ「０１ｄｂ」のレコードにおける遅延時間のフィールド部分に、上記遅延情報で示されている遅延時間「６００（ｍｓ）」を記憶して管理する。次に、画像状態決定部５８は、上記ステップＳ８７において、遅延時間「６００（ｍｓ）」を検索キーとして、画像状態管理テーブル（図１９参照）を検索し、対応する画像状態情報「中断」を抽出することで、中継装置３０ａにおける画像データの中継を「中断」に決定する。これにより、ステップＳ９４では、送受信部３１が、画像・音データ用セッションｓｅｄによって、通信ネットワーク２を介して端末１０ｄｂへ、上記画像データが中継されず、音データのみが中継されることになる。

一方、上記ステップＳ８７によって決定された画像状態が「中断」の場合には、更に、管理システム５０は、上記ステップＳ８８，Ｓ８９の処理に平行して、図３２に示されているように、「画像データの送信先である端末１０ｄｂでは、実際には画像データを受信しない」旨を示すメッセージデータの作成処理を行う（ステップＳ１２１）。なお、図３２は、メッセージの作成、送信、及び表示の処理を示したシーケンス図である。

ここで、図３３を用いて、ステップＳ１２１における処理を更に詳細に説明する。なお、図３３は、メッセージの作成の処理を示した処理フロー図である。

まず、メッセージ作成部６１は、上記ステップＳ８５によって受信された端末１０ｄｂのＩＰアドレスを検索キーとして端末管理ＤＢ５００３を検索することにより、対応する端末ＩＤ（第２の識別情報の一例）を抽出する（ステップＳ１２１−１）。

次に、メッセージ作成部６１は、端末１０ｄｂの端末ＩＤ「０１ｄｂ」を検索キーとしてセッション管理ＤＢ５００５を検索することにより、同じセッション（ここではセッションＩＤ「se1」）で対応する端末１０ａａの端末ＩＤ「０１ａａ」（第１の識別情報の一例）を抽出する（ステップＳ１２１−２）。

次に、メッセージ作成部６１は、端末１０ａａの端末ＩＤ「０１ａａ」を検索キーとして端末管理ＤＢ５００３を検索することにより、対応する端末名情報（ここでは、「ＡＡ端末」を示す端末の名称）を抽出する（ステップＳ１２１−３）。なお、「ＡＡ端末」ではなく、「日本東京事業所ＡＡ端末」、「東京事業所ＡＡ端末」等のように、端末名情報の全部又は一部を抽出してもよい。

次に、メッセージ作成部６１は、画像データを受信しない旨の一例として「画像を受信していません。」を示す文章に、上記ステップＳ１２１−３で抽出された端末名情報「ＡＡ端末」を含めて、「ＡＡ端末の画像を受信していません。」を示す内容のメッセージ（テキストデータ）を作成する（ステップＳ１２１−４）。

なお、メッセージの内容は、「画像を受信していません。」を示す文章ではなく、「音声のみを受信しています。」という文章であってもよい。

また、メッセージの内容は、必ずしも文章である必要はなく、アイコン等の画像であってもよい。この場合、アイコン等の画像のデータは、記憶部５０００に予め記憶されており、メッセージ作成部６１がメッセージを作成する際に、記憶部５０００からアイコン等の画像のデータを読み出す。また、端末１０の記憶部１０００にアイコン等の画像のデータを予め記憶しておき、管理システムからの命令で、端末１０が記憶部１０００からアイコン等の画像のデータを読み出してもよい。

続いて、図３２に示されているように、管理システム５０の送受信部５１は、通信ネットワーク２を介して端末１０ｄｂへ、上記ステップＳ１０１で作成されたメッセージと、遅延が発生した画像データの送信元である端末１０ａａの端末ＩＤ「０１ａａ」とを送信する（ステップＳ１２２）。これにより、端末１０ｄｂの送受信部１１は、メッセージデータ及び端末ＩＤを受信することになる。そして、端末１０ｄｂは、ディスプレイ１２０ｄｂにメッセージを表示させる（ステップＳ１２３）。なお、メッセージデータは、Ｔｅｘｔデータであり、画像データ及び音データに比べてデータ量が非常に小さいため、通信ネットワーク２の帯域幅が非常に狭い場合であっても中継される。

ここで、図３４及び図３５を用いて、ステップＳ１２３における処理を更に詳細に説明する。なお、図３４は、メッセージの表示を示したフローチャートである。図３５は、ディスプレイに表示された第１の表示パターンの画面例を示す図である。

まず、端末１０ｄｂの送受信部１１は、常に、メッセージデータ及び端末ＩＤの受信を待ち受けている（ステップＳ１２３−１，ＮＯ）。そして、送受信部１１が、メッセージデータ及び端末ＩＤを受信すると（ステップＳ１２３−１，ＹＥＳ）、抽出部２０は、この受信された端末ＩＤに基づいて画面管理テーブル（図８参照）を検索し、対応する画面番号を抽出する（ステップＳ１２３−２）。

そして、表示制御部１７は、メイン画面Ｐ１に対して、図２８で示されている画像に替えて、図３５で示されているメッセージを表示させる。即ち、端末１０ａａ側の画像が、端末１０ｄｂ側のメイン画面Ｐ１に表示される際に、端末１０ｄｂ側で画像データの受信が６００（ｍｓ）ほど遅延した場合、中継装置３０ａの画像状態変更部３５は画像データの中継を中断する。一方、端末１０ｄｂは、上記ステップＳ８３，Ｓ９４による画像データの受信ができなくなる替わりに、図３５で示されているように、上記ステップＳ１２２によって受信されたメッセージデータで示されるメッセージをメイン画面Ｐ１に表示する。

続いて、図３６乃至図３７を用い、ディスプレイ１２０ｄｂに表示する第２及び第３の表示パターンの画面例を説明する。なお、図３６は、ディスプレイに表示された第２の表示パターンの画面例を示す図である。また、図３７は、ディスプレイに表示された第３の表示パターンの画面例を示す図である。

図３６に示されている第２の表示パターンでは、第１の表示パターンと同じく３拠点によるテレビ会議が行われている場合が示されている。図３６では、図３１で示される画面の状態において、端末１０ｄｂ側で、端末１０ａａからの画像データの受信が６００（ｍｓ）ほど遅延した場合、画像データの受信ができなくなる替わりに、受信されたメッセージを表示することが示されている。

更に、図３７に示されている第３の表示パターンでは、９拠点以上によるテレビ会議が行われている場合が示されている。なお、これらの拠点の中に、端末１０ｃｃが含まれている場合について説明する。

図３７では、図２８で示される画面の状態において、端末１０ａａからの画像データの受信の遅延により、端末１０ｄｂ側で画像データが受信できなくなった替わりに、画像データを受信できているが、これまで表示されていなかった画像がメイン画面Ｐ１に表示されている。また、その代わりに、メッセージ表示画面Ｐ１０には、端末１０ａａ側の画像を受信できない旨のメッセージが表示されている。

この場合、画像データの受信が遅延する前は、画像管理テーブル（図８参照）において、画面番号「１」に端末１０ａａの端末ＩＤが関連づけられており、更に、画像番号「補１」には、端末１０ｃｃの端末ＩＤが関連付けられている。そして、端末１０ａａからの画像データの受信が中断された後は、画像管理テーブル（図８参照）において、画面番号「１」と「補１」にそれぞれ関連付けられていた端末ＩＤが入れ替わることになる。なお、ここでは、メイン画面の画像と、これまで表示されていなかった画像とを入れ替えたが、これに限るものではなく、サブ画面の画像と、これまで表示されていなかった画像とを入れ替えてもよい。

＜＜主な効果＞＞
以上説明したように、管理システム５０は、画像データの受信に遅延が生じて中継装置３０に画像データの中継を中断された受信側の端末１０に対して、画像データを受信しない旨又は音データのみを受信する旨のメッセージを送信する。これにより、受信側の端末１０では、ディスプレイ１２０に上記メッセージを表示することで、受信側の端末１０の利用者は、送信側の端末１０がテレビ会議を中断したのではなく、遅延により画像データが中継されていないということが分かる。よって、受信側の端末１０の利用者は、送信側の端末１０の利用者に対し、テレビ会議を通じて、安心して話し掛けたり応答することができる。

また、管理システム５０は、上記メッセージに送信側の端末１０の名称を含めることで、３拠点以上でテレビ会議を行っている場合であっても、どの端末１０からの画像データを受信することができなくなったのかが分かる。

〔第１の実施形態〕
続いて、以下、図３８を用いて、本発明の第１の実施形態について説明する。なお、図３８は、本発明の第１の実施形態に係る遅延を解消する処理を示したフローチャートである。

＜＜本実施形態の全体構成＞＞
本実施形態では、上記前提となる発明で示された各構成が更に以下に示す機能を有する。

本実施形態において、図７に示されている端末１０の遅延検出部１８は、遅延時間が所定値（例えば、５００ｍｓ）を超えた場合には、送受信部１１に対して、画像データの送信の中断を要求する。

また、端末１０の送受信部１１は、遅延検出部１８から画像データの送信を中断する要求を受けた場合には、たとえ、撮像部１４で被写体を撮像していても、通信ネットワーク２への画像データの送信を中断し、音データのみを送信する。

＜＜本実施形態の処理または動作＞＞
次に、図３８を用いて、本発明の第１の実施形態に係る遅延を解消する処理を説明する。

まず、本実施形態においても、図２７に示されたステップＳ８１〜８４の処理は実行される。そして、本実施形態では、上記ステップＳ８４の後、上記ステップＳ８５〜Ｓ９４の処理に代わって、端末１０ｄｂが、図３８に示されている処理を実行する。

即ち、図２７のステップＳ８４によって、遅延検出部１８が画像データの受信の遅延時間を検出する。そして、この検出された遅延時間が所定値（例えば、５００ｍｓ）を越えた場合には（ステップＳ２０１，ＹＥＳ）、遅延検出部１８は、送受信部１１に対して、画像データの送信の中断を要求する（ステップＳ２０２）。次に、送受信部１１は、通信ネットワーク２への画像データの送信を中断し、音データのみを送信する（ステップＳ２０３）。一方、上記ステップＳ２０１において、遅延時間が上記所定値を越えていない場合には（ステップＳ２０１，ＮＯ）、遅延を解消する必要がないため、ステップＳ２１２，２１３の処理が実行されずに、図３８に示されている処理が終了する。

＜＜本実施形態の主な効果＞＞
以上説明したように本実施形態によれば、通信ネットワークの混雑等により伝送容量が低下するような環境下では、相手側の端末１０ａａに画像データの送信を中断してもらうのではなく、自分側の端末１０ｄｂからの画像データの送信を中断する。これにより、通信ネットワークの混雑等が解消され、音データの送受信は確保することが可能になるという効果を奏する。

更に、相手側の端末１０ａａに画像データの送信を中断してもらうのではないため、わざわざ自分側から相手側に画像データの送信を中断して欲しい旨を伝える必要がないという効果を奏する。

〔第２の実施形態〕
続いて、以下、図３８を用いて、本発明の第２の実施形態について説明する。なお、図３９は、本発明の第２の実施形態に係る遅延を解消する処理を示したフローチャートである。

＜＜本実施形態の全体構成＞＞
本実施形態では、上記前提となる発明で示された各構成が更に以下に示す機能を有する。

本実施形態において、図７に示されている端末１０の遅延検出部１８は、遅延時間が所定値（例えば、５００ｍｓ）を超えた場合には、撮像部１４に対して、被写体の撮像の中断を要求する。

また、端末１０の撮像部１４は、遅延検出部１８から被写体の撮像を中断する要求を受けた場合には、撮像の処理を中断する。

＜＜本実施形態の処理または動作＞＞
次に、図３９を用いて、本発明の第２の実施形態に係る遅延を解消する処理を説明する。

まず、本実施形態においても、図２７に示されたステップＳ８１〜８４の処理は実行される。そして、本実施形態では、上記ステップＳ８４の後、上記ステップＳ８５〜Ｓ９４の処理に代わって、端末１０ｄｂが、図３９に示されている処理を実行する。

即ち、図２７のステップＳ８４によって、遅延検出部１８が画像データの受信の遅延時間を検出する。そして、この検出された遅延時間が所定値（例えば、５００ｍｓ）を越えた場合には（ステップＳ２１１，ＹＥＳ）、遅延検出部１８は、撮像部１４に対して、被写体の撮像の中断を要求する（ステップＳ２１２）。次に、撮像部１４は、撮像の処理を中断する（ステップＳ２１３）。これにより、撮像部１４から送受信部１１に画像データが送信されなくなるため、結果的に、送受信部１１は、通信ネットワーク２に対して画像データの送信を中断することになる。

一方、上記ステップＳ２１１において、遅延時間が上記所定値を越えていない場合には（ステップＳ２１１，ＮＯ）、遅延を解消する必要がないため、ステップＳ２１２，２１３の処理が実行されずに、図３９に示されている処理が終了する。

＜＜本実施形態の主な効果＞＞
以上説明したように本実施形態によれば、上記第１の実施形態の主な効果に加え、撮像部１４の撮像の処理を中断させるため、省エネルギー化を実現することができるという効果を奏する。

通信ネットワークの混雑等により伝送容量が低下するような環境下では、相手側の端末１０ａａに画像データの送信を中断してもらうのではなく、自分側の端末１０ｄｂから送信する画像データを中断する。これにより、通信ネットワークの混雑等が解消され、音データの送受信は確保することが可能になるという効果を奏する。

更に、相手側の端末１０ａａに画像データの送信を中断してもらうのではないため、わざわざ自分側から相手側に画像データの送信を中断して欲しい旨を伝える必要がないという効果を奏する。

〔実施形態の補足〕
上記実施形態における中継装置３０、管理システム５０、プログラム提供システム９０、及びメンテナンスシステム１００は、単一のコンピュータによって構築されてもよいし、各部（機能又は手段）を分割して任意に割り当てられた複数のコンピュータによって構築されていてもよい。また、プログラム提供システム９０が単一のコンピュータによって構築されている場合には、プログラム提供システム９０によって送信されるプログラムは、複数のモジュールに分けて送信されるようにしてもよいし、分けないで送信されるようにしてもよい。更に、プログラム提供システム９０が複数のコンピュータによって構築されている場合には、複数のモジュールが分けられた状態で、各コンピュータから送信されるようにしてもよい。

また、上記各実施形態の端末用プログラム、中継装置用プログラム、又は伝送管理用プログラムが記憶されたＣＤ−ＲＯＭ等の記録媒体、並びに、これらプログラムが記憶されたＨＤ２０４、及びこのＨＤ２０４を備えたプログラム提供システム９０は、いずれもプログラム製品(Program Product)として、国内又は国外へ、上記端末用プログラム、中継装置用プログラム、及び伝送管理用プログラムが利用者等に提供される場合に用いられる。

更に、上記実施形態では、図１１に示されている変更画像状態管理テーブル、及び図１９に示されている品質管理テーブルによって、中継装置３０で中継される画像データの画像の品質の一例として、画像データの画像の解像度に着目して管理したが、これに限られるものではなく、品質の他の例として、画像データの画質の深度、音データの音声におけるサンプリング周波数、音データの音声におけるビット長などに着目して管理してもよい。また、音データが３種類の解像度（高解像度、中解像度、低解像度）のデータに分かれて送受信されるようにしてもよい。

また、図１２、図１４、及び図１６では、受信日時について管理しているが、これに限るものではなく、受信日時のうち少なくとも受信時間を管理すればよい。

更に、上記実施形態では、図１２で中継装置のＩＰアドレス、図１４で端末のＩＰアドレスを管理することとしたが、これに限るものではなく、通信ネットワーク２上で中継装置３０を特定するための中継装置特定情報、又は通信ネットワーク２上で端末１０を特定するための端末特定情報であれば、上記宛先情報の別例として、それぞれのＦＱＤＮ(Fully Qualified Domain Name)を管理してもよい。この場合、周知のＤＮＳ(Domain Name System)サーバによって、ＦＱＤＮに対応するＩＰアドレスが取得されることになる。なお、「通信ネットワーク２で中継装置３０を特定するための中継装置特定情報」だけでなく、「通信ネットワーク２上における中継装置３０への接続先を示した中継装置接続先情報」、又は「通信ネットワーク２上における中継装置３０への宛先を示した中継装置宛先情報」と表現してもよい。同じく、「通信ネットワーク２で端末１０を特定するための端末特定情報」だけでなく、「通信ネットワーク２上における端末１０への接続先を示した端末接続先情報」、又は「通信ネットワーク２上における端末１０への宛先を示した端末宛先情報」と表現してもよい。

また、上記実施形態では、伝送システム１の一例として、テレビ会議システムの場合について説明したが、これに限るものではなく、ＩＰ(Internet Protocol)電話や、インターネット電話等の電話システムであってもよい。また、伝送システム１は、カーナビゲーションシステムであってもよい。この場合、例えば、端末１０の一方が自動車に搭載されたカーナビゲーション装置に相当し、端末１０の他方が、カーナビゲーションを管理する管理センターの管理端末若しくは管理サーバ、又は他の自動車に搭載されているカーナビゲーション装置に相当する。また、伝送システム１は、携帯電話機の通信システムであってもよい。この場合、例えば、端末１０は携帯電話機に相当する。

また、上記実施形態では、コンテンツデータの一例として、画像データ及び音データについて説明したが、これに限るものではなく、触覚(touch)データであってもよい。この場合、一方の端末側でユーザが接触した感覚が、他方の端末側に伝達される。更に、コンテンツデータは、嗅覚（smell）データであってもよい。この場合、一方の端末側の匂い（臭い）が、他の端末側に伝達される。また、コンテンツデータは、画像データ、音データ、触覚データ、及び嗅覚データのうち、少なくとも１つのデータであればよい。

また、上記実施形態では、伝送システム１によってテレビ会議をする場合について説明したが、これに限るものではなく、打ち合わせ、家族間や友人間等の一般的な会話、又は、一方向での情報の提示に使用されても構わない。

１ 伝送システム
１０ 伝送端末
１１ 送受信部（受信手段の一例、送信手段の一例）
１４ 撮像部（撮像手段の一例）
１８ 遅延検出部（遅延検出手段の一例）
３０ 中継装置
５０ 伝送管理システム
６０ 遅延時間管理部
７０ ルータ
９０ プログラム提供システム
１００ メンテナンスシステム
１２０ ディスプレイ
１０００ 記憶部
１００１ 画面管理ＤＢ
３０００ 記憶部
３００１ 変更画像状態管理ＤＢ
５０００ 記憶部
５００１ 中継装置管理ＤＢ
５００２ 端末認証管理ＤＢ
５００３ 端末管理ＤＢ
５００４ 宛先リスト管理ＤＢ
５００５ セッション管理ＤＢ
５００６ 優先度管理ＤＢ
５００７ 画像状態管理ＤＢ

特表２０１０−５０６４６１号公報

Claims (6)

1. 相手側の伝送端末との間で、音声データを含むコンテンツデータの送受信を行うことで、前記相手側の伝送端末との通話を実現させる伝送端末であって、
   前記コンテンツデータのうち、前記相手側の伝送端末から送られて来た第１のコンテンツデータを受信する受信手段と、
   前記コンテンツデータのうち、自分側の伝送端末から前記相手側の伝送端末に第２のコンテンツデータを送信する送信手段と、
   前記受信手段によって受信される際の前記第１のコンテンツデータの遅延時間を検出する遅延検出手段と、
   を有し、
   前記遅延検出手段によって検出された遅延時間が所定値を越える場合には、前記送信手段は、前記第２のコンテンツデータのうち音声データ以外の送信を中断することを特徴とする伝送端末。
2. 前記第２のコンテンツデータには画像データが含まれ、
   前記送信手段は、前記第２のコンテンツデータのうち前記画像データの送信を中断することを特徴とする請求項１に記載の伝送端末。
3. 請求項２に記載の伝送端末であって、更に、
   前記自分側の被写体を撮像する撮像手段を有し、
   前記送信手段が送信を中断する前記画像データは、前記撮像手段によって撮像されることによって得られる画像データであることを特徴とする伝送端末。
4. 前記遅延検出手段によって検出された遅延時間が前記所定値を越える場合には、前記撮像手段は、前記被写体の撮像を中断することを特徴とする請求項３に記載の伝送端末。
5. 相手側の伝送端末との間で、音声データを含むコンテンツデータの送受信を行うことで、前記相手側の伝送端末との通話を実現させる伝送端末が実行する伝送方法であって、
   前記伝送端末は、
   前記コンテンツデータのうち、前記相手側の伝送端末から送られて来た第１のコンテンツデータを受信する受信ステップと、
   前記コンテンツデータのうち、自分側の伝送端末から前記相手側の伝送端末に第２のコンテンツデータを送信する送信ステップと、
   前記受信ステップによって受信される際の前記第１のコンテンツデータの遅延時間を検出する遅延検出ステップと、
   を実行し、
   前記遅延検出ステップによって検出された遅延時間が所定値を越える場合には、前記送信ステップは、前記第２のコンテンツデータのうち音声データ以外の送信を中断することを含むことを特徴とする伝送方法。
6. コンピュータに、請求項５に記載の各ステップを実行させることを特徴とするプログラム。

Images