JP5232695B2 - 中継装置、および会議端末の会議サーバへの接続方法 - Google Patents

Description

本発明は、複数の会議端末を会議サーバに接続する技術に関する。

特許文献１には、端末からの映像とともに、蓄積された資料映像や過去の映像などを所望の形態で表示して利用したり、会議履歴を蓄積して所望の形態で表示して閲覧したりなど、多様な利用状況に対応可能な会議システムが開示されている。この会議システムにおいて、会議サーバは、会議に参加する各端末からの映像を受信して合成し、各端末に送り返す。また、会議サーバは、端末から資料映像の再生制御コマンドを受信した場合には、資料映像と各端末からの映像とを合成し、各端末に送り返す。

特開２００１−３１３９１５号公報

従来の会議システムでは、ライセンス等の問題から、会議サーバに同時にアクセスできる端末数に制限が設けられていることが多い。また、会議に参加する端末数が増えると、会議サーバの負荷が過大となり、音声および映像の配信が遅延することもある。

本発明は上記事情に鑑みてなされたものであり、本発明の目的は、会議サーバに接続可能な端末数以上の端末を会議に参加させることが可能な技術を提供することにある。

上記課題を解決するために、本発明は、複数の会議端末から音声および映像データを受信して、これらの音声データの音量レベルに基づいて、複数の会議端末のなかから中継対象を選択する。そして、中継対象に選択した会議端末から受信した音声および映像データを、会議サーバに送信する。また、会議サーバから音声および映像データを受信して複数の会議端末に送信する。

例えば、本発明は、複数の会議端末を会議サーバに接続する中継装置であって、
前記複数の会議端末から音声および映像データを受信して前記会議サーバに送信する上り中継手段と、
前記会議サーバから音声および映像データを受信して前記複数の会議端末に送信する下り中継手段と、を有し、
前記上り中継手段は、
前記複数の会議端末から前記音声および映像データを受信する第一の受信手段と、
前記複数の会議端末から受信された前記音声データの音量レベルを検出する検出手段と、
前記検出手段により検出された前記音量レベルに基づいて、前記複数の会議端末のなかから中継対象を選択する選択手段と、
前記中継対象に選択された前記会議端末から受信した前記音声および映像データを、前記会議サーバに送信する第一の送信手段と、を有する。

本発明によれば、会議サーバおよび中継装置間の接続を複数の会議端末で共用するので、会議サーバに接続可能な端末数以上の端末を会議に参加させることが可能となる。

図１は、本発明の一実施の形態が適用された会議システムの概略図である。 図２は、管理サーバ１の概略構成図である。 図３（Ａ）は、端末情報記憶部１２の登録内容例を模式的に表した図であり、図３（Ｂ）は、予約情報記憶部１３の登録内容例を模式的に表した図である。 図４は、図２に示す管理サーバ１の動作を説明するためのフロー図である。 図５は、中継サーバ２の概略構成図である。 図６は、図５に示す中継サーバ２の動作を説明するためのフロー図である。 図７は、クライアント端末３の概略構成図である。 図８は、図７に示すクライアント端末３の動作を説明するためのフロー図である。 図９は、図８に示す会議制御処理Ｓ３０８を説明するためのフロー図である。 図１０（Ａ）は、会議画面の第一の例を示す図であり、図１０（Ｂ）は、会議画面の第二の例を示す図である。 図１１は、ＧＷ４の概略構成図である。 図１２は、図１１に示すＧＷ４の動作を説明するためのフロー図である。 図１３は、図１に示す会議システムの動作例を説明するためのシーケンス図である。

以下、本発明の実施の形態について説明する。

図１は、本発明の一実施の形態が適用された会議システムの概略図である。

図示するように、本実施の形態に係る会議システムは、管理サーバ１と、中継サーバ２と、複数のクライアント端末３と、ＧＷ４とが、ＬＡＮ５を介して相互接続されて構成されている。

管理サーバ１は、クライアント端末３およびＧＷ４の会議への参加を制御する。

中継サーバ２は、管理サーバ１によって会議への参加が許可されたクライアント端末３およびＧＷ４（以下、参加端末と呼ぶ）から音声および映像データを収集する。そして、各参加端末に、収集した音声および映像データを配信する。

クライアント端末３は、中継サーバ２に音声および映像データを送信するとともに、中継サーバ２から参加端末毎に音声および映像データを受信してそれぞれ合成し出力する。

ＧＷ４は、ＰＢＸ（構内交換機）６をＬＡＮ５に接続するためのゲートウェイである。また、ＧＷ４は、ＰＢＸ６の配下にあるテレビ電話端末７を会議に参加させる。すなわち、ＧＷ４は、ＰＢＸ６を介してテレビ電話端末７から映像および音声データを受信して中継サーバ２に送信するとともに、中継サーバ２から参加端末毎に映像および音声データを受信してそれぞれ合成しＰＢＸ６に送信する。

以下、本実施の形態に係る会議システムを構成する各装置を詳細に説明する。

先ず、管理サーバ１を説明する。

図２は、管理サーバ１の概略構成図である。

図示するように、管理サーバ１は、ＬＡＮインターフェース部１１と、端末情報記憶部１２と、予約情報記憶部１３と、予約受付部１４と、会議制御部１５と、を有する。

ＬＡＮインターフェース部１１は、ＬＡＮ５に接続するためのインターフェースである。

端末情報記憶部１２には、会議に参加可能なクライアント端末３およびＧＷ４の情報が記憶されている。図３（Ａ）は、端末情報記憶部１２の登録内容例を模式的に表した図である。図示するように、端末情報記憶部１２には、会議に参加可能なクライアント端末３およびＧＷ４のそれぞれについてレコード１２００が登録されている。

レコード１２００は、対象となるクライアント端末３あるいはＧＷ４の識別情報である端末ＩＤが登録されたフィールド１２０１と、このクライアント端末３あるいはＧＷ４のアドレスが登録されたフィールド１２０２と、このクライアント端末３あるいはＧＷ４のアカウント名が登録されたフィールド１２０３と、を有する。

予約情報記憶部１３には、予約された会議の情報が記憶される。図３（Ｂ）は、予約情報記憶部１３の登録内容例を模式的に表した図である。図示するように、予約情報記憶部１３には、予約された会議に付与される識別情報である会議ＩＤ毎にテーブル１３０が登録される。

テーブル１３０には、会議の予約日時が登録されている。また、テーブル１３０には、このテーブル１３０の会議ＩＤが付与された会議の参加端末毎にレコード１３００が登録されている。レコード１３００は、参加端末の端末ＩＤを登録するフィールド１３０１と、この参加端末のアドレスを登録するフィールド１３０２と、この参加端末のアカウント名を登録するフィールド１３０３と、を有する。

予約受付部１４は、ＬＡＮインターフェース部１１を介してクライアント端末３から会議の予約要求を受け付けた場合に、このクライアント端末３に所定の予約受付画面を表示し、この予約受付画面を介して会議の予約を受け付ける。そして、予約を受け付けた会議に会議ＩＤを付与して、この会議ＩＤに対応するテーブル１３０を予約情報記憶部１３に追加し、このテーブル１３０に、参加端末に関するレコード１３００を登録する。

会議制御部１５は、クライアント端末３およびＧＷ４の会議への参加を制御する。

図４は、図２に示す管理サーバ１の動作を説明するためのフロー図である。

予約受付部１４は、ＬＡＮインターフェース部１１を介してクライアント端末３から会議の予約要求を受信すると（Ｓ１０１でＹＥＳ）、このクライアント端末３に所定の予約受付画面を表示する（Ｓ１０２）。この予約受付画面上には、例えば、会議の予約日時の入力を受け付けるフィールドと、この会議の参加端末の選択を受け付ける端末ＩＤ一覧と、が表示されている。

予約受付部１４は、この予約受付画面を介してクライアント端末３から、会議の予約日時、およびこの会議の参加端末の端末ＩＤを受け付けると、新たな会議ＩＤおよび予約日時に対応付けてテーブル１３０を予約情報記憶部１３に新たに追加する（Ｓ１０３）。そして、受け付けた端末ＩＤごとに、その端末ＩＤに対応付けられたアドレスおよびアカウント名を端末情報記憶部１２から読み出し、これらの情報（アドレス、アカウント名）とその端末ＩＤとを含むレコード１３００を、新たに追加したテーブル１３０に登録する。

ここで、中継サーバ２に許容（最大）同時接続端末数が設定されている場合、予約受付部１４は、予約受付画面に入力された予約日時と重複する予約日時が登録されているテーブル１３０を予約情報記憶部１３から検索して、このようなテーブル１３０を検索できたならば、この許容同時接続端末数から、このテーブル１３０に登録されているレコード数を差し引いた数までの参加端末の指定を受付可能とし、一方、このようなテーブル１３０を検索できなかったならば、この許容同時接続端末数までの参加端末の指定を受付可能とするように、予約受付画面における参加端末の指定数を制限してもよい。

また、会議制御部１５は、ＬＡＮインターフェース部１１を介してクライアント端末３あるいはＧＷ４から、端末ＩＤおよび会議ＩＤの指定を伴う会議の参加要求を受信すると（Ｓ１０４でＹＥＳ）、予約情報記憶部１３を参照し、この会議ＩＤにより特定される会議の参加端末として参加要求送信元が登録されているか否かを調べる（Ｓ１０５）。

具体的には、この会議ＩＤに対応するテーブル１３０から、この端末ＩＤおよび参加要求送信元のアドレスがフィールド１３０１、１３０２に登録されているレコード１３００を検索する。

このようなレコード１３００を検索できなかった場合（Ｓ１０５でＮＯ）、この参加要求送信元は、この会議ＩＤにより特定される会議の参加端末でない。この場合、会議制御部１５は、ＬＡＮインターフェース部１１を介して参加要求送信元に参加拒否応答を通知する（Ｓ１０９）。

一方、このようなレコード１３００を検索できた場合（Ｓ１０５でＹＥＳ）、会議制御部１５は、この会議ＩＤに対応するテーブル１３０に登録されている予約日時の時間帯に現在時刻が属しているか否かをさらに調べる（Ｓ１０６）。現在日時が予約日時の時間帯に属していない場合（Ｓ１０６でＮＯ）、現在は、この会議ＩＤにより特定される会議の開催時間帯でない。この場合、会議制御部１５は、ＬＡＮインターフェース部１１を介して参加要求送信元に参加拒否応答を通知する（Ｓ１０９）。

一方、現在日時が予約日時の時間帯に属している場合（Ｓ１０６でＹＥＳ）、会議制御部１５は、ＬＡＮインターフェース部１１を介して参加要求送信元に参加許可応答を通知する（Ｓ１０７）。それから、会議制御部１５は、ＬＡＮインターフェース部１１を介して中継サーバ２に、会議ＩＤおよび参加要求送信元のアドレスの指定を伴う中継開始指示を送信して、この参加要求送信元に対する中継の開始を指示する（Ｓ１０８）。

また、会議制御部１５は、ＬＡＮインターフェース部１１を介して参加端末から会議の離脱要求を受信すると（Ｓ１１０でＹＥＳ）、離脱要求送信元の参加端末に応答を返すとともに、ＬＡＮインターフェース部１１を介して中継サーバ２に、離脱要求送信元の参加端末のアドレスおよび離脱要求送信元の参加端末が参加している会議の会議ＩＤの指定を伴う中継終了指示を送信して、離脱要求送信元の参加端末に対する中継の終了を指示する（Ｓ１１１）。

次に、中継サーバ２を説明する。

図５は、中継サーバ２の概略構成図である。

図示するように、中継サーバ２は、ＬＡＮインターフェース部２１と、中継情報記憶部２２と、音声バッファ部２３と、映像バッファ部２４と、指示受付部２５と、音声中継部２６と、映像中継部２７と、レベル検出部２８と、中継対象選択部２９と、を有する。

ＬＡＮインターフェース部２１は、ＬＡＮ５に接続するためのインターフェースである。

中継情報記憶部２２には、開催中の会議に付与された会議ＩＤ毎に、この会議に参加している参加端末のアドレスが登録される。

音声バッファ部２３には、開催中の会議に参加している参加端末毎に、参加端末から受信した音声データがバッファリングされる。

映像バッファ部２４は、開催中の会議に参加している参加端末毎に、参加端末から受信した映像データがバッファリングされる。

指示受付部２５は、ＬＡＮインターフェース部２１を介して管理サーバ１から受信した中継開始指示および中継終了指示に従い、中継情報記憶部２２を更新する。

音声中継部２６は、参加端末間でやり取りされる音声データを中継する。図示するように、音声中継部２６は、音声収集部２６１と、音声配信部２６２と、を有する。

音声収集部２６１は、ＬＡＮインターフェース部２１を介して各参加端末から受信した音声データを、音声バッファ部２３に参加端末毎にバッファリングする。

音声配信部２６２は、中継情報記憶部２２を参照して、参加端末ごとに、その参加端末と同じ会議に参加している他の参加端末の音声データを音声バッファ部２３から読み出し、これらの音声データを、ＬＡＮインターフェース部２１を介してその参加端末に配信する。

映像中継部２７は、参加端末間でやり取りされる映像データを中継する。図示するように、映像中継部２７は、映像収集部２７１と、映像配信部２７２と、を有する。

映像収集部２７１は、ＬＡＮインターフェース部２１を介して各参加端末から受信した映像データを、映像バッファ部２４に参加端末毎にバッファリングする。

映像配信部２７２は、中継情報記憶部２２を参照して、参加端末ごとに、その参加端末と同じ会議に参加している映像中継対象の参加端末の映像データを映像バッファ部２４から読み出し、この映像データを、ＬＡＮインターフェース部２１を介して各参加端末に配信する。

レベル検出部２８は、音声バッファ部２３にバッファリングされた各参加端末の音声データに含まれている音声信号の音量レベルを検出する。

中継対象選択部２９は、中継情報記憶部２２を参照して、開催中の会議毎に、その会議に参加している参加端末のなかから、レベル検出部２８で検出された音量レベルが大きい順に所定数の参加端末を、映像中継対象として選択する。そして、映像中継対象の参加端末を、この会議の会議ＩＤおよび音量レベルの順番とともに映像配信部２７２に通知する。

図６は、図５に示す中継サーバ２の動作を説明するためのフロー図である。

指示受付部２５は、ＬＡＮインターフェース部２１を介して管理サーバ１から中継開始指示を受信すると（Ｓ２０１でＹＥＳ）、この中継開始指示で指定されている参加要求送信元の参加端末のアドレスを、この中継開始指示で指定されている会議ＩＤに対応付けて中継情報記憶部２２に登録する（Ｓ２０２）。

また、指示受付部２５は、ＬＡＮインターフェース部２１を介して管理サーバ１から中継終了指示を受信すると（Ｓ２０３でＹＥＳ）、この中継終了指示で指定された会議ＩＤに対応付けられて登録されている、この中継終了指示で指定された離脱要求送信元の参加端末のアドレスを中継情報記憶部２２から削除する（Ｓ２０４）。

また、音声収集部２６１は、ＬＡＮインターフェース部２１を介して参加端末から音声データを受信すると（Ｓ２０５でＹＥＳ）、この音声データを、参加端末毎に音声バッファ部２３にバッファリングする（Ｓ２０６）。また、レベル検出部２８は、この音声データの音量レベルを検出する（Ｓ２０７）。

さらに、中継対象選択部２９は、中継情報記憶部２２に記憶されている会議ＩＤ毎に、この会議ＩＤに対応付けられてアドレスが登録されている参加端末のなかから、所定時間内にレベル検出部２８で検出された音量レベルの大きい順に所定数の参加端末を映像中継対象として選択する。そして、この映像中継対象の参加端末のアドレスを、会議ＩＤおよび音量レベルの順番とともに映像配信部２７２に通知する（Ｓ２０８）。

また、映像収集部２７１は、ＬＡＮインターフェース部２１を介して参加端末から映像データを受信すると（Ｓ２０９でＹＥＳ）、この映像データを、映像バッファ部２４に参加端末毎にバッファリングする（Ｓ２１０）。

また、定期的に到来する所定の配信タイミングになると（Ｓ２１１でＹＥＳ）、音声配信部２６２は、ＬＡＮインターフェース部２１を介して各参加端末に、同じ会議に参加している他の参加端末の音声データを配信する（Ｓ２１２）。また、映像配信部２７２は、ＬＡＮインターフェース部２１を介して各参加端末に、その参加端末と同じ会議に参加している映像中継対象の映像データを配信する（Ｓ２１３）。

具体的には、音声配信部２６２は、中継情報記憶部２２に記憶されている各会議ＩＤを対象会議ＩＤとしてそれぞれ次の処理を行う。すなわち、対象会議ＩＤと同じ会議ＩＤに対応付けられて中継情報記憶部２２に登録されているアドレスにより特定される各参加端末の音声データを音声バッファ部２３から取り出す。そして、取り出した各参加端末の音声データを複製して、ＬＡＮインターフェース部２１を介して各参加端末に、他のすべての参加端末（合計で会議に参加中の参加端末数−１）の音声データを配信する。

また、映像配信部２７２は、中継情報記憶部２２に記憶されている各会議ＩＤを対象会議ＩＤとしてそれぞれ次の処理を行う。すなわち、対象会議ＩＤと同じ会議ＩＤとともに中継対象選択部２９により通知された各参加端末の映像データを映像バッファ部２４から取り出す。次に、取り出した各参加端末の映像データを複製して、これらの映像データに、中継対象選択部２９により通知された対応の音量レベルの順番をそれぞれ付与する。それから、音量レベルの順番が付与されたこれらの映像データを、ＬＡＮインターフェース部２１を介して、対象会議ＩＤと同じ会議ＩＤに対応付けられて中継情報記憶部２２に登録されているアドレスにより特定される各参加端末に配信する。

次に、クライアント端末３を説明する。

図７は、クライアント端末３の概略構成図である。

図示するように、クライアント端末３は、ＬＡＮインターフェース部３１と、音声入出力部３２と、映像入出力部３３と、操作受付部３４と、音声処理部３５と、映像処理部３６と、音声合成部３７と、映像合成部３８と、主制御部３９と、を有する。

ＬＡＮインターフェース部３１は、ＬＡＮ５に接続するためのインターフェースである。

音声入出力部３２は、音声を入出力するためのものであり、マイクおよびスピーカを備える。

映像入出力部３３は、映像を入出力するためのものであり、カメラおよびディスプレイを備える。

操作受付部３４は、ユーザから各種操作を受け付けるためのものであり、マウス、キーボードなどを備える。

音声処理部３５は、音声の符号化および復号を行うコーデックであり、音声入出力部３２のマイクで集音された音声信号を音声データに符号化して、この音声データを主制御部３９に送るとともに、主制御部３９から受け取った音声データを音声信号に復号して、この音声信号を音声入出力部３２のスピーカから出力する。

映像処理部３６は、映像の符号化および復号を行うコーデックであり、映像入出力部３３のカメラで撮像された映像信号を映像データに符号化して、この映像データを主制御部３９に送るとともに、主制御部３９から受け取った映像データを映像信号に復号して、この映像信号を映像入出力部３３のディスプレイに表示する。

音声合成部３７は、主制御部３９から受け取った複数の参加端末の音声データを合成して、会議音声用の音声データを生成する。

映像合成部３８は、主制御部３９から受け取った複数の参加端末の映像データを合成して、会議画面用の映像データを生成する。

主制御部３９は、自クライアント端末３の各部３１〜３８を統括的に制御する。

図８は、図７に示すクライアント端末３の動作を説明するためのフロー図である。

主制御部３９は、操作受付部３４を介して、自クライアント端末３のユーザより会議予約の指示を受け付けると（Ｓ３０１でＹＥＳ）、ＬＡＮインターフェース部３１を介して管理サーバ１に会議の予約要求を送信する（Ｓ３０２）。そして、主制御部３９は、ＬＡＮインターフェース部３１を介して管理サーバ１から予約受付画面のデータを受信し、映像処理部３６を介して映像入出力部３３のディスプレイに予約受付画面を表示する（Ｓ３０３）。なお、前述したように、この予約受付画面上には、例えば、会議の予約日時の入力を受け付けるフィールドと、この会議の参加端末の選択を受け付ける端末ＩＤ一覧と、が表示されている。

自クライアント端末３のユーザが、操作受付部３４を操作して、映像入出力部３３のディスプレイに表示されている予約受付画面において、会議の予約日時の入力、この会議の参加端末の端末ＩＤの選択等を行うと、主制御部３９は、これらの操作により入力された情報を管理サーバ１に送信する（Ｓ３０４）。

また、主制御部３９は、操作受付部３４を介して、自クライアント端末３のユーザより会議参加の指示を会議ＩＤの指定とともに受け付けると（Ｓ３０５でＹＥＳ）、ＬＡＮインターフェース部３１を介して管理サーバ１に、自クライアント端末３の端末ＩＤおよび会議ＩＤの指定を伴う会議の参加要求を送信する（Ｓ３０６）。その後、主制御部３９は、ＬＡＮインターフェース部３１を介して管理サーバ１から応答を受信したならば、この応答が参加許可応答であるか否かを判断する（Ｓ３０７）。管理サーバ１からの応答が参加許可応答ならば（Ｓ３０７でＹＥＳ）、後述の会議制御処理を実施する（Ｓ３０８）。一方、管理サーバ１からの応答が参加拒否応答ならば（Ｓ３０７でＮＯ）、主制御部３９は、会議に参加できない旨のメッセージを映像入出力部３３のディスプレイに表示するなどの所定のエラー処理を実施する（Ｓ３０９）。

図９は、図８に示す会議制御処理Ｓ３０８を説明するためのフロー図である。

主制御部３９は、自クライアント端末３の各部３１〜３８を制御して、中継サーバ２と音声および映像データを送受する（Ｓ３０８１〜Ｓ３０８７）。

具体的には、主制御部３９は、音声入出力部３２のマイクで集音され、音声処理部３５で音声信号から変換された音声データを、ＬＡＮインターフェース部３１を介して中継サーバ２に送信する。同様に、主制御部３９は、映像入出力部３３のカメラで撮像され、映像処理部３６で映像信号から変換された映像データを、ＬＡＮインターフェース部３１を介して中継サーバ２に送信する（Ｓ３０８１）。

また、主制御部３９は、ＬＡＮインターフェース部３１を介して中継サーバ２から、自クライアント端末３と同じ会議に参加している他のすべての参加端末の音声データを受信し（Ｓ３０８２）、音声合成部３７により、各参加端末の音声データを合成して会議音声用の音声データを生成し（Ｓ３０８３）、この会議音声用の音声データを音声処理部３５で音声信号に変換し音声入出力部３２のスピーカから出力する（Ｓ３０８４）。

また、主制御部３９は、ＬＡＮインターフェース部３１を介して中継サーバ２から、自クライアント端末３と同じ会議に参加している参加端末のなかから、映像中継対象に選択された各参加端末の映像データを受信し（Ｓ３０８５）、映像合成部３８により、映像中継対象の各参加端末の映像データに付与されている音量レベルの順番等に基づいて、各参加端末の映像データを合成して会議画面用の映像データを生成する（Ｓ３０８６）。そして、この会議画面用の映像データを、映像処理部３６で映像信号に変換し映像入出力部３３のディスプレイに表示する（Ｓ３０８７）。

図１０（Ａ）は、会議画面の第一の例を示す図である。この例では、映像中継対象に選択されたアカウント名「ＣＬＩＥＮＴ０１」、「ＣＬＩＥＮＴ０２」、「ＧＷ」、「ＣＬＩＥＮＴ０５」、「ＣＬＩＥＮＴ０６」、「ＣＬＩＥＮＴ０８」、「ＣＬＩＥＮＴ１５」、「ＣＬＩＥＮＴ１０」、「ＣＬＩＥＮＴ２４」の参加端末の映像データ各々が、音量レベルの順番によって定まる所定の表示枠３８１に表示されている。ここでは、同じラインであれば左側ほど、また同じコラムであれば上側ほど、音量レベルの順番が先になっている。

図１０（Ｂ）は、会議画面の第二の例を示す図である。この例では、映像中継対象に選択されたアカウント名「ＣＬＩＥＮＴ０１」、「ＣＬＩＥＮＴ０２」、「ＧＷ」、「ＣＬＩＥＮＴ０５」、「ＣＬＩＥＮＴ０６」、「ＣＬＩＥＮＴ０８」の参加端末の映像データのうち、音量レベルの順番が一番目の映像データが、表示枠３８１よりも面積の大きいクローズアップ用表示枠３８２に表示され、二番以降の映像データが、音量レベルの順番によって定まる所定の表示枠３８１に表示されている。ここでは、同じラインであれば左側ほど、また同じコラムであれば上側ほど音量レベルの順番が先になっている。

さて、主制御部３９は、上述の処理（Ｓ３０８１〜Ｓ３０８７）の最中に、操作受付部３４を介してユーザより会議からの離脱指示を受け付けたならば（Ｓ３０８８でＹＥＳ）、ＬＡＮインターフェース部３１を介して管理サーバ１に、会議の離脱要求を送信して（Ｓ３０８９）、このフローを終了する。

次に、ＧＷ４を説明する。

図１１は、ＧＷ４の概略構成図である。

図示するように、ＧＷ４は、ＬＡＮインターフェース部４１と、少なくとも一つの回線インターフェース部４２と、上り中継部４３と、下り中継部４４と、主制御部４５と、を有する。

ＬＡＮインターフェース部４１は、ＬＡＮ５に接続するためのインターフェースである。

回線インターフェース部４２は、ＰＢＸ６に接続するためのインターフェースである。

上り中継部４３は、回線インターフェース部４２を介してＰＢＸ６配下のテレビ電話端末７から受信した音声および映像データを、ＬＡＮインターフェース部４１を介して中継サーバ２に送信する。

図示するように、上り中継部４３は、受信部４３１と、音声バッファ部４３２と、映像バッファ部４３３と、レベル検出部４３４と、中継対象選択部４３５と、音声送信部４３６と、映像送信部４３７と、を有する。

受信部４３１は、接続中の回線インターフェース部４２を介してＰＢＸ６配下のテレビ電話端末７から音声および映像データを受信する。

音声バッファ部４３２には、接続中の回線インターフェース部４２毎に、この回線インターフェース部４２を介してＰＢＸ６配下のテレビ電話端末７から受信した音声データがバッファリングされる。

映像バッファ部４３３には、接続中の回線インターフェース部４２毎に、この回線インターフェース部４２を介してＰＢＸ６配下のテレビ電話端末７から受信した映像データがバッファリングされる。

レベル検出部４３４は、音声バッファ部４３２にバッファリングされた音声データに含まれている音声信号の音量レベルを検出する。

中継対象選択部４３５は、レベル検出部４３４で検出された音量レベルの大きい順に、少なくとも一つの回線インターフェース部４２を中継対象として選択する。

音声送信部４３６は、中継対象選択部４３５により中継対象として選択された回線インターフェース部４２を介して受信した音声データを、音声バッファ部４３２から読み出して、ＬＡＮインターフェース部４１を介して中継サーバ２に送信する。

ここで、複数の回線インターフェース部４２が中継対象として選択されている場合、音声送信部４３６は、これらの回線インターフェース部４２を介して受信した音声データを、音声バッファ部４３２から読み出して合成し、ＬＡＮインターフェース部４１を介して中継サーバ２に、この合成された音声データを送信する。

映像送信部４３７は、中継対象選択部４３５により中継対象として選択された回線インターフェース部４２を介して受信した映像データを、映像バッファ部４３３から読み出して、ＬＡＮインターフェース部４１を介して中継サーバ２に送信する。

ここで、複数の回線インターフェース部４２が中継対象として選択されている場合、映像送信部４３７は、そのうちの一つの回線インターフェース部４２（たとえば音量レベルの最も大きい音声データを受信した回線インターフェース部４２）を介して受信した映像データを、映像バッファ部４３３から読み出して、ＬＡＮインターフェース部４１を介して中継サーバ２に送信する。

下り中継部４４は、ＬＡＮインターフェース部４１を介して中継サーバ２から受信した音声および映像データを、回線インターフェース部４２を介してＰＢＸ６配下のテレビ電話端末７に送信する。

図示するように、下り中継部４４は、受信部４４１と、音声バッファ部４４２と、映像バッファ部４４３と、音声合成部４４４と、映像合成部４４５と、送信部４４６と、を有する。

受信部４４１は、ＬＡＮインターフェース部４１を介して中継サーバ２から各参加端末の音声および映像データを受信する。

音声バッファ部４４２には、参加端末毎に、ＬＡＮインターフェース部４１を介して中継サーバ２から受信した音声データがバッファリングされる。

映像バッファ部４４３には、参加端末毎に、ＬＡＮインターフェース部４１を介して中継サーバ２から受信した映像データがバッファリングされる。

音声合成部４４４は、ＰＢＸ６と接続中の回線インターフェース部４２毎に、対象の回線インターフェース部４２以外の回線インターフェース部４２を介して受信した各テレビ電話端末７の音声データと、ＬＡＮインターフェース部４１を介して中継サーバ２から受信した自ＧＷ４以外の各参加端末の音声データとを合成して、会議音声用の音声データを生成する。

具体的には、音声合成部４４４は、ＰＢＸ６と接続中の各回線インターフェース部４２を対象としてそれぞれ次の処理を行う。すなわち、音声バッファ部４４２から自ＧＷ４以外の各参加端末の音声データを読み出すとともに、対象の回線インターフェース部４２以外の回線インターフェース部４２を介して受信した各テレビ電話端末７の音声データを上り中継部４３の音声バッファ部４３２から読み出す。そして、読み出したこれらの音声データを合成して、対象の回線インターフェース部４２に対する会議音声用の音声データを生成する。

映像合成部４４５は、ＬＡＮインターフェース部４１を介して中継サーバ２から受信した複数の参加端末の映像データを、クライアント端末３の映像合成部３８と同様の要領により合成して、会議画面用の映像データを生成する。

送信部４４６は、映像合成部４４５により生成された会議画面の映像データを、ＰＢＸ６と接続中の各回線インターフェース部４２から送信する。また、送信部４４６は、音声合成部４４４によりＰＢＸ６と接続中の回線インターフェース部４２毎に生成された会議音声用の音声データを、それぞれ対応する回線インターフェース部４２から送信する。

主制御部４５は、自ＧＷ４の各部４１〜４４を統括的に制御して、中継サーバ２およびＰＢＸ６との接続制御を行う。

図１２は、図１１に示すＧＷ４の動作を説明するためのフロー図である。

主制御部４５は、いずれかの回線インターフェース部４２を介してＰＢＸ６より会議ＩＤの指定を伴う接続要求を受信すると（Ｓ４０１でＹＥＳ）、中継サーバ２とセッション中であるか否か、すなわち自ＧＷ４が会議に参加中であるか否かを判断する（Ｓ４０２）。中継サーバ２とセッション中でないならば（Ｓ４０２でＮＯ）、自ＧＷ４の端末ＩＤおよび接続要求で指定されている会議ＩＤの指定を伴う会議の参加要求を中継サーバ２に送信する（Ｓ４０３）。

その後、主制御部４５は、ＬＡＮインターフェース部４１を介して管理サーバ１から応答を受信したならば、この応答が参加許可応答であるか否かを判断する（Ｓ４０４）。管理サーバ１からの応答が参加許可応答ならば（Ｓ４０４でＹＥＳ）、接続要求を受信した回線インターフェース部４２を介してＰＢＸ６に接続応答を返信して、この回線インターフェース部４２をＰＢＸ６に接続する（Ｓ４０５）。これにより、この回線インターフェース部４２に接続された接続要求元のＰＢＸ６配下のテレビ電話端末７と中継サーバ２との間の音声および映像データの中継処理を開始する（Ｓ４０６）。

すなわち、上り中継部４３において、受信部４３１は、この回線インターフェース部４２より受信した音声および映像データを、それぞれ音声バッファ部４３２、映像バッファ部４３３にバッファリングする。レベル検出部４３４は、音声バッファ部４３２にバッファリングされている音声データの音量レベルを検出する。中継対象選択部４３５は、この検出された音量レベルに基づき中継対象を選択する。そして、この回線インターフェース部４２が中継対象に選ばれたならば、音声送信部４３６は、この回線インターフェース部４２より受信した音声データを音声バッファ部４３２から読み出して、ＬＡＮインターフェース部４１から中継サーバ２に送信する。また、映像送信部４３７は、この回線インターフェース部４２より受信した映像データを映像バッファ部４３３から読み出して、ＬＡＮインターフェース部４１から中継サーバ２に送信する。

なお、中継対象選択部４３５により中継対象が他にも選択された場合、音声送信部４３６は、この回線インターフェース部４２より受信した音声データを他の中継対象より受信した音声データとともに音声バッファ部４３２から読み出して合成し、この合成された音声データを中継サーバ２に送信する。また、映像送信部４３７は、例えば、複数の中継対象のうち、この回線インターフェース部４２より受信した音声データの音量レベルが最も大きい場合に、この回線インターフェース部４２より受信した映像データを映像バッファ部４３３から読み出して、ＬＡＮインターフェース部４１から中継サーバ２に送信する。

また、下り中継部４４において、受信部４４１は、ＬＡＮインターフェース部４１を介して中継サーバ２から各参加端末の音声および映像データを受信し、それぞれ音声バッファ部４４２、映像バッファ部４４３にバッファリングする。音声合成部４４４は、この回線インターフェース部４２以外の接続中の回線インターフェース部４２より受信した音声データを、上り中継部４３の音声バッファ部４３２から読み出すとともに、ＬＡＮインターフェース部４１を介して中継サーバ２から受信した自ＧＷ４以外の各参加端末の音声データを音声バッファ部４４２から読み出して、これらの音声データを合成し会議音声用の音声データを生成する。また、映像合成部４４５は、ＬＡＮインターフェース部４１を介して中継サーバ２から受信した各参加端末の映像データを映像バッファ部４４３から読み出して、これらの映像データを合成し会議画面用の映像データを生成する。そして、送信部４４６は、この回線インターフェース部４２から会議音声用の音声データおよび会議画面用の映像データを送信する。

一方、主制御部４５は、管理サーバ１から受信した応答が参加拒否応答である場合（Ｓ４０４でＮＯ）、この回線インターフェース部４２を介してＰＢＸ６にＢＵＳＹ信号を返信するなどの所定のエラー処理を実施する（Ｓ４０８）。

また、主制御部４５は、中継サーバ２とセッション中である場合（Ｓ４０２でＹＥＳ）、自ＧＷ４が参加中の会議の会議ＩＤが、接続要求で指定されている会議ＩＤと一致するか否かを判断する（Ｓ４０７）。

両会議ＩＤが一致する場合は（Ｓ４０７でＹＥＳ）、接続要求を受信した回線インターフェース部４２を介してＰＢＸ６に接続応答を返信して、この回線インターフェース部４２をＰＢＸ６に接続する（Ｓ４０５）。これにより、この回線インターフェース部４２に接続されたＰＢＸ６配下のテレビ電話端末７と中継サーバ２との間の音声および映像データの中継処理を開始する（Ｓ４０６）。

一方、両会議ＩＤが一致しない場合（Ｓ４０７でＮＯ）、主制御部４５は、この回線インターフェース部４２を介してＰＢＸ６にＢＵＳＹ信号を返信するなどの所定のエラー処理を実施する（Ｓ４０８）。

また、主制御部４５は、接続中のいずれかの回線インターフェース部４２を介してＰＢＸ６より切断要求を受信すると（Ｓ４０９でＹＥＳ）、切断要求を受信した回線インターフェース部４２を介してＰＢＸ６に切断応答を返信して、この回線インターフェース部４２をＰＢＸ６から切断する（Ｓ４１０）。これにより、この回線インターフェース部４２に接続された切断要求元のＰＢＸ６配下のテレビ電話端末７と中継サーバ２との間の音声および映像データの中継処理を終了する（Ｓ４１１）。

次に、主制御部４５は、接続中の回線インターフェース部４２が他に存在するか否か調べ（Ｓ４１２）、存在しないならば（Ｓ４１２でＮＯ）、自ＧＷ４の端末ＩＤおよび自ＧＷ４が参加中の会議の会議ＩＤの指定を伴う会議の離脱要求を送信して、自ＧＷ４を会議から離脱させる（Ｓ４１３）。

次に、本実施の形態が適用された会議システムの動作例を説明する。

図１３は、図１に示す会議システムの動作例を説明するためのシーケンス図である。ここでは、ＰＢＸ６配下の２台のテレビ電話端末７Ａ、７Ｂが、開催中の同じ会議に参加する場合の動作例を示している。

先ず、テレビ電話端末７Ａは、ユーザから会議ＩＤの指定を伴うＧＷ４への発信操作を受け付けると（Ｓ５０１）、ＧＷ４に割り当てられた番号を着番とする、会議ＩＤの指定を伴う接続要求を送信する（Ｓ５０２）。この接続要求は、ＰＢＸ６を介してＧＷ４のいずれかの回線インターフェース部４２（以下、第一の回線インターフェース部４２と呼ぶ）に着信する。

ＧＷ４は、第一の回線インターフェース部４２に接続要求が着信すると、自ＧＷ４が会議に参加していないことを確認し、自ＧＷ４の端末ＩＤおよび接続要求で指定されている会議ＩＤの指定を含む会議の参加要求を管理サーバ１に送信する（Ｓ５０３）。これを受けて、管理サーバ１は、この参加要求で指定されている会議ＩＤにより特定される会議の参加端末としてＧＷ４が予約されていることを確認し、ＧＷ４に参加許可応答を返信するとともに（Ｓ５０４）、中継サーバ２に、ＧＷ４のアドレスを伴う中継開始指示を送信する（Ｓ５０５）。

これを受けて、ＧＷ４は、第一の回線インターフェース部４２から接続応答を返信して（Ｓ５０６）、第一の回線インターフェース部４２をＰＢＸ６に接続する。

これにより、第一の回線インターフェース部４２およびＰＢＸ６を介して、テレビ電話端末７Ａと中継サーバ２との間の音声および映像データの中継処理が開始される（Ｓ５０７、Ｓ５０８）。

次に、テレビ電話端末７Ｂは、ユーザから会議ＩＤの指定を伴うＧＷ４への発信操作を受け付けると（Ｓ５０９）、ＧＷ４に割り当てられた番号を着番とする、会議ＩＤの指定を伴う接続要求を送信する（Ｓ５１０）。この接続要求は、ＰＢＸ６を介して、ＧＷ４の第一の回線インターフェース部４２以外のいずれかの回線インターフェース部４２（以下、第二の回線インターフェース部４２と呼ぶ）に着信する。

ＧＷ４は、第二の回線インターフェース部４２に接続要求が着信すると、自ＧＷ４が、この接続要求で指定されている会議ＩＤにより特定される会議に参加中であることを確認し、管理サーバ１に参加要求を送信することなく、第二の回線インターフェース部４２から接続応答を返信して（Ｓ５１１）、第二の回線インターフェース部４２をＰＢＸ６に接続する。

これにより、第二の回線インターフェース部４２およびＰＢＸ６を介して、テレビ電話端末７Ｂと中継サーバ２との間の音声および映像データの中継処理が開始される（Ｓ５１２、Ｓ５１３）。

さて、テレビ電話端末７Ａは、ユーザから切断操作を受け付けると（Ｓ５１４）、切断要求を送信する（Ｓ５１５）。この接続要求は、ＰＢＸ６を介してＧＷ４の第一の回線インターフェース部４２に到達する。

ＧＷ４は、第一の回線インターフェース部４２を介して切断要求を受信すると、第二の回線インターフェース部４２が接続中であることを確認し、管理サーバ１に離脱要求を送信することなく、第一の回線インターフェース部４２から切断応答を返信して（Ｓ５１６）、第一の回線インターフェース部４２をＰＢＸ６から切断する。これにより、テレビ電話端末７Ａと中継サーバ２との間の音声および映像データの中継処理が終了する。

次に、テレビ電話端末７Ｂは、ユーザから切断操作を受け付けると（Ｓ５１７）、切断要求を送信する（Ｓ５１８）。この接続要求は、ＰＢＸ６を介してＧＷ４の第二の回線インターフェース部４２に到達する。

ＧＷ４は、第二の回線インターフェース部４２を介して切断要求を受信すると、第二の回線インターフェース部４２から切断応答を返信して（Ｓ５１９）、第二の回線インターフェース部４２をＰＢＸ６から切断する。これにより、テレビ電話端末７Ｂと中継サーバ２との間の音声および映像データの中継処理が終了する。

また、ＧＷ４は、すべての回線インターフェース部４２がＰＢＸ６に接続中でないことを確認し、自ＧＷ４の端末ＩＤおよび参加中の会議の会議ＩＤの指定を伴う離脱要求を管理サーバ１に送信する（Ｓ５２０）。

これを受けて、管理サーバ１は、ＧＷ４に、離脱許可応答を返信するとともに（Ｓ５２１）、中継サーバ２に、ＧＷ４のアドレスを伴う中継終了指示を送信する（Ｓ５２２）。これにより、中継サーバ２は、ＧＷ４との間の音声および映像データの送受を終了する。

以上、本発明の一実施の形態を説明した。

本実施の形態において、ＧＷ４は、ＰＢＸ６配下の複数のテレビ電話端末７から音声および映像データを受信して、これらの音声データの音量レベルに基づいて、複数のテレビ電話端末７のなかから中継対象を選択する。そして、中継対象に選択したテレビ電話端末７から受信した音声および映像データを、中継サーバ２に送信する。また、中継サーバ２から音声および映像データを受信して各テレビ電話端末７に送信する。

したがって、本実施の形態によれば、中継サーバ２およびＧＷ４間のセッションを複数のテレビ電話端末７で共用できるので、中継サーバ２に接続可能な端末数以上の端末を会議に参加させることが可能となる。

また、本実施の形態において、ＧＷ４は、音声データの音量レベルの大きい順に、ＰＢＸ６配下のテレビ電話端末７のなかから中継対象を少なくとも二つ選択する。そして、中継対象に選択された少なくとも二つのテレビ電話端末７から受信した音声データを合成して中継サーバ２に送信するとともに、これらのテレビ電話端末７のうちの一つ（たとえば最も音声データの音量レベルの大きいテレビ電話端末７）から受信した映像データを中継サーバ２に送信する。

したがって、本実施の形態によれば、ＰＢＸ６配下の複数のテレビ電話端末７のユーザが同時に発言した場合に、これらのユーザ全員の発言を会議に参加しているクライアント端末３に送ることができる。

また、本実施の形態において、ＧＷ４は、中継サーバ２から会議に参加している各クライアント端末３の音声データ、映像データを受信して、それぞれを合成し会議音声用の音声データ、会議画面用の映像データを生成して、この会議音声用の音声データ、会議画面用の映像データをＰＢＸ６配下のテレビ電話端末７に送信する。

したがって、本実施の形態によれば、クライアント端末３と異なり、会議音声用の音声データ生成のための音声合成機能、および会議画面用の映像データの映像合成機能を備えていないテレビ電話端末７を、会議に参加させることが可能となる。

また、本実施の形態において、ＧＷ４は、ＰＢＸ６配下のテレビ電話端末７各々に対して、対象のテレビ電話端末７以外の各テレビ電話端末７から受信した音声データと、中継サーバ２から受信し各クライアント端末３の音声データとを合成して、会議音声用の音声データを生成し、この会議音声用の音声データを対象のテレビ電話端末７に送信する。

したがって、本実施の形態によれば、各テレビ電話端末７に、他のテレビ電話端末７のユーザの発言を送ることができる。

また、本実施の形態において、ＧＷ４は、いずれかの回線インターフェース部４２に接続要求が着信した場合に、自ＧＷ４が会議に参加していないならば、管理サーバ１に参加要求を送信して会議に参加するとともに、この回線インターフェース部４２から接続応答を返信することで、この回線インターフェース部４２をＰＢＸ６に接続し、一方、すでに会議に参加中であるならば、管理サーバ１に参加要求を送信することなく、この回線インターフェース部４２から接続応答を返信することで、この回線インターフェース部４２をＰＢＸ６に接続する。

したがって、本実施の形態によれば、ＧＷ４が管理サーバ１に参加要求を重複送信する事態が発生するのを防止できる。

なお、本発明は上記の実施の形態に限定されるものではなく、その要旨の範囲内で数々の変形が可能である。

例えば、上記の実施の形態において、本発明の中継装置をＧＷ４に適用した場合を例に取り説明した。しかし、本発明はこれに限定されない。例えば、本発明の中継装置は、自中継装置と中継サーバ２との接続を、複数のクライアント端末３で共用するものでもよい。この場合、図１１において、複数の回線インターフェース部４２に代えて、クライアント端末３を接続するためのＬＡＮインターフェース部が設けられる。なお、クライアント端末３を接続するためのＬＡＮインターフェース部を、管理サーバ１および中継サーバ２と接続するためのＬＡＮインターフェース部４１と共用してもよい。

また、上記の実施の形態において、図２に示す管理サーバ１、図５に示す中継サーバ２、図７に示すクライアント端末は、および図１１に示すＧＷ４の機能は、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）などの集積ロジックＩＣによりハード的に実行されるものでもよいし、あるいはＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）などの計算機によりソフトウエア的に実行されるものでもよい。または、ＣＰＵ、メモリ、ＨＤＤ、ＤＶＤ−ＲＯＭ等の補助記憶装置、およびＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）、モデム等の通信インターフェース（クライアント端末３は、これらに加えてマイク、スピーカ等の音声入出力オ装置、カメラ、ディスプレイ等の映像入出力装置、およびキーボード、マウス等の入力装置）を備えたＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等の汎用コンピュータにおいて、ＣＰＵが所定のプログラムを補助記憶装置からメモリ上にロードして実行することで実現されるものでもよい。

１：管理サーバ、２：中継サーバ、３：クライアント端末、４：ＧＷ、５：ＬＡＮ、６：ＰＢＸ、７：テレビ電話端末、１１：ＬＡＮインターフェース部、１２：端末情報記憶部、１３：予約情報記憶部、１４：予約受付部、１５：会議制御部、２１：ＬＡＮインターフェース部、２２：中継情報記憶部、２３：音声バッファ部、２４：映像バッファ部、２５：指示受付部、２６：音声中継部、２７：映像中継部、２８：レベル検出部、２９：中継対象選択部、３１：ＬＡＮインターフェース部、３２：音声入出力部、３３：映像入出力部、３４：操作受付部、３５：音声処理部、３６：映像処理部、３７：音声合成部、３８：映像合成部、３９：主制御部、４１：ＬＡＮインターフェース部、４２：回線インターフェース部、４３：上り中継部、４４：下り中継部、４５：主制御部、２６１：音声収集部、２６２：音声配信部、２７１：映像収集部、２７２：映像配信部、４３１：受信部、４３２：音声バッファ部、４３３：映像バッファ部、４３４：レベル検出部、４３５：中継対象選択部、４３６：音声送信部、４３７：映像送信部、４４１：受信部、４４２：音声バッファ部、４４３：映像バッファ部、４４４：音声合成部、４４５：映像合成部、４４６：送信部

Claims (5)

1. 複数の会議端末を会議サーバに接続する中継装置であって、
   前記複数の会議端末から音声および映像データを受信して前記会議サーバに送信する上り中継手段と、
   前記会議サーバから音声および映像データを受信して前記複数の会議端末に送信する下り中継手段と、
   前記複数の会議端末の前記会議サーバへの接続を制御する接続制御手段と、を有し、
   前記上り中継手段は、
   前記複数の会議端末から前記音声および映像データを受信する第一の受信手段と、
   前記複数の会議端末から受信された前記音声データの音量レベルを検出する検出手段と、
   前記検出手段により検出された前記音量レベルに基づいて、前記複数の会議端末のなかから中継対象を選択する選択手段と、
   前記中継対象に選択された前記会議端末から受信した前記音声および映像データを、前記会議サーバに送信する第一の送信手段と、を有し、
   前記接続制御手段は、
   前記複数の会議端末のいずれかの会議端末から前記会議サーバへの接続要求を受信した場合に、自中継装置と前記会議サーバとの間で音声および映像データの送受信に用いるセッションが確立されていないならば、当該接続要求を前記会議サーバに送信して当該セッションを確立するとともに、当該接続要求の送信元に接続応答を返信し、当該セッションが確立されているならば、当該接続要求を前記会議サーバに送信することなく、当該接続要求の送信元に接続応答を返信する
   ことを特徴とする中継装置。
2. 請求項１に記載の中継装置であって、
   前記選択手段は、
   前記検出手段により検出された前記音量レベルの大きい順に、前記複数の会議端末のなかから前記中継対象を少なくとも二つ選択し、
   前記第一の送信手段は、
   前記中継対象に選択された少なくとも二つの前記会議端末から受信した前記音声データを合成し、当該合成された音声データを前記会議サーバに送信するとともに、前記中継対象に選択された少なくとも二つの前記会議端末のうちの一つから受信した前記映像データを前記会議サーバに送信する
   ことを特徴とする中継装置。
3. 請求項１または２に記載の中継装置であって、
   前記下り中継手段は、
   前記会議サーバから、前記複数の会議端末以外の会議端末の音声および映像データを受信する第二の受信手段と、
   前記会議サーバから受信した前記複数の会議端末以外の会議端末各々の前記音声データを合成する音声合成手段と、
   前記会議サーバから受信した前記複数の会議端末以外の会議端末各々の前記映像データを合成する映像合成手段と、
   前記音声合成手段により合成された前記音声データおよび前記映像合成手段により合成された前記映像データを前記複数の会議端末に送信する第二の送信手段と、を有する
   ことを特徴とする中継装置。
4. 請求項３に記載の中継装置であって、
   前記音声合成手段は、
   前記複数の会議端末の各々に対して、当該会議端末以外の前記複数の会議端末から受信した前記音声データと、前記会議サーバから受信した前記複数の会議端末以外の会議端末各々の前記音声データとを合成して、当該会議端末向けの音声データを生成し、
   前記第二の送信手段は、
   前記複数の会議端末の各々に対して、前記音声合成手段により生成された当該会議端末向けの音声データを送信する
   ことを特徴とする中継装置。
5. 複数の会議端末の会議サーバへの接続方法であって、
   前記複数の会議端末から音声および映像データを受信して、前記会議端末各々の音声データの音量レベルに基づいて、前記複数の会議端末のなかから中継対象を選択し、前記中継対象に選択した前記会議端末から受信した音声および映像データを、前記会議サーバに送信し、
   前記会議サーバから音声および映像データを受信して前記複数の会議端末に送信し、
   前記複数の会議端末のいずれかの会議端末から前記会議サーバへの接続要求を受信した場合に、自中継装置と前記会議サーバとの間で音声および映像データの送受信に用いるセッションが確立されていないならば、当該接続要求を前記会議サーバに送信して当該セッションを確立するとともに、当該接続要求の送信元に接続応答を返信し、当該セッションが確立されているならば、当該接続要求を前記会議サーバに送信することなく、当該接続要求の送信元に接続応答を返信する
   ことを特徴とする会議端末の会議サーバへの接続方法。

Images