JP2003023499A

JP2003023499A - 会議サーバ装置および会議システム

Info

Publication number: JP2003023499A
Application number: JP2001209818A
Authority: JP
Inventors: Naoyuki Mochida; 尚之持田
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 2001-07-10
Filing date: 2001-07-10
Publication date: 2003-01-24

Abstract

(57)【要約】【課題】複数の会議サーバ装置が接続された分散
会議システムにおいて、他の会議サーバ装置に接続して
いる会議端末の音声及び直接接続している会議端末の音
声の音声レベルを同等にすること。【解決手段】複数の会議サーバ装置が接続された分散
会議システムにおいて、他の会議サーバ装置１００Ｂに
接続された会議端末１０１Ｄ及び１０１Ｅから受信した
ミキシング済み音声データを、ＭＣＵミキサ部２０４で
他の会議サーバ装置１００Ｂで会議に参加している会議
端末数や、その時点で話をしている会議端末数に応じて
音声レベルを上げた上で、直接接続している会議端末１
０１Ａ、１０１Ｂ及び１０１Ｃの音声データとミキシン
グする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、複数の会議サーバ
装置が相互接続し、会議端末に対して会議通話サービス
を提供する分散会議システムにおける会議サーバ装置に
関し、特に会議サーバ装置における音声ミキシング（重
畳）方法に関する。

【０００２】

【従来の技術】インターネットやＩＳＤＮ等のネットワ
ークが広く普及し、ＰＣ等の端末装置の性能が向上する
にしたがって、これらネットワークを介して遠隔地を結
び、リアルタイムな音声交換、映像交換、データ交換が
可能な会議を行いたいという要求が高まってきている。

【０００３】代表的な分散会議システムの構成として
は、各拠点に会議サーバ装置（MCU:Multipoint Control
Unit）を配置し、拠点内の会議端末はその拠点の会議
サーバ装置に接続し、会議サーバ装置が拠点間で相互接
続する構成がある。

【０００４】図１５は、このような分散会議システムの
構成を示すものである。会議サーバ装置１５００Ａはイ
ンターネット等のネットワーク１５０２を介して別の会
議サーバ装置１５００Ｂと接続している。会議端末１５
０１Ａ及び１５０１Ｂは、会議サーバ装置１５００Ａと
のみ通信を行い、会議端末１５０１Ｃ及び１５０１Ｄは
会議サーバ装置１５００Ｂとのみ通信を行う。ネットワ
ーク１５０２を介して分散配置された会議端末同士が直
接通信することはなく、会議サーバ装置１５００Ａと会
議サーバ装置１５００Ｂが通信を行い、各会議端末から
のデータを中継する。

【０００５】図１６に、このような分散会議システムに
おける音声通信の方法を示す。ここでは、特に会議端末
１５０１Ｃ及び１５０１Ｄにおいて受信する音声に注目
して説明する。

【０００６】会議端末１５０１Ａからの音声パケット
と、会議端末１５０１Ｂからの音声パケットは、パケッ
ト受信部１６０１Ａにおいて受信され、パケットのペイ
ロードがミキサ部１６０２Ａに渡される。ミキサ部１６
０２Ａにおいては、受信した音声データはデジタル符号
化されたデータであるため、一旦アナログ信号に復号化
された後、これら音声データを加算・合成される。すな
わち、ミキサ部１６０２Ａにおいてミキシング（重畳）
処理が行われる。そして、再度デジタル信号に符号化さ
れた後、パケット送信部１６０３Ａに渡される。パケッ
ト送信部１６０３Ａでは、受信したミキシング済みの音
声データをパケット化し、会議サーバ装置１５００Ｂ宛
てに送る。

【０００７】なお、会議端末１５００Ａと会議端末１５
００Ｂの音声データはアナログ信号として加算後にデジ
タル符号化されているので、複数の会議端末から一つず
つパケットを受信したが、会議サーバ装置１５００Ｂに
は一つのパケットのみが送信される。

【０００８】会議サーバ装置１５００Ｂでは、パケット
受信部１６０１Ｂにおいて、直接接続（収容）している
会議端末１５０１Ｃ及び１５０１Ｄからの音声パケット
を受信すると共に、会議サーバ装置１５００Ａからのミ
キシング済みの音声パケットを受信する。

【０００９】ミキサ部１６０２Ｂにおいて、受信した音
声データはアナログ復号化されたのち、加算・合成され
る。そして、再度デジタル符号化されて、パケット送信
部１６０３Ｂに渡される。パケット送信部１６０３Ｂに
おいては、ミキシングされた音声データをパケット化
し、会議端末１５０１Ｃ及び１５０１Ｄに送る。なお、
会議端末１５０１Ａ及び１５０１Ｂが受信する音声デー
タも同様に処理される。

【００１０】ミキサ部１６０２におけるミキシング処理
の際には、雑音を取り除くためのフィルタリング処理
や、会議端末間の音声レベルの不一致を調整するための
音声レベル調整を行った後、音声データをアナログ信号
に復号化して加算する。加算することによって音声デー
タの全体の音声レベルが上がってしまうため、全体的に
音声レベルを下げた上で再度デジタル信号に符号化する
必要がある。

【００１１】なお、ＩＴＵ−Ｔ勧告Ｈ．２３１やＨ．２
４１においては、複数の会議サーバ装置が相互接続する
場合の呼制御手順について規定しているが、これら会議
サーバ装置の間でどのように音声をミキシングするかに
関しては規定していない。

【００１２】

【発明が解決しようとする課題】上記したような従来の
会議サーバ装置では、会議サーバ装置１５００Ａから送
られたミキシング済み音声パケットは、会議サーバ装置
１５００Ｂのミキサ部１６０２Ｂにおいて会議端末１５
０１Ｃ及び１５０１Ｄの音声と共にミキシングされる
が、ミキシング済み音声は全体としてのレベルが適正と
なるようにその音声レベルを下げている。したがって、
会議端末１５０１Ｃ及び１５０１Ｄの音声に比べ、会議
端末１５０１Ａ及び１５０１Ｂの音声が相対的に小さく
なってしまうとの問題がある。

【００１３】本発明は、このような従来の問題を解決す
るものであり、会議に参加している会議端末数や、その
時点で話をしている会議端末数に応じて、他の会議サー
バ装置から受信したミキシング済み音声の音声レベルを
上げた上で、直接接続している会議端末の音声とミキシ
ングすることにより、全ての会議端末の音声レベルを同
等にすることができる会議サーバ装置を提供することを
目的とする。

【００１４】また、従来の会議サーバ装置では、会議端
末１５０１Ａ及び１５０１Ｂの音声は、双方の会議サー
バ装置で二度のミキシング処理が行われることになる。
このとき、雑音除去のためのフィルタリング処理や音声
レベル調整により、会議端末１５０１Ａ及び１５０１Ｂ
の音声が劣化してしまうとの問題がある。

【００１５】本発明は、このような従来の問題を解決す
るものであり、通信相手が会議サーバ装置である場合に
は、ミキサ部１６０２Ａにおいてミキシング処理を行わ
ず、元の音声データをそのまま会議サーバ装置１５００
Ｂへ送ることにより、あるいは、送る際にデータを減ら
す工夫をすることにより、ミキシング処理の回数を減ら
し、音質の劣化を防止しつつ、会議サーバ装置間の通信
に必要となる帯域の増加を少なくすることができる会議
サーバ装置を提供することを目的とする。

【００１６】

【課題を解決するための手段】本発明は、複数の会議サ
ーバ装置が接続された分散会議システムにおいて、他の
会議サーバ装置に接続された会議端末から受信したミキ
シング済み音声データを、他の会議サーバ装置で会議に
参加している会議端末数や、その時点で話をしている会
議端末数に応じて音声レベルを上げた上で、直接接続し
ている会議端末の音声データとミキシングするようにし
たものである。これにより、全ての会議端末の音声レベ
ルを同等にすることができる。

【００１７】また、本発明は、通信相手が会議サーバ装
置である場合には、自己のミキサ手段において音声デー
タのミキシング処理を行わず、元の音声データをそのま
ま通信相手の会議サーバ装置へ送ることにより、あるい
は、送る際にデータを減らす工夫をするようにしたもの
である。これにより、ミキシング処理の回数を減らし、
音質の劣化を防止しつつ、会議サーバ装置間の通信に必
要となる帯域の増加を少なくすることができる。

【００１８】

【発明の実施の形態】本発明の第１の態様に係る会議サ
ーバ装置は、ネットワークを介して他の会議サーバ装置
に接続され、前記他の会議サーバ装置との間で音声パケ
ットを送受信する会議サーバ装置であって、複数の会議
端末から音声パケットを受信する第１の受信手段と、前
記複数の会議端末からの音声パケット内の音声データを
ミキシングする第１のミキサ手段と、前記第１のミキサ
手段によるミキシング後の音声データをパケット化し前
記他の会議サーバ装置に送信する第１の送信手段と、前
記他の会議サーバ装置からミキシング後の音声データを
含む音声パケットを受信する第２の受信手段と、前記他
の会議サーバ装置から受信した音声パケット内のミキシ
ング後の音声データを、前記他の会議サーバ装置に接続
された会議端末数に応じて音声レベル調整を行った後に
前記複数の会議端末からの音声データとミキシングする
第２のミキサ手段と、前記第２のミキサ手段によるミキ
シング後の音声データをパケット化し前記複数の会議端
末に送信する第２の送信手段と、を具備する構成を採
る。

【００１９】この構成によれば、第２の受信手段におい
て受信した他の会議サーバ装置においてミキシング後の
音声データに対して、他の会議サーバ装置において会議
に参加している会議端末数に応じて音声レベルを調整す
ることが可能である。この結果、当該会議サーバ装置に
直接接続する会議端末の音声レベルと、他会議サーバ装
置に接続する会議端末の音声レベルを同等にすることが
可能であるとの作用を有する。

【００２０】なお、音声レベル調整は、本発明の会議サ
ーバ装置が備える第２のミキサ手段において行うため、
他の会議サーバ装置としては必ずしも本発明の会議サー
バ装置である必要はない。したがって、既存の分散会議
システムに本発明の会議サーバ装置を導入可能であると
の作用を有する。

【００２１】本発明の第２の態様は、第１の態様に係る
会議サーバ装置において、前記第１のミキサ手段は当該
会議サーバ装置に接続された会議端末数を検出する端末
数検出部を備え、前記第１の送信手段は前記端末数検出
部が検出した会議端末数を他の会議サーバ装置に通知す
る端末数通知部を備える一方、前記第２の受信手段は他
の会議サーバ装置から通知される会議端末数を受信する
端末数受信部を備え、前記第２のミキサ手段は前記端末
数受信部が受信した会議端末数に基づいて前記ミキシン
グ後の音声データの音声レベル調整を行うレベル調整部
を備える構成を採る。

【００２２】この構成によれば、端末数検出部において
検出した会議に参加している端末数を、端末数通知部に
より他の会議サーバ装置に通知することが可能である。
その結果、他の会議サーバ装置においては、端末数受信
部において受信した端末数を元に、レベル調整部におい
て、受信したミキシング後の音声をレベル調整すること
が可能であるとの作用を有する。

【００２３】本発明の第３の態様に係る会議サーバ装置
は、ネットワークを介して他の会議サーバ装置に接続さ
れ、前記他の会議サーバ装置との間で音声パケットを送
受信する会議サーバ装置であって、複数の会議端末から
音声パケットを受信する第１の受信手段と、前記複数の
会議端末からの音声パケット内の音声データをミキシン
グする第１のミキサ手段と、前記第１のミキサ手段によ
るミキシング後の音声データをパケット化し前記他の会
議サーバ装置に送信する第１の送信手段と、前記他の会
議サーバ装置からミキシング後の音声データを含む音声
パケットを受信する第２の受信手段と、前記他の会議サ
ーバ装置から受信した音声パケット内のミキシング後の
音声データを、前記他の会議サーバ装置に接続され且つ
その時点で話をしている会議端末数に応じて音声レベル
調整を行った後に前記複数の会議端末からの音声データ
とミキシングする第２のミキサ手段と、前記第２のミキ
サ手段によるミキシング後の音声データをパケット化し
前記複数の会議端末に送信する第２の送信手段と、を具
備する構成を採る。

【００２４】この構成によれば、第２の受信手段におい
て受信した他の会議サーバ装置においてミキシング後の
音声データに対して、他の会議サーバ装置において会議
に参加している会議端末のうち、その時点で話をしてい
る会議端末数に応じて音声レベルを調整することが可能
である。この結果、当該会議サーバ装置に直接接続する
会議端末の音声レベルと、他の会議サーバ装置に接続す
る会議端末の音声レベルを同等にすることが可能である
との作用を有する。

【００２５】本発明の第４の態様は、第３の態様に係る
会議サーバ装置において、前記第１のミキサ手段は当該
会議サーバ装置に接続された会議端末のうち、その時点
で音声データに有音データを含む会議端末数を検出する
話者数検出部を備え、前記第１の送信手段は前記話者数
検出部が検出した会議端末数を他の会議サーバ装置に通
知する端末数通知部を備える一方、前記第２の受信手段
は他の会議サーバ装置から通知される会議端末数を受信
する端末数受信部を備え、前記第２のミキサ手段は前記
端末数受信部が受信した会議端末数に基づいて前記ミキ
シング後の音声データの音声レベル調整を行うレベル調
整部を備える構成を採る。

【００２６】この構成によれば、話者数検出部において
検出した会議に参加している端末のうち、その時点で話
をしている端末数を、端末数通知部により他の会議サー
バ装置に通知することが可能である。この結果、他の会
議サーバ装置においては、端末数受信部において端末数
を受信した端末数を元に、レベル調整部において、受信
したミキシング済み音声をレベル調整することが可能で
あるとの作用を有する。

【００２７】本発明の第５の態様は、第４の態様に係る
会議サーバ装置において、前記話者数検出部は各会議端
末からの音声パケットの音声レベルを検出する音声レベ
ル検出部と、前記音声レベルを予め定めた閾値と比較す
る比較部と、前記音声レベルが前記閾値よりも大きい会
議端末数を前記第１の送信手段に通知する話者数通知部
と、を具備する構成を採る。

【００２８】この構成によれば、話者数検出部におい
て、会議端末から送られてくる音声パケットを監視し、
音声データの有音の符号化がなされた区間を検出し、さ
らにその音声レベルが予め定めた閾値よりも大きいかど
うかを比較することにより、各会議端末が話をしている
かどうかを判断することが可能である。この結果、その
時点で話をしている会議端末数を検出することが可能で
あるとの作用を有する。

【００２９】本発明の第６の態様は、第２、第４又は第
５の態様に係る会議サーバ装置において、前記端末数通
知部は前記会議端末数を、前記ミキシング後の音声デー
タを含む音声パケットとは別のパケットにて通知する構
成を採る。

【００３０】この構成によれば、検出した端末数を音声
パケットとは別のパケットを用いて、例えば呼制御手順
を用いて、他の会議サーバ装置に通知することが可能に
なるとの作用を有する。

【００３１】本発明の第７の態様は、第２、第４又は第
５の態様に係る会議サーバ装置において、前記端末数通
知部は前記会議端末数を前記ミキシング後の音声データ
を含む音声パケットに付加情報として追加することで前
記会議端末数を通知する構成を採る。

【００３２】この構成によれば、検出した端末数を音声
パケットのヘッダ等に設定することが可能であり、検出
した端末数を他の会議サーバ装置に通知することが可能
であるとの作用を有する。また、別のパケットを用いて
端末数を通知する方式では、音声パケットと端末数通知
パケットが非同期で送られるため、端末数が動的に変わ
る場合などには、切り替わりにずれが生じてしまうとの
課題があるが、音声パケット自体に端末数を設定してい
るので、端末数が動的に変わる場合でも、音声データの
ミキシング時点での端末数が取得可能であるとの作用を
有する。

【００３３】本発明の第８の態様は、第７の態様に係る
会議サーバ装置において、前記端末数通知部は前記会議
端末数を音声パケットのＩＰオプションフィールドに設
定することで前記会議端末数を通知する構成を採る。

【００３４】この構成によれば、会議サーバ装置同士を
接続するネットワークがＩＰネットワークである場合
に、検出した端末数をＩＰオプションフィールドに設定
することで、検出した端末数を通信相手の会議サーバ装
置に通知することが可能であるとの作用を有する。

【００３５】本発明の第９の態様は、第１から第８のい
ずれかの態様に係る会議サーバ装置において、前記第１
のミキサ手段は各会議端末から受信した音声パケット内
の音声データのミキシングをせず、前記第１の送信手段
は前記第１のミキサ手段によりミキシングされていない
音声データをパケット化し前記他の会議サーバ装置に送
信する構成を採る。

【００３６】この構成によれば、第１のミキサ手段にお
いては音声ミキシングは行わないため、音質の劣化や遅
延の増大を防ぐことが可能であるとの作用を有する。

【００３７】本発明の第１０の態様は、第９の態様に係
る会議サーバ装置において、前記第１のミキサ手段は各
会議端末から受信する音声パケットの通信遅延のゆらぎ
時間を吸収する構成を採る。

【００３８】この構成によれば、第１のミキサ手段にお
いて会議サーバ装置が接続する会議端末との間のパケッ
ト伝送に関して、伝送遅延のゆらぎ吸収を行った後に他
会議サーバ装置にパケットを送信するので、他会議サー
バ装置における伝送遅延のゆらぎは小さくなるとの作用
を有する。

【００３９】本発明の第１１の態様は、第９の態様に係
る会議サーバ装置において、前記第１のミキサ手段は各
会議端末から受信する音声パケットのうち、遅延したパ
ケット又は廃棄されたパケットの音声を補償する構成を
採る。

【００４０】この構成によれば、第１のミキサ手段にお
いて会議サーバ装置が接続する会議端末との間のパケッ
ト伝送に関して、ゆらぎ吸収時間を超えて遅延してきた
パケットや廃棄されてしまったパケットに関して無音パ
ケット等を挿入した後で他の会議サーバ装置に送信する
ので、他の会議サーバ装置において、ゆらぎ吸収時間を
超えて到着するパケットの発生頻度やパケット廃棄によ
るパケット抜けの発生頻度を低下することが可能である
との作用を有する。

【００４１】本発明の第１２の態様は、第９から第１１
のいずれかの態様に係る会議サーバ装置において、前記
第１のミキサ手段は各会議端末から受信した音声パケッ
トのミキシングをせず、前記第１の送信手段は前記複数
の会議端末の音声パケット内の音声データを一つの音声
データに連結した上でパケット化し前記他の会議サーバ
装置に送信する一方、前記第２の受信手段は前記他の会
議サーバ装置から受信した音声パケット内の連結した音
声データを分解する構成を採る。

【００４２】この構成によれば、他の会議サーバ装置に
送られる音声パケットは一つに連結されるため、第２の
受信手段や第２のミキサ手段においてミキシング処理の
ために他の会議サーバ装置から送られてくる複数のパケ
ットが揃うのを待つ必要がなくなり、処理が容易になる
との作用を有する。また、パケットを連結する際には、
パケットヘッダ部分を削除できるため、会議サーバ装置
間の通信に必要となる帯域が小さくなるとの作用を有す
る。

【００４３】本発明の第１３の態様は、第９から第１２
のいずれかの態様に係る会議サーバ装置において、前記
第１のミキサ手段は各会議端末から受信した音声パケッ
トの一部を廃棄し、前記第１の送信手段は前記音声パケ
ットの残りを前記他の会議サーバ装置に送信する一方、
前記第２の受信手段は前記他の会議サーバ装置から受信
した音声パケットのうち前記他の会議サーバ装置で廃棄
された部分を補間する構成を採る。

【００４４】この構成によれば、第１の受信手段におい
て受信した音声データの一部のみを他の会議サーバ装置
に送ることになり、会議サーバ装置間の通信に必要とな
る帯域が小さくなるとの作用を有する。

【００４５】本発明の第１４の態様に係る会議システム
は、少なくとも二台の第１の態様から第１３の態様のい
ずれかの会議サーバ装置と、前記会議サーバ装置間を接
続するネットワークと、ユーザが操作する会議端末とか
ら構成される。

【００４６】本発明の第１５の態様に係る音声ミキシン
グ方法は、ネットワークを介して他の会議サーバ装置に
接続され、前記他の会議サーバ装置との間で音声パケッ
トを送受信する会議サーバ装置における音声ミキシング
方法であって、複数の会議端末から音声パケットを受信
し、前記複数の会議端末からの音声パケット内の音声デ
ータをミキシングし、このミキシング後の音声データを
パケット化し前記他の会議サーバ装置に送信する一方、
前記他の会議サーバ装置からミキシング後の音声データ
を含む音声パケットを受信し、前記他の会議サーバ装置
から受信した音声パケット内のミキシング後の音声デー
タを、前記他の会議サーバ装置に接続された会議端末数
に応じて音声レベル調整を行った後に前記複数の会議端
末からの音声データとミキシングし、このミキシング後
の音声データをパケット化し前記複数の会議端末に送信
するものである。

【００４７】この方法によれば、受信した他の会議サー
バ装置においてミキシング後の音声データに対して、他
の会議サーバ装置において会議に参加している会議端末
数に応じて音声レベルを調整することが可能である。こ
の結果、当該会議サーバ装置に直接接続する会議端末の
音声レベルと、他会議サーバ装置に接続する会議端末の
音声レベルを同等にすることが可能であるとの作用を有
する。

【００４８】本発明の第１６の態様に係る音声ミキシン
グ方法は、ネットワークを介して他の会議サーバ装置に
接続され、前記他の会議サーバ装置との間で音声パケッ
トを送受信する会議サーバ装置における音声ミキシング
方法であって、複数の会議端末から音声パケットを受信
し、前記複数の会議端末からの音声パケット内の音声デ
ータをミキシングし、このミキシング後の音声データを
パケット化し前記他の会議サーバ装置に送信する一方、
前記他の会議サーバ装置からミキシング後の音声データ
を含む音声パケットを受信し、前記他の会議サーバ装置
から受信した音声パケット内のミキシング後の音声デー
タを、前記他の会議サーバ装置に接続され且つその時点
で話をしている会議端末数に応じて音声レベル調整を行
った後に前記複数の会議端末からの音声データとミキシ
ングし、このミキシング後の音声データをパケット化し
前記複数の会議端末に送信するものである。

【００４９】この方法によれば、受信した他の会議サー
バ装置においてミキシング後の音声データに対して、他
の会議サーバ装置において会議に参加している会議端末
のうち、その時点で話をしている会議端末数に応じて音
声レベルを調整することが可能である。この結果、当該
会議サーバ装置に直接接続する会議端末の音声レベル
と、他の会議サーバ装置に接続する会議端末の音声レベ
ルを同等にすることが可能であるとの作用を有する。

【００５０】本発明に第１７の態様に係るプログラム
は、コンピュータを、ネットワークを介して他の会議サ
ーバ装置に接続され、前記他の会議サーバ装置との間で
音声パケットを送受信する会議サーバ装置として機能さ
せるためのプログラムであって、前記コンピュータを、
複数の会議端末から音声パケットを受信する第１の受信
手段と、前記複数の会議端末からの音声パケット内の音
声データをミキシングする第１のミキサ手段と、前記第
１のミキサ手段によるミキシング後の音声データをパケ
ット化し前記他の会議サーバ装置に送信する第１の送信
手段と、前記他の会議サーバ装置からミキシング後の音
声データを含む音声パケットを受信する第２の受信手段
と、前記他の会議サーバ装置から受信した音声パケット
内のミキシング後の音声データを、前記他の会議サーバ
装置に接続された会議端末数に応じて音声レベル調整を
行った後に前記複数の会議端末からの音声データとミキ
シングする第２のミキサ手段と、前記第２のミキサ手段
によるミキシング後の音声データをパケット化し前記複
数の会議端末に送信する第２の送信手段として機能させ
るためのプログラムである。

【００５１】このプログラムにより、コンピュータは、
受信した他の会議サーバ装置においてミキシング後の音
声データに対して、他の会議サーバ装置において会議に
参加している会議端末数に応じて音声レベルを調整する
ことが可能である。この結果、当該会議サーバ装置に直
接接続する会議端末の音声レベルと、他会議サーバ装置
に接続する会議端末の音声レベルを同等にすることが可
能であるとの作用を有する。

【００５２】本発明に第１８の態様に係るプログラム
は、コンピュータを、ネットワークを介して他の会議サ
ーバ装置に接続され、前記他の会議サーバ装置との間で
音声パケットを送受信する会議サーバ装置として機能さ
せるためのプログラムであって、前記コンピュータを、
複数の会議端末から音声パケットを受信する第１の受信
手段と、前記複数の会議端末からの音声パケット内の音
声データをミキシングする第１のミキサ手段と、前記第
１のミキサ手段によるミキシング後の音声データをパケ
ット化し前記他の会議サーバ装置に送信する第１の送信
手段と、前記他の会議サーバ装置からミキシング後の音
声データを含む音声パケットを受信する第２の受信手段
と、前記他の会議サーバ装置から受信した音声パケット
内のミキシング後の音声データを、前記他の会議サーバ
装置に接続され且つその時点で話をしている会議端末数
に応じて音声レベル調整を行った後に前記複数の会議端
末からの音声データとミキシングする第２のミキサ手段
と、前記第２のミキサ手段によるミキシング後の音声デ
ータをパケット化し前記複数の会議端末に送信する第２
の送信手段として機能させるためのプログラムである。

【００５３】このプログラムにより、コンピュータは、
受信した他の会議サーバ装置においてミキシング後の音
声データに対して、他の会議サーバ装置において会議に
参加している会議端末のうち、その時点で話をしている
会議端末数に応じて音声レベルを調整することが可能で
ある。この結果、当該会議サーバ装置に直接接続する会
議端末の音声レベルと、他の会議サーバ装置に接続する
会議端末の音声レベルを同等にすることが可能であると
の作用を有する。

【００５４】以下、本発明に係る実施の形態について図
面を参照して具体的に説明する。

【００５５】（実施の形態１）図１は、本発明の実施の
形態１に係る会議サーバ装置の構成を示すブロック図で
ある。

【００５６】図１において、１００Ａは会議サーバ装置
であり、インターネットなどのネットワーク１０２を介
して別の会議サーバ装置１００Ｂと接続している。１０
１Ａ、１００Ｂ及び１００Ｃは会議端末で、ユーザが使
用する端末装置であり、例えば電話機やＰＣ、専用の会
議端末などである。会議端末１０１Ａ、１０１Ｂ及び１
０１Ｃはユーザの音声を会議サーバ装置１００Ａへ送信
し、逆に会議の参加メンバの音声であって、ミキシング
（重畳）処理が施された音声を会議サーバ装置１００Ａ
から受信する。

【００５７】一つの会議は会議サーバ装置１００Ａに接
続する会議端末１０１Ａ、１０１Ｂ及び１０１Ｃだけで
なく、会議サーバ装置１００Ｂに接続する会議端末１０
１Ｄ及び１０１Ｅも含めて開催することが可能である。
このとき、双方の会議サーバ装置１００Ａ及び１００Ｂ
は、各会議端末からの音声パケットをローカル受信部２
００で受け取る。

【００５８】ローカル受信部２００は、この音声パケッ
トのヘッダ情報を削除した後、音声データそのものをロ
ーカルミキサ部２０１へ送ると共に、ＭＣＵミキサ部２
０４へ送る。ローカルミキサ部２０１では各会議端末の
全ての音声をミキシングし、ローカル送信部２０２へ渡
す。ローカル送信部２０２では、受信したミキシング後
の音声データ（以下、「ミキシング済み音声データ」と
いう）にパケットヘッダを付加し、通信相手の会議サー
バ装置１００Ｂ宛てに送信する。以下において、ミキシ
ング済み音声データをパケット化したものをミキシング
済み音声パケットという。

【００５９】会議サーバ装置１００Ｂでも同様に、会議
サーバ装置１００Ｂが収容している会議端末１０１Ｄ及
び１０１Ｅの音声をミキシングし、会議サーバ装置１０
０ＡのＭＣＵ受信部２０３宛てに送信する。会議サーバ
装置１００ＡのＭＣＵ受信部２０３は、会議端末１０１
Ｄ及び１０１Ｅのミキシング済み音声パケットを受信す
ると、そのパケットのヘッダ情報を削除し、音声データ
をＭＣＵミキサ部２０４へ渡す。

【００６０】ＭＣＵミキサ部２０４では、ローカル受信
部２００から受信した会議端末１０１Ａ、１０１Ｂ及び
１０１Ｃの音声データとＭＣＵ受信部２０３から受信し
た会議端末１０１Ｄ及び１０１Ｅのミキシング済み音声
データをミキシングし、会議端末１０１Ａ、１０１Ｂ、
１０１Ｃ、１０１Ｄ及び１０１Ｅの全ての音声にミキシ
ング処理を施した音声データを作成し、ＭＣＵ送信部２
０５へ渡す。

【００６１】ＭＣＵ送信部２０５は、会議サーバ装置１
００Ａが直接収容する会議端末１０１Ａ、１０１Ｂ及び
１０１Ｃ宛てにミキシング済み音声データにパケットヘ
ッダを付加して、送信する。

【００６２】図２に本実施の形態に係る会議サーバ装置
における音声通信を説明するための図を示す。

【００６３】会議が開始されると、ローカル受信部２０
０は、各会議端末からの音声パケット２１０を受信す
る。各会議端末から受信する音声パケットのサイズは異
なっていてもよい。ローカル受信部２００は、受信した
音声パケットからヘッダを取り除き、ペイロードに入っ
ている音声データをローカルミキサ部２０１に渡す。同
時に、ＭＣＵミキサ部２０４に同じ音声データをコピー
して渡す。

【００６４】各会議端末から送られてくるパケットは非
同期に受信することになるが、ローカル受信部２００
は、各会議端末から音声パケットを受信するたびに音声
データをローカルミキサ部２０１へ送る。このとき、ロ
ーカル受信部２００にて各会議端末からの音声パケット
が全て揃うまで待つ必要はない。

【００６５】ローカルミキサ部２０１では、送られてき
た音声データを会議端末ごとのバッファに格納し、一定
のタイミングでこのバッファに格納されたデータを一定
量取り出す。受信する各会議端末の音声データは、ＩＴ
Ｕ―Ｔ勧告Ｇ．７１１等でデジタル符号化されたデータ
である。このため、ローカルミキサ部２０１は、一旦ア
ナログ復号化した後にデータごとにアナログ信号に復号
化し、さらに各データを加算する。加算された音声デー
タは音声レベルが高くなっているため、ローカルミキサ
部２０１は、この音声レベルを下げるように調整してか
ら再度デジタル符号化する。なお、アナログ復号化する
際には、雑音除去のためのフィルタリング処理、エコー
キャンセル処理等が行われてもよい。

【００６６】上述したローカルミキサ部２０１における
各会議端末の音声データに対する加算処理及び音声レベ
ル調整処理をミキシング（重畳）処理という。図３にロ
ーカルミキサ部２０１におけるミキシング処理の前後の
音声データの音声レベルを説明するための図を示す。な
お、図３においては、説明の便宜上、会議端末１０１Ｃ
は省略し、また音声データはアナログ復号化されている
ものとして説明する。

【００６７】図３（ａ）は会議端末１０１Ａからの音声
データの音声レベルを示し、図３（ｂ）は会議端末１０
１Ｂからの音声データの音声レベルを示している。すな
わち、図３（ａ）及び（ｂ）はミキシング処理が施され
る前の音声データの音声レベルを示している。

【００６８】図３（ａ）及び（ｂ）に示すような音声デ
ータをローカル受信部２００から受信すると、ローカル
ミキサ部２０１は、これらの音声データを加算する。図
３（ｃ）は、加算した音声データの音声レベルを示して
いる。さらに、ローカルミキサ部２０１は、この加算し
た音声データの音声レベルを下げるように調整する。図
３（ｄ）は、レベル調整をした音声データの音声レベル
を示している。このようにしてミキシング処理が終了
し、ミキシング済み音声データが得られる。

【００６９】ローカルミキサ部２０１でミキシングされ
た音声データはローカル送信部２０２へ渡される。そし
て、ローカル送信部２０２でヘッダが付加され、ミキシ
ング済み音声パケット２１１として他の会議サーバ装置
へ送られる。

【００７０】他の会議サーバ装置に収容されている会議
端末の音声は、上記のように他の会議サーバ装置にてミ
キシングされ、例えば図２の例では会議端末１０１Ｄと
１０１Ｅの音声がミキシングされ、パケットとして送ら
れてくる。ＭＣＵ受信部２０３は、ミキシング済み音声
パケット２１２を受信すると、ミキシング済み音声パケ
ットからヘッダを取り除き、ペイロードに入っているミ
キシング済み音声データをＭＣＵミキサ部２０４に渡
す。ローカル受信部２００と同様に、複数の会議サーバ
装置からパケットを受信する場合には、非同期にパケッ
トを受信することになるが、ＭＣＵ受信部２０３はパケ
ットを受信するたびにＭＣＵミキサ部２０４へ音声デー
タを渡す。

【００７１】ＭＣＵミキサ部２０４は、ローカル受信部
２００から受信する各会議端末の音声データと、ＭＣＵ
受信部２０３から受信するミキシング済み音声データと
をそれぞれバッファに格納し、一定のタイミングでこの
バッファに格納されたデータを一定量取り出す。そし
て、ローカルミキサ部２０１と同様に、一旦アナログ復
号化する。ここで、ＭＣＵミキサ部２０４は、ミキシン
グ済み音声データに関して他会議サーバ装置にて会議に
参加している端末数に応じて音声レベルを上げるように
調整する。

【００７２】例えば、図２の例では会議端末１０１Ｄ及
び１０１Ｅの二端末が他の会議サーバ装置１００Ｂで会
議に参加しているので、それに応じて音声レベルを上げ
るように調整する。そして、調整後の音声データと、ロ
ーカル受信部２００から受信したミキシング済み音声デ
ータでない通常の音声データの各データを加算する。ロ
ーカルミキサ部２０１での処理と同様に、加算された音
声データは音声レベルが高くなっているため、この音声
レベルを下げるように調整してから再度デジタル符号化
する。なお、ローカルミキサ部２０１の場合と同様に、
アナログ復号化する際には、雑音除去のためのフィルタ
リング処理、エコーキャンセル処理等が行われてもよ
い。

【００７３】ＭＣＵミキサ部２０４でミキシングされた
音声データは、ＭＣＵ送信部２０５へ渡される。そし
て、ＭＣＵ送信部２０５でヘッダが付加され、ミキシン
グ済み音声データ２１３として会議サーバ装置１００Ａ
が収容している各会議端末、例えば図２の例では会議端
末１０１Ａ、１０１Ｂ及び１０１Ｃの三端末に送信され
る。

【００７４】なお、ＭＣＵミキサ部２０４におけるミキ
シング処理に際しては、各会議端末向けにその端末の音
声を除いてミキシングするようにしてもよい。例えば、
会議端末１０１Ａに対しては、ＭＣＵミキサ部２０４は
会議端末１０１Ｂ及び１０１Ｃからの音声データと、他
会議サーバ装置１００Ｂからのミキシング済み音声デー
タとのみをミキシングし、会議端末１０１Ｂ、１０１
Ｃ、１０１Ｄ及び１０１Ｅからの音声データをミキシン
グした音声データを作成し、それをＭＣＵ送信部２０５
へ渡し、ＭＣＵ送信部２０５はパケット化した後に会議
端末１０１Ａのみにそのミキシング済み音声データを送
信するようにしてもよい。

【００７５】以上のように構成された会議サーバ装置１
００によれば、ＭＣＵミキサ部２０４において、他会議
サーバ装置から受信するミキシング済み音声データに対
しては他会議サーバ装置にて会議に参加している会議端
末数に応じて音声レベルを上げるように調整している。
これにより、会議サーバ装置１００が収容する会議端末
の音声レベルと同等の音声レベルにすることができる。
この結果、他会議サーバ装置が収容している会議端末の
音声を低くすることなく、会議サーバ装置１００が収容
する会議端末１０１で良好な品質の音声を聴取すること
が可能である。

【００７６】また、他会議サーバ装置は、他会議サーバ
装置に収容している会議端末の音声をミキシングしたパ
ケットを送信し、本会議サーバ装置１００に収容してい
る会議端末１０１の音声をミキシングしたパケットを受
信できればよく、本発明で実施するレベル調整機能を実
装している必要はない。したがって、本会議サーバ装置
１００は、既存の会議サーバ装置と相互に接続すること
が可能である。

【００７７】（実施の形態２）図４は、本発明の実施の
形態２に係る会議サーバ装置の構成を示すブロック図で
ある。実施の形態２に係る会議サーバ装置は、実施の形
態１に係る会議サーバ装置と、ローカルミキサ部２０
１、ローカル送信部２０２、ＭＣＵ受信部２０３及びＭ
ＣＵミキサ部２０４の構成において相違する。

【００７８】図４において、ローカルミキサ部２０１
は、端末数検出部２２０とローカル重畳部２２１から構
成されている。ローカル受信部２００において受信した
会議端末１０１Ａ、１０１Ｂ及び１０１Ｃからの音声パ
ケットは、実施の形態１の場合と同様に、ヘッダ部が取
り除かれ、音声データのみがローカルミキサ部２０１へ
渡される。

【００７９】ローカルミキサ部２０１では、ローカル重
畳部２２１が音声パケットを受け取り、実施の形態１と
同様に音声データをミキシングした後、ローカル送信部
２０２へ渡す。端末数検出部２２０は、会議サーバ装置
１００Ａが収容している会議端末数を検出する。この検
出にあたっては、ローカル受信部２００からの音声デー
タを監視し、どれだけの会議端末から音声データが渡さ
れているかを検出してもよいし、あるいは、ローカル受
信部２００において会議端末１００Ａからの受信用に設
定しているコネクションの数を検出してもよい。端末数
検出部２２０は、検出した会議端末数をローカル送信部
２０２の端末数通知部２２２へ通知する。

【００８０】ローカル送信部２０２は、端末数通知部２
２２とパケット送信部２２３から構成されている。パケ
ット送信部２２３は、ローカル重畳部２２１からのミキ
シング済み音声データを受け取り、ヘッダを付加してパ
ケット化した後、通信相手の会議サーバ装置１００Ｂ宛
てに送信する。端末数通知部２２２は、端末数検出部２
２０からの端末数通知を受け取り、受け取った端末数を
通信相手の会議サーバ装置１００Ｂに通知する。

【００８１】なお、他の会議サーバ装置１００Ｂへの端
末数通知の際には、ＩＴＵ−Ｔ勧告Ｈ．３２３のような
呼制御手順を用いて他会議サーバ装置へ通知してもよ
い。

【００８２】ＭＣＵ受信部２０３は、端末数受信部２２
４とパケット受信部２２５から構成されている。パケッ
ト受信部２２５は、他の会議サーバ装置１００Ｂからミ
キシング済み音声パケットを受信し、ヘッダを取り除い
た後、ＭＣＵミキサ部２０４へ渡す。端末数受信部２２
４は、他の会議サーバ装置１００Ｂの端末数通知部２２
２から通知される、会議に参加している会議端末数を受
け取り、それをＭＣＵミキサ部２０４へ通知する。

【００８３】ＭＣＵミキサ部２０４は、レベル調整部２
２６とＭＣＵ重畳部２２７から構成されている。レベル
調整部２２６は、端末数受信部２２４からの端末数通知
を受け取り、ＭＣＵ重畳部２２７からの要求に応じて、
ＭＣＵ重畳部２２７のバッファに格納されているデータ
を、端末数通知で受け取った端末数に応じてレベル調整
する。ＭＣＵ重畳部２２７は、ローカル受信部２００か
らの会議端末の音声データと、ＭＣＵ受信部２０３から
のミキシング済み音声データをそれぞれ別のバッファに
格納し、一定のタイミングでバッファに格納されたデー
タを一定量取り出してアナログ復号化する。ミキシング
済み音声データに関しては、アナログ復号化した音声デ
ータをレベル調整部２２６に渡し、レベル調整部２２６
では端末数に応じてレベル調整する。例えば、レベル調
整部２２６は、音声レベルを端末数倍し、レベル調整済
みの音声をＭＣＵ重畳部２２７に返す。ＭＣＵ重畳部２
２７は各会議端末からのアナログ復号化された音声デー
タとレベル調整済みのアナログ音声データとを加算す
る。加算された音声データは、音声レベルが高くなって
いるため、音声レベルを下げるように調整してから再度
デジタル符号化する。

【００８４】実施の形態１の場合と同様に、アナログ復
号化する際には、雑音除去のためのフィルタリング処
理、エコーキャンセル処理等が行われてもよい。

【００８５】ＭＣＵ重畳部２２７でミキシングされた音
声データは、ＭＣＵミキサ部２０４からＭＣＵ送信部２
０５へ渡され、ＭＣＵ送信部２０５から会議サーバ装置
１００Ａが収容している各会議端末（１０１Ａ、１０１
Ｂ及び１０１Ｃ）に送信される。

【００８６】以上のように構成された会議サーバ装置１
００によれば、端末数検出部２２０において検出した会
議に参加している端末数を、端末数通知部２２２により
通信相手の会議サーバ装置１００Ｂ宛てに通知すること
が可能である。これにより、通信相手の会議サーバ装置
１００Ｂにおいては、端末数受信部２２４において受信
した端末数を元に、レベル調整部２２６において受信し
たミキシング済み音声の音声レベルを調整することが可
能である。

【００８７】（実施の形態３）本発明の実施の形態３に
係る会議サーバ装置は、実施の形態１と同様の構成を有
する。すなわち、実施の形態３に係る会議サーバ装置
は、図１に示す会議サーバ装置と同様の構成を有する。

【００８８】ＭＣＵミキサ部２０４においては、他会議
サーバ装置１００Ｂからのミキシング済み音声をレベル
調整した後にローカル受信部２００で受信した音声とミ
キシングするが、実施の形態１とは異なり、他会議サー
バ装置１００Ｂにて会議に参加している会議端末数では
なく、他会議サーバ装置１００Ｂにて会議に参加してい
る会議端末数のうち、話をしていて有音のデータを送っ
てきている会議端末数に応じて、ミキシング済みの音声
のレベルを上げた後、ローカル受信部２００で受信した
音声とミキシングする。なお、有音のデータを送ってき
ている端末数に応じて行うレベル調整は、会議中に動的
に変わってよい。

【００８９】以上のように構成された会議サーバ装置１
００によれば、ＭＣＵ受信部２０３において、他会議サ
ーバ装置１００Ｂでミキシング済み音声データに対し
て、他会議サーバ装置１００Ｂにおいて会議に参加して
いる会議端末のうち、その時点で話をしている会議端末
数に応じて音声レベルを調整することが可能である。

【００９０】（実施の形態４）図５は本発明の実施の形
態４に係る会議サーバ装置の構成を示すブロック図であ
る。図５は、ローカルミキサ部２０１における端末数検
出部２２０が話者数検出部２２８に置き換えられている
点で実施の形態２に係る会議サーバ装置と相違する。

【００９１】図５において、ローカルミキサ部２０１
は、話者数検出部２２８とローカル重畳部２２１から構
成されている。ローカル受信部２００において受信した
会議端末１００Ａからの音声パケットは、実施の形態１
と同様に、ヘッダ部を取り除かれ、音声データがローカ
ルミキサ部２０１へ渡される。

【００９２】ローカルミキサ部２０１では、ローカル重
畳部２２１が音声パケットを受け取り、実施の形態１と
同様に、音声データをミキシングした後、ローカル送信
部２０２へ渡す。

【００９３】話者数検出部２２８は、会議サーバ装置１
００Ａが収容している会議端末１０１Ａ、１０１Ｂ及び
１０１Ｃのうち、その時点で話をしていて、有音のデー
タを送ってきている会議端末数を検出する。この検出に
あたってはローカル受信部２００から送られ、ローカル
重畳部２２１のバッファに保持されているデータがミキ
シングされるためにアナログ復号化された時点で行う。
このようにすれば、検出した話者数はローカル重畳部２
２１のバッファリングによる遅延、アナログ復号化にお
ける遅延の影響を受けず、ローカル送信部２０３におい
て送出する音声データと話者数との時間的なずれを少な
くすることができる。話者数検出部２２８は、検出した
会議端末数をローカル送信部２０２の端末数通知部２２
２へ通知する。

【００９４】ローカル送信部２０２は、端末数通知部２
２２とパケット送信部２２３から構成されている。パケ
ット送信部２２３は、ローカル重畳部２２１からのミキ
シング済み音声データを受け取り、ヘッダを付加しパケ
ット化した後、通信相手の会議サーバ装置１００Ｂ宛て
に送る。端末数通知部２２２は、話者数検出部２２８か
らの端末数通知を受け取り、受け取った端末数を通信相
手の会議サーバ装置１００Ｂに通知する。

【００９５】なお、他会議サーバ装置１００Ｂへの端末
数通知の際には、ＩＴＵ−Ｔ勧告Ｈ．３２３のような呼
制御手順を用いて他会議サーバ装置１００Ｂへ通知する
ようにしてもよい。

【００９６】ＭＣＵ受信部２０３は、端末数受信部２２
４とパケット受信部２２５から構成されている。パケッ
ト受信部２２５は、他会議サーバ装置１００Ｂからミキ
シング済み音声パケットを受信し、ヘッダを取り除いた
後、ＭＣＵミキサ部２０４へ渡す。端末数受信部２２４
は、他会議サーバ装置１００Ｂの端末数通知部２２２か
ら通知される会議に参加している会議端末数を受け取
り、それをＭＣＵミキサ部２０４へ通知する。

【００９７】ＭＣＵミキサ部２０４は、レベル調整部２
２６とＭＣＵ重畳部２２７から構成されている。レベル
調整部２２６は、端末数受信部２２４からの端末数通知
を受け取り、ＭＣＵ重畳部２２７からの要求に応じて、
ＭＣＵ重畳部２２７のバッファに格納されている音声デ
ータの音声レベルを、端末数通知で受け取った端末数に
応じてレベル調整する。

【００９８】ＭＣＵ重畳部２２７は、ローカル受信部２
００からの会議端末の音声データと、レベル調整部２２
６からの音声データをそれぞれ別のバッファに格納し、
一定のタイミングでバッファに格納されたデータを一定
量取り出す。そして、一旦アナログ復号化した後に、ミ
キシング済み音声データに関しては一旦、レベル調整部
２２６にレベル調整を要求し、レベル調整済み音声デー
タをレベル調整部２２６から取得し、各会議端末１０１
Ａ、１０１Ｂ及び１０１Ｃからの音声データと加算す
る。加算された音声データは、音声レベルが高くなって
いるため、音声レベルを下げるように調整してから再度
デジタル符号化する。

【００９９】実施の形態１と同様に、アナログ復号化す
る際には、雑音除去のためのフィルタリング処理、エコ
ーキャンセル処理等が行われてもよい。

【０１００】ＭＣＵ重畳部２２７でミキシングされた音
声データは、ＭＣＵ送信部２０５へ渡され、ＭＣＵ送信
部２０５から会議サーバ装置１００Ａが収容している各
会議端末１０１Ａ、１０１Ｂ及び１０１Ｃに送られる。

【０１０１】なお、話者数検出部２２８における話者数
の検出にあたっては、話者数の時間的な変化が急激にな
り過ぎないように猶予時間を設けてもよい。すなわち、
猶予期間の間に無音から有音に変化し、再度無音に変化
した場合、あるいは逆に有音から無音に変化し、再度有
音に変化した場合には、変化はなかったものと判断し、
話者数を変化させないようにしてもよい。

【０１０２】以上のように構成された会議サーバ装置１
００によれば、話者数検出部２２８において検出した会
議に参加している端末のうち、その時点で話をしている
端末数を、端末数通知部２２２により通信相手の会議サ
ーバ装置１００Ｂ宛てに通知することが可能である。こ
れにより、通信相手の会議サーバ装置１００Ｂにおいて
は、端末数受信部２２４において端末数を受信した端末
数を元に、レベル調整部２２６で受信したミキシング済
み音声をレベル調整することが可能である。

【０１０３】（実施の形態５）図６は、本発明の実施の
形態５に係る会議サーバ装置における話者数検出部２２
８の構成を示すブロック図である。

【０１０４】図６において、話者数検出部２２８は、音
声レベル検出部２２９と比較部２３０と話者数通知部２
３１から構成されている。音声レベル検出部２２９は、
ローカル重畳部２２１内の各会議端末ごとのバッファに
格納された音声データを監視し、その音声レベルを検出
する。検出した音声レベルは、比較部２３０において、
予め定めた閾値と比較される。閾値よりも音声レベルが
大きい場合には、その音声データは有音のデータであ
り、会議端末は話をしている端末であると判断し、話者
数通知部２３１にその旨を伝える。

【０１０５】なお、上記音声レベル検出は、例えば、バ
ッファ内のデータをコピーし、それをアナログ復号化
し、アナログ信号のレベルが閾値よりも大きいかどうか
を比較する比較部により実現可能である。あるいは、ロ
ーカル重畳部２２１はバッファ内のデータをアナログ復
号化するが、そのデータをコピーしてアナログ信号のレ
ベルが閾値よりも大きいかどうかを比較するようにして
もよい。

【０１０６】こうした比較をローカル重畳部２２１内の
全ての会議端末用のバッファに格納された音声データに
関して行い、話者数通知部２３１は、その時点での話者
数をローカル送信部２０２へ通知する。

【０１０７】以上のように構成された話者数検出部２２
８を有する会議サーバ装置１００によれば、話者数検出
部２２８において、会議端末から送られてくる音声パケ
ットを監視し、音声データの有音の符号化がなされた区
間を検出し、さらにその音声レベルが予め定めた閾値よ
りも大きいかどうかを比較することにより、各会議端末
が話をしているかどうかを判断することが可能である。
これにより、その時点で話をしている会議端末数を正確
に検出することが可能である。

【０１０８】なお、話者数検出部２２８における話者数
検出にあたっては、話者数の時間的な変化が急激になり
過ぎないように猶予時間を設けてもよい。すなわち、猶
予期間の間に無音から有音に変化し、再度無音に変化し
た場合、あるいは逆に有音から無音に変化し、再度有音
に変化した場合には、変化はなかったものと判断し、話
者数を変化させないようにしてもよい。これは、話者数
通知部２３１の内部にタイマを設け、猶予時間内の変化
は無視するようにすれば実現可能である。

【０１０９】（実施の形態６）図７は、本発明の実施の
形態６に係る会議サーバ装置における端末数通知の様子
を示したものである。

【０１１０】図７において、会議サーバ装置１００Ａと
会議サーバ装置１００Ｂとは、ネットワーク１０２を介
して接続している。図７では、会議サーバ装置１００の
一部の構成要素のみを示している。

【０１１１】図７において、端末数通知部２２２は、端
末数通知パケット２３２を用いて通信相手の会議サーバ
装置の端末数受信部２２４へ、会議に参加している端末
数あるいは話者数を通知する。また、パケット送信部２
２３は、ミキシング済みの音声パケット２３３を、通信
相手の会議サーバ装置のパケット受信部２２５へ送信す
る。

【０１１２】ここで、端末数通知パケット２３２は音声
パケットとは異なるパケットである。したがって、自由
なフォーマットでパケットを構成してよいが、例えば、
Ｈ．３２３などの呼制御手順のパケットを用いることも
可能である。

【０１１３】この場合、呼制御手順の標準手順の中に、
会議参加端末数を通知する手順や話者数を通知する手順
が組み込まれていれば、その手順を用いて他会議サーバ
装置に通知することが可能となる。したがって、通信相
手の会議サーバ装置としては必ずしも本発明の会議サー
バ装置を用いる必要はない。また、手順が組み込まれて
いない場合でも、ユーザ・ユーザ情報などのプロトコル
拡張部分に端末数を設定して通知することが可能であ
る。

【０１１４】（実施の形態７）図８は、本発明の実施の
形態７に係る会議サーバ装置において通信される音声パ
ケットの構成を示すものである。

【０１１５】図８において、ローカル送信部２０２は、
ローカルミキサ部２０１から音声データ２４０を受け取
ると、ローカル送信部２０２内の端末数通知部２２２に
て、音声データ２４０に端末数情報を付加する。具体的
には、端末数フィールド２４１に端末数を格納すること
で端末数情報を付加する。さらに通信相手の会議サーバ
装置宛てのパケットヘッダ２４２を付加し、音声パケッ
トを構成して他会議サーバ装置宛てに送る。

【０１１６】他会議サーバ装置では、音声パケットはパ
ケット受信部２２５において受信され、パケットヘッダ
２４２は取り除かれる。また、端末数フィールド２４１
の端末数情報は端末数受信部２２４に渡され、音声デー
タ２４０はＭＣＵ重畳部２２７に渡される。

【０１１７】以上のように構成された音声パケットを通
信相手の会議サーバ装置との間で通信する本会議サーバ
装置１００によれば、検出した端末数を音声パケットの
ヘッダ等に設定することが可能であり、検出した端末数
を通信相手の会議サーバ装置に通知することが可能であ
る。

【０１１８】また、別のパケットを用いて端末数を通知
する方式では、音声パケットと端末数通知パケットが非
同期で送られるため、端末数が動的に変わる場合などに
は切り替わりにずれが生じてしまうとの課題がある。し
かし、本実施の形態の会議サーバ装置では音声パケット
自体に端末数を設定しているので、端末数が動的に変わ
る場合でも、実際に音声のミキシング時点と端末数の検
出時点のずれが生ずるのを回避することができる。

【０１１９】（実施の形態８）図９は、本発明の実施の
形態８に係る会議サーバ装置において通信される音声パ
ケットの構成を示すものである。

【０１２０】図９において、ローカル送信部２０２は、
ローカルミキサ部２０１からの音声データ２４０を受け
取ると、通信相手の会議サーバ装置宛てのパケットヘッ
ダ２４２を付加して音声パケットを構成するが、特にパ
ケットがＩＰパケットである場合には、ＩＰパケットヘ
ッダ２４２のＩＰオプションフィールド２４３に、端末
数情報を設定し、他会議サーバ装置宛てに送る。

【０１２１】他会議サーバ装置では、音声パケットはパ
ケット受信部２２５において受信され、パケットヘッダ
２４２のＩＰオプションフィールド２４３から端末数情
報を取得する。端末数情報は、端末数受信部２２４に渡
され、音声データ２４０はＭＣＵ重畳部２２７に渡され
る。

【０１２２】以上のように構成された音声パケットを通
信相手の会議サーバ装置との間で通信する本会議サーバ
装置１００によれば、会議サーバ装置同士を接続するネ
ットワークがＩＰネットワークである場合に、検出した
端末数をＩＰオプションフィールド２４３に設定するこ
とで、検出した端末数を通信相手の会議サーバ装置に通
知することが可能である。

【０１２３】（実施の形態９）図１０は、本発明の実施
の形態９に係る会議サーバ装置における音声通信を説明
するための図である。

【０１２４】会議が開始されると、ローカル受信部２０
０は、各会議端末からの音声パケット２１０を受信す
る。各会議端末から受信する音声パケットのサイズは異
なっていてもよい。ローカル受信部２００は、受信した
音声パケットからヘッダを取り除き、ペイロードに入っ
ている音声データをローカルミキサ部２０１に渡す。同
時に、ＭＣＵミキサ部２０４へも同じデータをコピーし
て渡す。

【０１２５】各会議端末からの送られてくるパケット
は、非同期に受信することになるが、ローカル受信部２
００は各会議端末から音声パケットを受信するたびに音
声データをローカルミキサ部２０１へ送り、ローカル受
信部２００にて各会議端末からのパケットが揃うまで待
つ必要はない。

【０１２６】ローカルミキサ部２０１では、送られてき
た音声データを、実施の形態１と異なり、そのままロー
カル送信部２０２へ渡す。ローカル送信部２０２では受
信した音声データをひとつずつパケット化し、他の会議
サーバ装置へ送る。

【０１２７】他の会議サーバ装置に収容されている会議
端末の音声パケット２１２は、ＭＣＵ受信部２０３にて
受信される。ＭＣＵ受信部２０３は、ヘッダを取り除
き、ペイロードに入っている音声データをＭＣＵミキサ
部２０４に渡す。

【０１２８】ＭＣＵミキサ部２０４は、ローカル受信部
２００から受信する各会議端末の音声データと、ＭＣＵ
受信部２０３から受信する音声データとをそれぞれバッ
ファに格納し、一定のタイミングでバッファに格納され
たデータを一定量取り出す。そして、アナログ復号化し
た後に各データを加算する。加算された音声データは、
音声レベルが高くなっているため、音声レベルを下げて
から再度デジタル符号化する。

【０１２９】ミキシングされた音声データは、ＭＣＵミ
キサ部２０４からＭＣＵ送信部２０５へ渡される。ＭＣ
Ｕ送信部２０５から当該会議サーバ装置が収容している
各会議端末、例えばこの例では会議端末１０１Ａ、１０
１Ｂ及び１０１Ｃの三端末に送られる。

【０１３０】以上のように構成された会議サーバ装置１
００によれば、ローカルミキサ部２０１においては音声
ミキシング処理は行わないため、ローカルミキサ部２０
１において実行されていたミキシング処理が実行され
ず、音質の劣化や遅延の増大を防ぐことが可能である。

【０１３１】（実施の形態１０）図１１は、本発明の実
施の形態１０に係る会議サーバ装置におけるローカルミ
キサ部の構成例を示したものである。

【０１３２】図１１において、ローカル受信部２００か
らの音声データ２５２は、個々の会議端末用に用意され
たバッファ２５０に入れられる。バッファ２５０は、ゆ
らぎ吸収機能を持ったバッファであり、会議サーバ装置
１００Ａと会議端末１０１Ａ等との間の通信遅延のゆら
ぎ時間を吸収する。

【０１３３】音声補正部２５１は、バッファ２５０から
一定のタイミングでデータを取り出す。これにより、他
会議サーバ装置における伝送遅延のゆらぎが補正され
る。なお、データを取り出すタイミングでバッファ内に
データがない場合は、遅延が大きく、タイミングまでに
到着できなかった場合や途中で廃棄されてしまった場合
などが考えられる。これらの場合には、音声データを補
正する。例えば、音声補正部２５１は、無音データを挿
入したり、前の音声と同じ音声を挿入したりする。

【０１３４】以上のように構成されたローカルミキサ部
２０１を有する会議サーバ装置１００によれば、ローカ
ルミキサ部２０１において会議サーバ装置１００が接続
する会議端末１０１Ａ、１０１Ｂ及び１０１Ｃとの間の
パケット伝送に関して、伝送遅延のゆらぎ吸収を行った
後に他会議サーバ装置宛にパケットを送信する。したが
って、他会議サーバ装置における伝送遅延のゆらぎを小
さくすることが可能である。

【０１３５】また、ゆらぎ吸収時間を超えて遅延してき
たパケットや廃棄されてしまったパケットに関して、無
音パケット等を挿入し、他会議サーバ装置に送信する。
したがって、他会議サーバ装置において、ゆらぎ吸収時
間を超えて到着するパケットの発生頻度やパケット廃棄
によるパケット抜けの発生頻度を低下することが可能で
ある。

【０１３６】（実施の形態１１）図１２は、本発明の実
施の形態１１に係る会議サーバ装置における音声通信を
説明するための図である。

【０１３７】実施の形態１１に係る会議サーバ装置は、
本発明の実施の形態９と同様の構成を採るが、ローカル
送信部２０２の機能が異なる点で相違する。ローカル送
信部２０２は、ローカルミキサ部２０１から各会議端末
の音声データを受け取ると、それらを連結し、一つのデ
ータとした上でパケットヘッダを付加し、他会議サーバ
装置へ送信する。

【０１３８】通信相手の会議サーバ装置から送られてき
たパケットは、ＭＣＵ受信部２０３において、各会議端
末の音声データに分解され、ＭＣＵミキサ部２０４に渡
される。

【０１３９】なお、会議サーバ装置への送信パケット２
１１を構成するにあたっては、実施の形態７で示したよ
うに、ヘッダ情報を付加して、連結している音声データ
の個数を示してもよい。同様に実施の形態８で示したよ
うに、ＩＰオプションフィールドに、連結している音声
データの個数を示してもよい。

【０１４０】以上のように構成された会議サーバ装置１
００によれば、他会議サーバ装置に送られる音声パケッ
トは一つにまとめられるため、ＭＣＵ受信部２０３やＭ
ＣＵミキサ部２０４においてミキシング処理のために通
信相手の会議サーバ装置から送られてくる複数のパケッ
トが揃うのを待つ必要がなくなり、処理が容易になる。

【０１４１】実際、会議サーバ装置間を接続するネット
ワークの遅延ゆらぎが大きい場合には、会議サーバ装置
への送信パケット２１１を会議端末ごとにパケット化
し、同時に送ったとしても、それらがＭＣＵ受信部２０
３に到着する時刻が大きく異なってしまう。本実施の形
態に係る会議サーバ装置１００によれば、送信パケット
２１１を一つのパケットにまとめることにより、必ず全
ての会議端末の音声データを同時に取得できる。また、
パケットをまとめる際には、パケットヘッダ部分を削除
できるため、会議サーバ装置間の通信に必要となる帯域
が小さくすることが可能である。

【０１４２】（実施の形態１２）図１３は、本発明の実
施の形態１２に係る会議サーバ装置における音声通信を
説明するための図である。図１３において、会議端末か
ら送られてくる受信パケット２１０は、ある会議端末に
対しては、Ａ１、Ａ２、Ａ３と送られてくるものとす
る。

【０１４３】ローカルミキサ部２０１は、実施の形態９
と同様に、各会議端末の音声をミキシングせずに、各会
議端末ごとに受信した音声データをローカル送信部２０
２に送るが、そのときにパケットの一部を廃棄し、残り
のみをローカル送信部２０２へ渡す。例えば、パケット
Ａ１、Ａ３はローカル送信部２０２へ渡すが、パケット
Ａ２はローカル送信部２０２へは渡さず廃棄する。廃棄
の単位としてはパケット単位でもよいし、パケットの一
部のデータのみを廃棄してもよい。

【０１４４】ローカル送信部２０２は、受信した音声デ
ータをパケット化し、他の会議サーバ装置へ送る。

【０１４５】他の会議サーバ装置から送られてきた音声
パケットは、ＭＣＵ受信部２０３が受信する。ＭＣＵ受
信部２０３は、ヘッダを取り除き、受信した音声データ
の音声を補完した後、音声データをＭＣＵミキサ部２０
４に渡す。

【０１４６】ＭＣＵミキサ部２０４では、実施の形態９
と同様に、音声データをミキシングし、ＭＣＵ送信部２
０５へ渡す。ＭＣＵ送信部２０５では、ＭＣＵミキサ部
２０４から渡された音声データをパケット化し、各会議
端末宛てに送信する。

【０１４７】一般に、各会議端末から受信するパケット
２１０のペイロードには、ペイロード内に含まれる音声
そのもののタイムスタンプやシーケンス番号が含まれて
いる。ＭＣＵ受信部２０３においては、それらを元にＭ
ＣＵミキサ部２０１でどのデータが廃棄されたかを検出
可能である。

【０１４８】例えば、Ｈ．３２３などで使用される音声
パケットは、ＲＴＰ／ＵＤＰ／ＩＰパケット化されてお
り、ＩＰパケットのペイロードに、ＲＴＰ／ＵＤＰパケ
ットが入っている。ＲＴＰパケットにはＲＴＰヘッダと
ＲＴＰペイロードがあり、ＲＴＰヘッダはＲＴＰペイロ
ードに入っている音声データのタイムスタンプが付与さ
れている。

【０１４９】なお、ＭＣＵ受信部２０３にて音声データ
の補完を容易に行うために、ローカル送信部２０２にて
パケットを構成する際に、パケットにローカルミキサ部
２０１におけるパケット廃棄を考慮したシーケンス番号
を付加してもよい。

【０１５０】以上のように構成された会議サーバ装置１
００によれば、ローカル受信部２００において受信した
音声データの一部のみを他会議サーバ装置に送ることに
なり、会議サーバ装置間の通信に必要となる帯域が小さ
くすることが可能である。

【０１５１】（実施の形態１３）図１４は、本発明の実
施の形態１３に係る分散会議システムの構成例を示すも
のである。図１４において、会議サーバ装置１００Ａ〜
１００Ｃは、本発明の第１から第１２のいずれかの態様
に係る会議サーバ装置１００である。

【０１５２】複数の会議サーバ装置１００Ａ、１００Ｂ
及び１００Ｃがネットワーク１０２を介して接続されて
いる。会議サーバ装置１００Ａは、会議端末１０１Ａ、
１０１Ｂ、１０１Ｃからの音声をミキシングし、あるい
は、そのまま他の会議サーバ装置１００Ｂ及び１００Ｃ
の両方に送る。

【０１５３】また、会議サーバ装置１００Ａは、会議サ
ーバ装置１００Ｂ、１００Ｃからの音声パケットを受け
取り、それらと会議端末１０１Ａ、１０１Ｂ、１０１Ｃ
との音声をミキシングし、各会議端末１０１Ａ、１０１
Ｂ、１０１Ｃに送る。このとき、送られる音声は、会議
端末１０１Ａ、１０１Ｂ、１０１Ｃ、１０１Ｄ、１０１
Ｅ、１０１Ｆ、１０１Ｇにおける全ての端末の音声がミ
キシングされたものになる。

【０１５４】本発明は、当業者に明らかなように、上記
実施の形態に記載した技術に従ってプログラムされた一
般的な市販のデジタルコンピュータおよびマイクロプロ
セッサを使って実施することができる。また、当業者に
明らかなように、本発明は、上記実施の形態に記載した
技術に基づいて当業者により作成されるコンピュータプ
ログラムを包含する。

【０１５５】また、本発明を実施するコンピュータをプ
ログラムするために使用できる命令を含む記憶媒体であ
るコンピュータプログラム製品が本発明の範囲に含まれ
る。この記憶媒体は、フロッピー（Ｒ）ディスク、光デ
ィスク、ＣＤＲＯＭ及び磁気ディスク等のディスク、Ｒ
ＯＭ、ＲＡＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、磁気光カー
ド、メモリカードまたはＤＶＤ等であるが、特にこれら
に限定されるものではない。

【０１５６】

【発明の効果】以上に説明したように、本発明によれ
ば、ＭＣＵ受信部において受信した他会議サーバ装置に
おいてミキシング済みの音声データに対して、他会議サ
ーバ装置において会議に参加している会議端末数に応じ
て音声レベルを調整することが可能である。この結果、
当該会議サーバ装置に直接接続する会議端末の音声レベ
ルと、他会議サーバ装置に接続する会議端末の音声レベ
ルを同等にすることができる。

【０１５７】また、他会議サーバ装置としては、音声レ
ベル調整はＭＣＵミキサ部において行うため、他会議サ
ーバ装置としては必ずしも本発明の会議サーバ装置であ
る必要はない。したがって、既存の分散会議システムに
本発明の会議サーバ装置を導入することができる。

【０１５８】また、端末数検出部において検出した会議
に参加している端末数を、端末数通知部により通信相手
の会議サーバ装置宛てに通知することが可能である。こ
の結果、通信相手の会議サーバ装置においては、端末数
受信部において受信した端末数を元に、レベル調整部に
おいて、受信したミキシング済み音声をレベル調整する
ことができる。

【０１５９】また、ＭＣＵ受信部において受信した他会
議サーバ装置においてミキシング済みの音声データに対
して、他会議サーバ装置において会議に参加している会
議端末のうち、その時点で話をしている会議端末数に応
じて音声レベルを調整することが可能である。この結
果、当該会議サーバ装置に直接接続する会議端末の音声
レベルと、他会議サーバ装置に接続する会議端末の音声
レベルを同等にすることができる。

【０１６０】また、話者数検出部において検出した会議
に参加している端末のうち、その時点で話をしている端
末数を、端末数通知部により通信相手の会議サーバ装置
宛てに通知することが可能である。この結果、通信相手
の会議サーバ装置においては、端末数受信部において端
末数を受信した端末数を元に、レベル調整部において、
受信したミキシング済み音声をレベル調整することがで
きる。

【０１６１】また、話者数検出部において、会議端末か
ら送られてくる音声パケットを監視し、音声データの有
音の符号化がなされた区間を検出し、さらにその音声レ
ベルが予め定めた閾値よりも大かどうかを比較すること
により、各会議端末が話しをしているかどうかを判断す
ることが可能である。この結果、その時点で話をしてい
る会議端末数を検出することができる。

【０１６２】また、検出した端末数を音声パケットとは
別のパケットを用いて、例えば呼制御手順を用いて、通
信相手の会議サーバ装置に通知することができる。

【０１６３】また、検出した端末数を音声パケットのヘ
ッダ等に設定することが可能であり、検出した端末数を
通信相手の会議サーバ装置に通知することができる。

【０１６４】また、音声パケット自体に端末数を設定し
ているので、端末数が動的に変わる場合でも、実際に音
声のミキシング時点と端末数の検出時点のずれが生じる
のを回避することができる。

【０１６５】また、会議サーバ装置同士を接続するネッ
トワークがＩＰネットワークである場合に、検出した端
末数をＩＰオプションフィールドに設定することで、検
出した端末数を通信相手の会議サーバ装置に通知するこ
とができる。

【０１６６】また、ローカルミキサ部においては音声ミ
キシングは行わないため、音質の劣化や遅延の増大を防
ぐことができる。

【０１６７】また、ローカルミキサ部において会議サー
バ装置が接続する会議端末との間のパケット伝送に関し
て、伝送遅延のゆらぎ吸収を行ったのちに他会議サーバ
装置宛にパケットを送信するので、他会議サーバ装置に
おける伝送遅延のゆらぎを小さくすることができる。

【０１６８】また、ゆらぎ吸収時間を超えて遅延してき
たパケットや廃棄されてしまったパケットに関して、無
音パケット等を挿入し、他会議サーバ装置に送信するの
で、他会議サーバ装置においてゆらぎ吸収時間を超えて
到着するパケットの発生頻度やパケット廃棄によるパケ
ット抜けの発生頻度を低下することができる。

【０１６９】また、他会議サーバ装置に送られる音声パ
ケットは一つにまとめられるため、ＭＣＵ受信部やＭＣ
Ｕミキサ部においてミキシング処理のために通信相手の
会議サーバ装置から送られてくる複数のパケットが揃う
のを待つ必要がなくなり、処理が容易になる。また、パ
ケットをまとめる際には、パケットヘッダ部分を削除で
きるため、会議サーバ装置間の通信に必要となる帯域を
小さくすることができる。

【０１７０】また、ローカル受信部において受信した音
声データの一部のみを他会議サーバ装置に送ることにな
り、会議サーバ装置間の通信に必要となる帯域を小さく
することができる。

【図面の簡単な説明】

【図１】本発明の実施の形態１に係る会議サーバ装置の
構成を示すブロック図

【図２】実施の形態１に係る会議サーバ装置における音
声通信の説明図

【図３】実施の形態１に係る会議サーバ装置のローカル
ミキサ部におけるミキシング処理の前後の音声データの
音声レベルの説明図

【図４】本発明の実施の形態２に係る会議サーバ装置の
構成を示すブロック図

【図５】本発明の実施の形態４に係る会議サーバ装置の
構成を示すブロック図

【図６】本発明の実施の形態５に係る会議サーバ装置に
おける話者数検出部の構成を示すブロック図

【図７】本発明の実施の形態６に係る会議サーバ装置に
おける端末数通知の説明図

【図８】本発明の実施の形態７に係る会議サーバ装置に
おいて通信される音声パケットの構成図

【図９】本発明の実施の形態８に係る会議サーバ装置に
おいて通信される音声パケットの構成図

【図１０】本発明の実施の形態９に係る会議サーバ装置
における音声通信の説明図

【図１１】本発明の実施の形態１０に係る会議サーバ装
置におけるローカルミキサ部２０１の構成を示すブロッ
ク図

【図１２】本発明の実施の形態１１に係る会議サーバ装
置における音声通信の説明図

【図１３】本発明の実施の形態１２に係る会議サーバ装
置における音声通信の説明図

【図１４】本発明の実施の形態１３に係る分散会議シス
テムのシステム構成図

【図１５】従来の分散会議システムのシステム構成図

【図１６】従来の分散会議システムにおける音声通信の
説明図

【符号の説明】

１００会議サーバ装置１０１会議端末１０２ネットワーク２００ローカル受信部２０１ローカルミキサ部２０２ローカル送信部２０３ＭＣＵ受信部２０４ＭＣＵミキサ部２０５ＭＣＵ送信部２１０各端末からの受信パケット２１１会議サーバ装置への送信パケット２１２会議サーバ装置からの受信パケット２１３ローカルに収容している各端末への送信パケッ
ト２２０端末数検出部２２１ローカル重畳部２２２端末数通知部２２３パケット送信部２２４端末数受信部２２５パケット受信部２２６レベル調整部２２７ＭＣＵ重畳部２２８話者数検出部２２９音声レベル検出部２３０比較部２３１話者数通知部２３２端末数通知パケット２３３音声パケット２４０音声データ２４１端末数フィールド２４２パケットヘッダ２４３ＩＰオプションフィールド２５０バッファ２５１音声補正部２５２ローカル受信部からの音声データ

フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｈ０４Ｎ 7/15 Ｈ０４Ｎ 7/15 Ｆターム(参考） 5C064 AA02 AC01 AC06 AC09 AC11 AC16 AD14 5K015 AA02 AB02 JA01 JA05 JA10 JA11 JA15 JA17 5K024 AA52 CC05 5K030 GA08 HA05 HB01 HC02 KA19 LD08 LE06 5K101 KK07 LL02 SS08

Claims

【特許請求の範囲】

【請求項１】ネットワークを介して他の会議サーバ装
置に接続され、前記他の会議サーバ装置との間で音声パ
ケットを送受信する会議サーバ装置であって、複数の会
議端末から音声パケットを受信する第１の受信手段と、
前記複数の会議端末からの音声パケット内の音声データ
をミキシングする第１のミキサ手段と、前記第１のミキ
サ手段によるミキシング後の音声データをパケット化し
前記他の会議サーバ装置に送信する第１の送信手段と、
前記他の会議サーバ装置からミキシング後の音声データ
を含む音声パケットを受信する第２の受信手段と、前記
他の会議サーバ装置から受信した音声パケット内のミキ
シング後の音声データを、前記他の会議サーバ装置に接
続された会議端末数に応じて音声レベル調整を行った後
に前記複数の会議端末からの音声データとミキシングす
る第２のミキサ手段と、前記第２のミキサ手段によるミ
キシング後の音声データをパケット化し前記複数の会議
端末に送信する第２の送信手段と、を具備することを特
徴とする会議サーバ装置。
【請求項２】前記第１のミキサ手段は当該会議サーバ
装置に接続された会議端末数を検出する端末数検出部を
備え、前記第１の送信手段は前記端末数検出部が検出し
た会議端末数を他の会議サーバ装置に通知する端末数通
知部を備える一方、前記第２の受信手段は他の会議サー
バ装置から通知される会議端末数を受信する端末数受信
部を備え、前記第２のミキサ手段は前記端末数受信部が
受信した会議端末数に基づいて前記ミキシング後の音声
データの音声レベル調整を行うレベル調整部を備えるこ
とを特徴とする請求項１記載の会議サーバ装置。
【請求項３】ネットワークを介して他の会議サーバ装
置に接続され、前記他の会議サーバ装置との間で音声パ
ケットを送受信する会議サーバ装置であって、複数の会
議端末から音声パケットを受信する第１の受信手段と、
前記複数の会議端末からの音声パケット内の音声データ
をミキシングする第１のミキサ手段と、前記第１のミキ
サ手段によるミキシング後の音声データをパケット化し
前記他の会議サーバ装置に送信する第１の送信手段と、
前記他の会議サーバ装置からミキシング後の音声データ
を含む音声パケットを受信する第２の受信手段と、前記
他の会議サーバ装置から受信した音声パケット内のミキ
シング後の音声データを、前記他の会議サーバ装置に接
続され且つその時点で話をしている会議端末数に応じて
音声レベル調整を行った後に前記複数の会議端末からの
音声データとミキシングする第２のミキサ手段と、前記
第２のミキサ手段によるミキシング後の音声データをパ
ケット化し前記複数の会議端末に送信する第２の送信手
段と、を具備することを特徴とする会議サーバ装置。
【請求項４】前記第１のミキサ手段は当該会議サーバ
装置に接続された会議端末のうち、その時点で音声デー
タに有音データを含む会議端末数を検出する話者数検出
部を備え、前記第１の送信手段は前記話者数検出部が検
出した会議端末数を他の会議サーバ装置に通知する端末
数通知部を備える一方、前記第２の受信手段は他の会議
サーバ装置から通知される会議端末数を受信する端末数
受信部を備え、前記第２のミキサ手段は前記端末数受信
部が受信した会議端末数に基づいて前記ミキシング後の
音声データの音声レベル調整を行うレベル調整部を備え
ることを特徴とする請求項３記載の会議サーバ装置。
【請求項５】前記話者数検出部は各会議端末からの音
声パケットの音声レベルを検出する音声レベル検出部
と、前記音声レベルを予め定めた閾値と比較する比較部
と、前記音声レベルが前記閾値よりも大きい会議端末数
を前記第１の送信手段に通知する話者数通知部と、を具
備することを特徴とする請求項４記載の会議サーバ装
置。
【請求項６】前記端末数通知部は前記会議端末数を、
前記ミキシング後の音声データを含む音声パケットとは
別のパケットにて通知することを特徴とする請求項２、
請求項４又は請求項５のいずれかに記載の会議サーバ装
置。
【請求項７】前記端末数通知部は前記会議端末数を前
記ミキシング後の音声データを含む音声パケットに付加
情報として追加することで前記会議端末数を通知するこ
とを特徴とする請求項２、請求項４又は請求項５のいず
れかに記載の会議サーバ装置。
【請求項８】前記端末数通知部は前記会議端末数を音
声パケットのＩＰオプションフィールドに設定すること
で前記会議端末数を通知することを特徴とする請求項７
に記載の会議サーバ装置。
【請求項９】前記第１のミキサ手段は各会議端末から
受信した音声パケット内の音声データのミキシングをせ
ず、前記第１の送信手段は前記第１のミキサ手段により
ミキシングされていない音声データをパケット化し前記
他の会議サーバ装置に送信することを特徴とする請求項
１から請求項８のいずれかに記載の会議サーバ装置。
【請求項１０】前記第１のミキサ手段は各会議端末か
ら受信する音声パケットの通信遅延のゆらぎ時間を吸収
することを特徴とする請求項９記載の会議サーバ装置。
【請求項１１】前記第１のミキサ手段は各会議端末か
ら受信する音声パケットのうち、遅延したパケット又は
廃棄されたパケットの音声を補償することを特徴とする
請求項９に記載の会議サーバ装置。
【請求項１２】前記第１のミキサ手段は各会議端末か
ら受信した音声パケットのミキシングをせず、前記第１
の送信手段は前記複数の会議端末の音声パケット内の音
声データを一つの音声データに連結した上でパケット化
し前記他の会議サーバ装置に送信する一方、前記第２の
受信手段は前記他の会議サーバ装置から受信した音声パ
ケット内の連結した音声データを分解することを特徴と
する請求項９から請求項１１のいずれかに記載の会議サ
ーバ装置。
【請求項１３】前記第１のミキサ手段は各会議端末か
ら受信した音声パケットの一部を廃棄し、前記第１の送
信手段は前記音声パケットの残りを前記他の会議サーバ
装置に送信する一方、前記第２の受信手段は前記他の会
議サーバ装置から受信した音声パケットのうち前記他の
会議サーバ装置で廃棄された部分を補間することを特徴
とする請求項９から請求項１２のいずれかに記載の会議
サーバ装置。
【請求項１４】少なくとも二台の請求項１から請求項
１３のいずれかに記載の会議サーバ装置と、前記会議サ
ーバ装置間を接続するネットワークと、ユーザが操作す
る会議端末とから構成されることを特徴とする会議シス
テム。
【請求項１５】ネットワークを介して他の会議サーバ
装置に接続され、前記他の会議サーバ装置との間で音声
パケットを送受信する会議サーバ装置における音声ミキ
シング方法であって、複数の会議端末から音声パケット
を受信し、前記複数の会議端末からの音声パケット内の
音声データをミキシングし、このミキシング後の音声デ
ータをパケット化し前記他の会議サーバ装置に送信する
一方、前記他の会議サーバ装置からミキシング後の音声
データを含む音声パケットを受信し、前記他の会議サー
バ装置から受信した音声パケット内のミキシング後の音
声データを、前記他の会議サーバ装置に接続された会議
端末数に応じて音声レベル調整を行った後に前記複数の
会議端末からの音声データとミキシングし、このミキシ
ング後の音声データをパケット化し前記複数の会議端末
に送信することを特徴とする音声ミキシング方法。
【請求項１６】ネットワークを介して他の会議サーバ
装置に接続され、前記他の会議サーバ装置との間で音声
パケットを送受信する会議サーバ装置における音声ミキ
シング方法であって、複数の会議端末から音声パケット
を受信し、前記複数の会議端末からの音声パケット内の
音声データをミキシングし、このミキシング後の音声デ
ータをパケット化し前記他の会議サーバ装置に送信する
一方、前記他の会議サーバ装置からミキシング後の音声
データを含む音声パケットを受信し、前記他の会議サー
バ装置から受信した音声パケット内のミキシング後の音
声データを、前記他の会議サーバ装置に接続され且つそ
の時点で話をしている会議端末数に応じて音声レベル調
整を行った後に前記複数の会議端末からの音声データと
ミキシングし、このミキシング後の音声データをパケッ
ト化し前記複数の会議端末に送信することを特徴とする
音声ミキシング方法。
【請求項１７】コンピュータを、ネットワークを介し
て他の会議サーバ装置に接続され、前記他の会議サーバ
装置との間で音声パケットを送受信する会議サーバ装置
として機能させるためのプログラムであって、前記コン
ピュータを、複数の会議端末から音声パケットを受信す
る第１の受信手段と、前記複数の会議端末からの音声パ
ケット内の音声データをミキシングする第１のミキサ手
段と、前記第１のミキサ手段によるミキシング後の音声
データをパケット化し前記他の会議サーバ装置に送信す
る第１の送信手段と、前記他の会議サーバ装置からミキ
シング後の音声データを含む音声パケットを受信する第
２の受信手段と、前記他の会議サーバ装置から受信した
音声パケット内のミキシング後の音声データを、前記他
の会議サーバ装置に接続された会議端末数に応じて音声
レベル調整を行った後に前記複数の会議端末からの音声
データとミキシングする第２のミキサ手段と、前記第２
のミキサ手段によるミキシング後の音声データをパケッ
ト化し前記複数の会議端末に送信する第２の送信手段と
して機能させるためのプログラム。
【請求項１８】コンピュータを、ネットワークを介し
て他の会議サーバ装置に接続され、前記他の会議サーバ
装置との間で音声パケットを送受信する会議サーバ装置
として機能させるためのプログラムであって、前記コン
ピュータを、複数の会議端末から音声パケットを受信す
る第１の受信手段と、前記複数の会議端末からの音声パ
ケット内の音声データをミキシングする第１のミキサ手
段と、前記第１のミキサ手段によるミキシング後の音声
データをパケット化し前記他の会議サーバ装置に送信す
る第１の送信手段と、前記他の会議サーバ装置からミキ
シング後の音声データを含む音声パケットを受信する第
２の受信手段と、前記他の会議サーバ装置から受信した
音声パケット内のミキシング後の音声データを、前記他
の会議サーバ装置に接続され且つその時点で話をしてい
る会議端末数に応じて音声レベル調整を行った後に前記
複数の会議端末からの音声データとミキシングする第２
のミキサ手段と、前記第２のミキサ手段によるミキシン
グ後の音声データをパケット化し前記複数の会議端末に
送信する第２の送信手段として機能させるためのプログ
ラム。