JP3573850B2 - ビデオ会議システム - Google Patents
ビデオ会議システム Download PDFInfo
- Publication number
- JP3573850B2 JP3573850B2 JP29355195A JP29355195A JP3573850B2 JP 3573850 B2 JP3573850 B2 JP 3573850B2 JP 29355195 A JP29355195 A JP 29355195A JP 29355195 A JP29355195 A JP 29355195A JP 3573850 B2 JP3573850 B2 JP 3573850B2
- Authority
- JP
- Japan
- Prior art keywords
- participant
- image
- display priority
- images
- lan
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Telephonic Communication Services (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、広域ネットワークに複数の狭域ネットワークが接続されてなるビデオ会議システムに関し、具体的にはマルチポイントコントロールユニット（以下、「ＭＣＵ」と言う）による参加者画像の表示技術に関する。
【０００２】
【技術背景】
ビデオ会議システム（以下、単に「会議システム」と言う）は、ＡＴＭ（非同期転送モード）回線等の１つのＷＡＮ（広域ネットワーク）に、イーサネット等の複数のＬＡＮ（狭域ネットワーク）が接続されて構成されることも多い。
従来、この種のシステムには、ＭＣＵが何れか１つのＬＡＮに設けられ、あるいは各ＬＡＮに設けられる。
ここで、ＭＣＵは、各会議参加者のそれぞれのビデオ会議端末装置（以下、「端末装置」と言う）から、参加者画像と参加者音声との多重化信号を受信し、これらの多重化信号をビデオ信号と音声信号とに分別し、これら各信号から、各端末装置の画像出力装置に表示されるべき画像（以下、「会議画像」と言う）と、各端末装置の音声出力装置に出力されるべき音声（以下、「会議音声」と言う）を作成する。
たとえば、会議画像は、発言者などをもとに選定された１つの参加者画像であることもある。また、表示領域が適当な数（たとえば４つ）の参加者画像に分割表示された合成画像であり、発言している参加者を強調表示することもある。なお、会議音声は、全ての会議参加者の音声の合成音声であることもあるし、１つの音声または複数の特定参加者の音声の合成音声であることもある。
ＭＣＵは、上記のようにして作成した会議画像と会議音声を再び多重化し、この多重化信号を各参加者（場合によっては、傍観者）の端末装置にマルチキャスト送信する。
【０００３】
ところで、ＷＡＮを介して複数のＬＡＮ同士が接続されてなるビデオ会議システムでは、ＬＡＮ単位で表示画像を変更したい場合も生じる。例えば、本社ＬＡＮと、第１営業所ＬＡＮと、第２営業所ＬＡＮとがＷＡＮを介して接続されている場合に、本社ＬＡＮの各端末装置の参加者は、第１営業所ＬＡＮに接続されている端末装置の参加者画像を、ある優先度で画像表示装置に表示させたい場合が生じる。また、例えば、各営業所ＬＡＮの各端末装置の参加者は、自分が属するＬＡＮの各端末装置の参加者画像を、ある優先度で画像表示装置に表示させたい場合も生じる。
しかし、前述した従来の何れのビデオ会議システムであっても、基本的には全ての端末装置について会議画像は同一であるため、上記のようにあるＬＡＮに属する端末装置からの参加者画像をある優先度で表示させることはできないと言う問題がある。
【０００４】
【発明の目的】
本発明の目的は、端末装置の画像表示装置に、各ＬＡＮごとに定められた、沈黙時間に基づく優先度で会議画像を表示することができる会議システムを提供することである。
【０００５】
【発明の概要】
本発明のビデオ会議システムは、ＷＡＮに複数のＬＡＮが接続され、前記各ＬＡＮにそれぞれＭＣＵ（これらのＭＣＵを、以下「ＬＭＣＵ」と言う）を介して前記ＷＡＮに接続された少なくとも１つのビデオ会議端末装置が備えられ、（１）前記ＬＭＣＵが、前記各端末装置の参加者の沈黙継続時間を監視すると共に、当該沈黙継続時間に、当該端末装置が属するＬＡＮに応じて定められた重み付けを行い、当該各参加者画像の表示優先度を決定する表示優先度決定手段、および、
（２）前記各参加者画像の中から、表示優先度が高い順に所定個数の参加者画像を選択し、これらの選択画像を当該ＬＡＮ内の各端末装置にマルチキャストする手段を備えたことを特徴とする。
【０００６】
表示優先度決定手段は、（１）当該ＬＭＣＵが属するＬＡＮ内の前記端末装置の各参加者の沈黙継続時間を監視すると共に、（２）当該沈黙継続時間に、当該端末装置が属するＬＡＮに応じて定められた重み付けを行い、当該各参加者画像の表示優先度を決定する。表示優先度決定手段を２つの構成要素に分けて、（１）と（２）の処理を別個に行わすこともできる。
選択・出力手段は、前記各参加者画像の中から、表示優先度が高い順に所定個数の参加者画像を選択し、これらの選択画像を当該ＬＡＮ内の端末会議装置にマルチキャストする。
【０００７】
上記の重み付けには、種々の態様がある。たとえば、他のＬＭＣＵからの沈黙継続時間に一定の時間を加算、または減算することができる。あるいは、他のＬＭＣＵからの沈黙継続時間に所定係数を乗算することもできる。なお、沈黙継続時間が短いほど優先度が高い。
【０００８】
本発明の会議システムでは、上記の重み付け（方法や程度）を適当に設定することにより、各ＬＡＮの事情に合わせた参加者画像の選択を行うことができる。しかも、従来のように、単一のＭＣＵで２種以上の合成画像を作るとその分ＷＡＮ通信が増えるが、本発明の会議システムでは、この操作が局所化されているので、データ通信の量が増えることはない。
【０００９】
なお、本発明の会議システムでは、特定の参加者に、最も高い表示優先度を付与する手段を設けることもできる。これにより、議長等、特定の参加者の表示優先度を他の参加者よりも高く設定することができる。
【００１０】
【実施例】
図１は本発明の会議システムが適用されるネットワークの例を示す概略図である。図１において、ＷＡＮ１に、複数のＬＡＮ２１，２２，２３が、それぞれルータ３１，３２，３３を介して接続されている。そして、ＬＡＮ２１には端末装置２１１〜２１５が、ＬＡＮ２２には端末装置２２１〜２２３が、ＬＡＮ２３には端末装置２３１〜２３６がそれぞれ接続されている。なお、ＬＡＮ２１には、会議に傍観者としてしか参加できない参加者（すなわち、参加者画像と参加者音声を受信するのみの参加者）の端末装置２１６，２１７も接続されている。
【００１１】
ルータ３１〜３３は、それぞれＬＭＣＵ４１〜４３を有しており、各ＬＭＣＵ４１〜４３は、相互にＷＡＮ１を介して通信することができる。
【００１２】
図２，図３はＬＭＣＵ４１の構成をより詳細に示す図であり、図２はＬＡＮ入力処理部を、図３はＷＡＮ入力処理部をそれぞれ示している。
図２において、端末装置２１１〜２１５からの参加者画像と参加者音声との多重化信号Ｍ１１〜Ｍ１５はＬＡＮ入力部５１により受信される。
図２に示すように、ＬＡＮ入力部５１は、これらの多重化信号Ｍ１１〜Ｍ１５を分配器５２を介して、それぞれ分類器５３１〜５３５に分配出力する。
分類器５３１〜５３５は、多重化信号Ｍ１１〜Ｍ１５を参加者画像Ｖ１１〜Ｖ１５と参加者音声Ａ１１〜Ａ１５とにそれぞれ分け、Ｖ１１〜Ｖ１５を第１の参加者画像選択手段５４に、Ａ１１〜Ａ１５を第１の表示優先度決定手段５５に出力する。
【００１３】
第１の表示優先度決定手段５５は、参加者画像Ｖ１１〜Ｖ１５についての表示優先度を、参加者音声Ａ１１〜Ａ１５に基づき決定し、優先度が高い４つの参加者画像についての表示優先度Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１５を選択する。この表示優先度は、後述するように、端末装置２１１〜２１５の各参加者の沈黙継続時間により定めることができる。
ここでは、参加者画像の表示優先度はＶ１１，Ｖ１２，Ｖ１３，Ｖ１５が、Ｖ１４よりも高いものとする。
第１の表示優先度決定手段５５は、表示優先度Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１５を、第１の参加者画像選択手段５４、多重化手段５８、優先度バッファ６２に出力すると共に、参加者音声Ａ１１〜Ａ１５を第１の音声合成手段５６に出力する。
【００１４】
第１の参加者画像選択手段５４は、表示優先度Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１５に基づき、４つの参加者画像Ｖ１１，Ｖ１２，Ｖ１３，Ｖ１５を選択し、これらを第１の画像合成手段５７に出力する。第１の画像合成手段５７はこれらの参加者画像を、表示領域が４分割された１画像ＶＣ１に合成し、この合成画像ＶＣ１を第１の多重化手段５８および画像バッファ６３に出力する。
第１の音声合成手段５６は、参加者音声Ａ１１〜Ａ１５を１音声ＡＣ１に合成し、この合成音声ＡＣ１を音声バッファ６１および第１の多重化手段５８に出力する。
多重化手段５８は、合成画像ＶＣ１、優先度情報Ｐ１（表示優先度Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１５からなる）、および合成音声ＡＣ１を多重化し、この多重化信号Ｍ１を、ＷＡＮ出力部５９に出力する。ＷＡＮ出力部５９は多重化信号Ｍ１を、ＷＡＮ１を介してＬＡＮ２２，２３のＬＭＣＵ４２，４３にマルチキャスト送信する。
【００１５】
ＬＡＮ２１，２２のＬＭＣＵ４２，４３は、上記と同様のＬＡＮ入力処理部を備えており、多重化信号Ｍ２，Ｍ３をＷＡＮ１上に出力している。ここでは、Ｍ２は、端末装置２２１，２２２，２２３の参加者画像Ｖ２１，Ｖ２２，Ｖ２３の合成画像ＶＣ２、これら参加者画像の優先度情報Ｐ２（表示優先度Ｐ２１，Ｐ２２，Ｐ２３からなる）、および端末装置２２１〜２２３の合成音声ＡＣ２の多重化信号であり、Ｍ３は、端末装置２２２，２２３，２２４，２２５の参加者画像Ｖ３２，Ｖ３３，Ｖ３４，Ｖ３５の合成画像ＶＣ３、これら参加者画像の優先度情報Ｐ３（表示優先度Ｐ３２，Ｐ３３，Ｐ３４，Ｐ３５からなる）、および端末装置２３１〜２３６の合成音声ＡＣ３の多重化信号であるものとする。
【００１６】
図３に示すように、ＬＭＣＵ４２，４３からの多重化信号Ｍ２，Ｍ３は、ＷＡＮ入力部７１により受信される。
ＷＡＮ入力部７１はＭ２，Ｍ３を分配器７２に出力し、分配器７２はこれらの多重化信号Ｍ２，Ｍ３を分類器７３１，７３２にそれぞれ出力する。
分類器７３１は、合成画像ＶＣ２を画像分類器７４１に、優先度情報Ｐ２を優先度分類器７４２に、合成音声ＡＣ２を音声合成手段７５にそれぞれ出力する。また、分類器７３２は、合成画像ＶＣ３を画像分類器７４３に、優先度情報Ｐ３を優先度分類器７４４に、合成音声ＡＣ３を音声合成手段７５にそれぞれ出力する。
【００１７】
画像分類器７４１は、合成画像ＶＣ２をＶ２１，Ｖ２２，Ｖ２３に分けて、これらを第２の参加者画像選択手段７６に出力する。また、同様に、分類器７４３は、合成画像ＶＣ３をＶ３２，Ｖ３３，Ｖ３４，Ｖ３５に分けて、これらを第２の参加者画像選択手段７６に出力する。
優先度分類器７４２は、優先度情報Ｐ２を表示優先度Ｐ２１，Ｐ２２，Ｐ２３に分けて、これらを第２の表示優先度決定手段７７に出力する。また、同様に、優先度分類器７４４は、優先度情報Ｐ３を表示優先度Ｐ３２，Ｐ３３，Ｐ３４，Ｐ３５に分けて、これらを第２の表示優先度決定手段７７に出力する。
【００１８】
第２の表示優先度決定手段７７は、表示優先度Ｐ２１，Ｐ２２，Ｐ２３に対しＬＡＮ２１について予め定められた重み付けを施すと共に、表示優先度Ｐ３２，Ｐ３３，Ｐ３４，Ｐ３５に対しＬＡＮ２３について予め定められた重み付けを施す。
ここでは、第２の表示優先度決定手段７７は、表示優先度Ｐ２１，Ｐ２２，Ｐ２３をある度数だけ一律に低くし、新たな重み付き表示優先度Ｐ′２１，Ｐ′２２，Ｐ′２３を生成し、表示優先度Ｐ３２，Ｐ３３，Ｐ３４，Ｐ３５をある度数だけ一律に低くし、新たに重み付表示優先度Ｐ′３２，Ｐ′３３，Ｐ′３４，Ｐ′３５を生成している。第２の表示優先度決定手段７７は、図２で述べた優先度バッファ６２から、表示優先度Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１５を入力している。上記の各重み付き表示優先度を入力するとともに、これらの表示優先度の中から表示優先度が高い４つ（ここでは、Ｐ１２，Ｐ１５，Ｐ′２３，Ｐ′３２）を特定し、選択信号Ｓ２を第２の参加者画像選択手段７６に出力する。
【００１９】
参加者画像選択手段７６は、参加者画像Ｖ２１〜Ｖ２３，Ｖ３１〜Ｖ３６を入力すると共に、図２で述べた画像バッファ６３から参加者画像ＶＣ１（Ｖ１１〜Ｖ１３，Ｖ１５）を入力しており、これら参加者画像の中から、選択信号Ｓ２に基づき表示優先度が高い参加者画像Ｖ１２，Ｖ１５，Ｖ２３，Ｖ３２を選択して、第２の画像合成手段７８に出力する。第２の画像合成手段７８は、これらの参加者画像Ｖ１２，Ｖ１５，Ｖ２３，Ｖ３２を、表示領域が４分割された１画像Ｖ１に合成し、この合成画像Ｖ１を多重化手段７９に出力する。
音声合成手段７５は、前述したようにＡＣ２，ＡＣ３を入力すると共に、図２で述べた音声バッファ６１から合成音声ＡＣ１を入力しており、これらを１音声Ａ１に合成し、この合成音声Ａ１を多重化手段７９に出力する。
多重化手段７９は、入力した合成画像Ｖ１、および合成音声Ａ１を多重化し、この多重化信号ＭＬＡＮ１を、ＬＡＮ出力部８０に出力する。ＬＡＮ出力部８０はこの多重化信号ＭＬＡＮ１を、ＬＡＮ２１を介して端末装置２１１〜２１５および２１６，２１７にマルチキャスト送信する。
【００２０】
ＬＭＣＵが、表示優先度を各参加者の沈黙継続時間に基づき決定し、これら参加者画像を合成画面に出力する場合の実施例を図２を参照しつつ以下に説明する。
各ＬＭＣＵ４１〜４３の第１の表示優先度決定手段５５は、各ユーザの音声レベルを、あるしきい値と比較し、音声レベルから各参加者が音声を発しているかを判定する。表示優先度決定手段５５は、タイマーを有しており、参加者の沈黙継続時間を監視し、最後に喋った時刻を記録している。
評価値は、沈黙継続時間で決まる部分と、重み付けで決まる部分（後述する偏値参照）とがある。評価値が取り得る値は、通常は０〜１００である。たとえば、重み付けがなされない場合、参加者が発言し終わった瞬間は評価値は０であり、沈黙時間が経過するごとに高くなり、所定の時間が経過すると１００となり、それ以上は増加しない。評価値の重み付けで決まる部分は、沈黙時間とは独立に与えられる。例えば、重みが２０である場合には、評価値の初期値は２０であり、沈黙時間が経過するごとに２０から増加して行く。
【００２１】
なお、表示優先度は、評価値が大きいほど低く、評価値が小さいほど高い。
表示優先度決定手段５５は、上記評価値をもとに、表示優先度が高い４つ（すなわち、評価値が低い４参加者）の画像を特定する信号Ｓ１を第１の参加者画像選択手段５４に出力する。第１の参加者画像選択手段５４は、信号Ｓ１に基づく４画像を選択し、これらの画像を第１の参加者画像合成手段５７に出力する。第１の参加者画像合成手段５７は、当該４画像を表示領域が４分割された１画像に合成し、前述したように多重化手段５８に出力する。
【００２２】
図４（ａ−１），（ａ−２），（ａ−３）は、ＬＭＣＵ４１〜４３の第１の参加者画像合成手段５７により合成された画像ＶＣ１〜ＶＣ３、および各分割画像の評価値（沈黙継続時間で決まる部分）ｅ１〜ｅ３を示している。なお、各画像ＶＣ１〜ＶＣ３において、分割画像は表示優先度が高い順（評価値が低い順）に、左上，右上，左下，右下の順に表示されている。たとえば、ＬＭＣＵ４１においては、Ｖ１１，Ｖ１２，Ｖ１３，Ｖ１５が表示されており、（ａ−１）示すように、評価値は、Ｖ１２については「３」、Ｖ１５については「２１」、Ｖ１１については「７８」、Ｖ１３については「９０」である。
【００２３】
これらの合成画像ＶＣ１〜ＶＣ３、および評価値は、ＬＭＣＵ４１〜４３の多重化手段５８により合成音声と共に多重化され、ＷＡＮ１を介してＬＭＣＵ相互に交換される。各ＬＭＣＵは、他のＬＭＣＵからの音声は、自己のＬＡＮの各端末装置の音声とそのまま合成している。
図３で述べた第２の表示優先度決定手段７７による重み付けは、他のＬＭＣＵからの評価値に偏値（評価値のうち重み付けで決まる部分）を加えることにより行う。
【００２４】
たとえば、ＬＭＣＵ４１の第２の表示優先度決定手段７７は、自己の評価値ｅ１には偏値を加えずに、ＬＭＣＵ４２，４３からの評価値について他地点偏値「２０」を加える。図４（ｂ−１），（ｂ−２），（ｂ−３）に、偏値が加えられていない評価値ｅ１および偏値を加えた後の評価値ｅ′２，ｅ′３を示す。表示優先度決定手段７７は、各評価値ｅ１，ｅ′２，ｅ′３を参照して、最も評価値が小さい４画像を選択するための信号Ｓ２を生成し、これを参加者画像選択手段７６に出力する。前述したように参加者画像選択手段７６は、信号Ｓ２に基づき、４画像（この場合には、Ｖ１２，Ｖ１５，Ｖ２３，Ｖ３２）を選択し、第２の画像合成手段７８に出力し、該合成手段７８は図４（ｃ−１）に示すような合成画像を作成する。
【００２５】
ＬＭＣＵ４２，４３においても、上記と同様の処理が行われ、各第２の画像合成手段７８は、図４（ｃ−２），（ｃ−３）に示すような合成画像を作成する。前述したように、ＬＭＣＵ４１〜４３のＬＡＮ出力部８０は、図４（ａ−１），（ｃ−２），（ｃ−３）に示す合成画像ＶＣ１〜ＶＣ３を各ＬＡＮの端末装置に、合成音声ＡＣ１〜ＡＣ３と共にマルチキャスト転送する。
なお、図４（ｃ−１），（ｃ−２），（ｃ−３）では、参加者画像を優先度が高い順に配置しているが、表示はされるが位置が変わるだけである場合には、参加者画像の表示位置をもとのままに維持することが好ましい（すなわち、具体的には、４分割された参加者画像の表示領域の配置の交替を行う）。
【００２６】
図５にＬＭＣＵ４１〜４３における、処理過程を示す。同図では、参加者画像の処理の流れ、および音声信号の処理の流れを示している。たとえば、ＬＭＣＵ４１は、ＬＭＣＵ４２，４３から多重化信号Ｍ２（合成画像ＶＣ２，合成音声ＡＣ２）、多重化信号Ｍ３（合成画像ＶＣ３，合成音声ＡＣ３）を受信し、これらと自己の合成画像ＶＣ１，合成音声ＡＣ１とから、合成画像Ｖ１，合成音声Ａ１を作成した様子を示している。
【００２７】
他地点偏値は、ＬＡＮでの局所性を保つためのもので、この値を０とすると、会議に属する全ての端末装置には同一画像が表示される。すなわち、会議の全ての参加者の中から、沈黙継続時間が短い順に４人が選ばれて表示される。
他のＬＭＣＵからの他地点偏値を大きくすると、自己のＬＡＮ内の参加者の表示頻度が高くなる。
【００２８】
また、ＬＭＣＵ４１〜４３間の取り決めにより、議長を一人選ぶこともできる。議長が属するＬＡＮのＬＭＣＵは議長モードとなり、議長に対する評価値は音声レベルに関係なく、「−１２０」（他地点偏値（２０）と、沈黙継続時間で決まる評価値部分の最大値（１００）の和に負の符号を付した値）とする。これにより、議長の評価値は、どのＬＭＣＵにおいても最小となるために、議長画像は常に合成画面に現れるようにできる。なお、議長に限らず、注目しておきたい話者について、議長と同様の取り扱いをすることもできる。このような取り扱いがされる参加者は１人とは限らず同時に複数（たとえば２人とする）こともできる。
【００２９】
以上の実施例から明らかなように、本発明の会議システムは、以下の実施態様をも包含する。
すなわち、各ＬＡＮに設けられるＭＣＵが、
ＬＡＮ入力処理部として、
［１］当該ＬＡＮの各端末装置からそれぞれ受信した参加者画像についての表示優先度を、各参加者の沈黙継続時間の短さにより決定する第１の表示優先度決定手段（５５）と、
［２］所定人数分の参加者画像を、前記参加者画像の中から、上記表示優先度の高い順に選択する第１の参加者画像選択手段（５４）と、
［３］これらを１画面上に合成する第１の画像合成手段（５７）と、
［４］当該ＬＡＮの各端末装置からそれぞれ受信した音声を合成する第１の音声合成手段（５６）と、
［５］上記第１の参加者画像選択手段により合成された画像、これらの参加者画像についての前記表示優先度、および上記第１の音声合成手段により合成された音声を、他のＬＡＮのＭＣＵに多重データとして送信する第１の送信手段（５８，５９）と、
をそれぞれ備え、
ＷＡＮ入力処理部として、
［６］他の複数のＬＡＮのＭＣＵから、前記多重データを受信する手段（７１）と、
［７］前記他の複数のＬＡＮのＭＣＵから受信した沈黙継続時間に、当該他の複数のＬＡＮについてそれぞれ定められた重み付けを施し、前記出力処理部の第１の参加者画像選択手段により選択された所定人数分の参加者画像、および前記他の複数のＬＡＮのＭＣＵからそれぞれ受信した所定人数分の参加者画像についての表示優先度を各参加者の沈黙継続時間の短さにより決定する第２の参加者画像選択手段（７７）と、
［８］所定人数分の参加者画像を、前記出力処理部の第１の参加者画像選択手段により選択された所定人数分の参加者画像、および前記他の複数のＬＡＮのＭＣＵから受信した所定人数分の参加者画像の中から、表示優先度の高い順に選択し、これらを１画面上に合成する第２の画像合成手段（７６）と、
［９］第１の音声合成手段により合成された音声と、前記他の複数のＬＡＮのＭＣＵから受信した各音声とを合成する第２の音声合成手段（７５）と、
［１０］上記第２の参加者画像選択手段により合成された合成画像と、前記第２の音声合成手段により合成された音声を、多重データとして当該ＬＡＮ内の端末装置に送信する第２の送信手段（７９，８０）と、
をそれぞれ備えることを特徴とする。
【００３０】
【発明の効果】
本発明は、端末装置の画像表示装置に、各ＬＡＮごとに定められた沈黙時間に基づく優先度で会議画像を表示することができる。
特に、本発明ではＭＣＵ機能が分散管理されているので、１つのＬＭＣＵあたりの負荷を低減すると共に、ＷＡＮの通信量を会議システム全体を通じて減少させる効果をも奏することができる。
【図面の簡単な説明】
【図１】本発明のビデオ会議システムが適用されるシステムの一例を示す概略図である。
【図２】本発明のビデオ会議システムにおけるＬＭＣＵの入力処理部の一例を示す説明図である。
【図３】本発明のビデオ会議システムにおけるＷＡＮ入力処理部の一例を示す説明図である。
【図４】（ａ−１）〜（ａ−３）は、各ＬＭＣＵにより合成された各画像および各分割画像の評価値を示す図、（ｂ−１）〜（ｂ−３）は前記評価値に偏値を加えた後の評価値を示す図、（ｃ−１）〜（ｃ−３）は各ＬＭＣＵにより合成されて各端末装置に送信される画像を示す図である。
【図５】ＬＭＣＵがＷＡＮを介して相互に多重化信号を交換する様子を示す説明図である。
【符号の説明】
１ ＷＡＮ
２１〜２３ ＬＡＮ
２１１〜２１７ ＬＡＮ２１の端末装置
２２１〜２２３ ＬＡＮ２２の端末装置
２３１〜２３６ ＬＡＮ２３の端末装置
３１〜３３ ルータ
４１〜４３ ＬＭＣＵ
５１ ＬＡＮ入力部
５３１〜５３５ 分類器
５４ 第１の参加者画像選択手段
５５ 第１の表示優先度決定手段
５６ 第１の音声合成手段
５７ 第１の画像合成手段
５８ 多重化手段
５９ ＷＡＮ出力部
６１ 音声バッファ
６２ 優先度バッファ
６３ 画像バッファ
７１ ＷＡＮ入力部
７２ 分配器
７３１，７３２ 分類器
７４１，７４３ 画像分類器
７４２，７４４ 優先度分類器
７６ 第２の参加者画像選択手段
７７ 第２の表示優先度決定手段
７８ 画像合成手段
７９ 多重化手段
８０ ＬＡＮ出力部
【発明の属する技術分野】
本発明は、広域ネットワークに複数の狭域ネットワークが接続されてなるビデオ会議システムに関し、具体的にはマルチポイントコントロールユニット（以下、「ＭＣＵ」と言う）による参加者画像の表示技術に関する。
【０００２】
【技術背景】
ビデオ会議システム（以下、単に「会議システム」と言う）は、ＡＴＭ（非同期転送モード）回線等の１つのＷＡＮ（広域ネットワーク）に、イーサネット等の複数のＬＡＮ（狭域ネットワーク）が接続されて構成されることも多い。
従来、この種のシステムには、ＭＣＵが何れか１つのＬＡＮに設けられ、あるいは各ＬＡＮに設けられる。
ここで、ＭＣＵは、各会議参加者のそれぞれのビデオ会議端末装置（以下、「端末装置」と言う）から、参加者画像と参加者音声との多重化信号を受信し、これらの多重化信号をビデオ信号と音声信号とに分別し、これら各信号から、各端末装置の画像出力装置に表示されるべき画像（以下、「会議画像」と言う）と、各端末装置の音声出力装置に出力されるべき音声（以下、「会議音声」と言う）を作成する。
たとえば、会議画像は、発言者などをもとに選定された１つの参加者画像であることもある。また、表示領域が適当な数（たとえば４つ）の参加者画像に分割表示された合成画像であり、発言している参加者を強調表示することもある。なお、会議音声は、全ての会議参加者の音声の合成音声であることもあるし、１つの音声または複数の特定参加者の音声の合成音声であることもある。
ＭＣＵは、上記のようにして作成した会議画像と会議音声を再び多重化し、この多重化信号を各参加者（場合によっては、傍観者）の端末装置にマルチキャスト送信する。
【０００３】
ところで、ＷＡＮを介して複数のＬＡＮ同士が接続されてなるビデオ会議システムでは、ＬＡＮ単位で表示画像を変更したい場合も生じる。例えば、本社ＬＡＮと、第１営業所ＬＡＮと、第２営業所ＬＡＮとがＷＡＮを介して接続されている場合に、本社ＬＡＮの各端末装置の参加者は、第１営業所ＬＡＮに接続されている端末装置の参加者画像を、ある優先度で画像表示装置に表示させたい場合が生じる。また、例えば、各営業所ＬＡＮの各端末装置の参加者は、自分が属するＬＡＮの各端末装置の参加者画像を、ある優先度で画像表示装置に表示させたい場合も生じる。
しかし、前述した従来の何れのビデオ会議システムであっても、基本的には全ての端末装置について会議画像は同一であるため、上記のようにあるＬＡＮに属する端末装置からの参加者画像をある優先度で表示させることはできないと言う問題がある。
【０００４】
【発明の目的】
本発明の目的は、端末装置の画像表示装置に、各ＬＡＮごとに定められた、沈黙時間に基づく優先度で会議画像を表示することができる会議システムを提供することである。
【０００５】
【発明の概要】
本発明のビデオ会議システムは、ＷＡＮに複数のＬＡＮが接続され、前記各ＬＡＮにそれぞれＭＣＵ（これらのＭＣＵを、以下「ＬＭＣＵ」と言う）を介して前記ＷＡＮに接続された少なくとも１つのビデオ会議端末装置が備えられ、（１）前記ＬＭＣＵが、前記各端末装置の参加者の沈黙継続時間を監視すると共に、当該沈黙継続時間に、当該端末装置が属するＬＡＮに応じて定められた重み付けを行い、当該各参加者画像の表示優先度を決定する表示優先度決定手段、および、
（２）前記各参加者画像の中から、表示優先度が高い順に所定個数の参加者画像を選択し、これらの選択画像を当該ＬＡＮ内の各端末装置にマルチキャストする手段を備えたことを特徴とする。
【０００６】
表示優先度決定手段は、（１）当該ＬＭＣＵが属するＬＡＮ内の前記端末装置の各参加者の沈黙継続時間を監視すると共に、（２）当該沈黙継続時間に、当該端末装置が属するＬＡＮに応じて定められた重み付けを行い、当該各参加者画像の表示優先度を決定する。表示優先度決定手段を２つの構成要素に分けて、（１）と（２）の処理を別個に行わすこともできる。
選択・出力手段は、前記各参加者画像の中から、表示優先度が高い順に所定個数の参加者画像を選択し、これらの選択画像を当該ＬＡＮ内の端末会議装置にマルチキャストする。
【０００７】
上記の重み付けには、種々の態様がある。たとえば、他のＬＭＣＵからの沈黙継続時間に一定の時間を加算、または減算することができる。あるいは、他のＬＭＣＵからの沈黙継続時間に所定係数を乗算することもできる。なお、沈黙継続時間が短いほど優先度が高い。
【０００８】
本発明の会議システムでは、上記の重み付け（方法や程度）を適当に設定することにより、各ＬＡＮの事情に合わせた参加者画像の選択を行うことができる。しかも、従来のように、単一のＭＣＵで２種以上の合成画像を作るとその分ＷＡＮ通信が増えるが、本発明の会議システムでは、この操作が局所化されているので、データ通信の量が増えることはない。
【０００９】
なお、本発明の会議システムでは、特定の参加者に、最も高い表示優先度を付与する手段を設けることもできる。これにより、議長等、特定の参加者の表示優先度を他の参加者よりも高く設定することができる。
【００１０】
【実施例】
図１は本発明の会議システムが適用されるネットワークの例を示す概略図である。図１において、ＷＡＮ１に、複数のＬＡＮ２１，２２，２３が、それぞれルータ３１，３２，３３を介して接続されている。そして、ＬＡＮ２１には端末装置２１１〜２１５が、ＬＡＮ２２には端末装置２２１〜２２３が、ＬＡＮ２３には端末装置２３１〜２３６がそれぞれ接続されている。なお、ＬＡＮ２１には、会議に傍観者としてしか参加できない参加者（すなわち、参加者画像と参加者音声を受信するのみの参加者）の端末装置２１６，２１７も接続されている。
【００１１】
ルータ３１〜３３は、それぞれＬＭＣＵ４１〜４３を有しており、各ＬＭＣＵ４１〜４３は、相互にＷＡＮ１を介して通信することができる。
【００１２】
図２，図３はＬＭＣＵ４１の構成をより詳細に示す図であり、図２はＬＡＮ入力処理部を、図３はＷＡＮ入力処理部をそれぞれ示している。
図２において、端末装置２１１〜２１５からの参加者画像と参加者音声との多重化信号Ｍ１１〜Ｍ１５はＬＡＮ入力部５１により受信される。
図２に示すように、ＬＡＮ入力部５１は、これらの多重化信号Ｍ１１〜Ｍ１５を分配器５２を介して、それぞれ分類器５３１〜５３５に分配出力する。
分類器５３１〜５３５は、多重化信号Ｍ１１〜Ｍ１５を参加者画像Ｖ１１〜Ｖ１５と参加者音声Ａ１１〜Ａ１５とにそれぞれ分け、Ｖ１１〜Ｖ１５を第１の参加者画像選択手段５４に、Ａ１１〜Ａ１５を第１の表示優先度決定手段５５に出力する。
【００１３】
第１の表示優先度決定手段５５は、参加者画像Ｖ１１〜Ｖ１５についての表示優先度を、参加者音声Ａ１１〜Ａ１５に基づき決定し、優先度が高い４つの参加者画像についての表示優先度Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１５を選択する。この表示優先度は、後述するように、端末装置２１１〜２１５の各参加者の沈黙継続時間により定めることができる。
ここでは、参加者画像の表示優先度はＶ１１，Ｖ１２，Ｖ１３，Ｖ１５が、Ｖ１４よりも高いものとする。
第１の表示優先度決定手段５５は、表示優先度Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１５を、第１の参加者画像選択手段５４、多重化手段５８、優先度バッファ６２に出力すると共に、参加者音声Ａ１１〜Ａ１５を第１の音声合成手段５６に出力する。
【００１４】
第１の参加者画像選択手段５４は、表示優先度Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１５に基づき、４つの参加者画像Ｖ１１，Ｖ１２，Ｖ１３，Ｖ１５を選択し、これらを第１の画像合成手段５７に出力する。第１の画像合成手段５７はこれらの参加者画像を、表示領域が４分割された１画像ＶＣ１に合成し、この合成画像ＶＣ１を第１の多重化手段５８および画像バッファ６３に出力する。
第１の音声合成手段５６は、参加者音声Ａ１１〜Ａ１５を１音声ＡＣ１に合成し、この合成音声ＡＣ１を音声バッファ６１および第１の多重化手段５８に出力する。
多重化手段５８は、合成画像ＶＣ１、優先度情報Ｐ１（表示優先度Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１５からなる）、および合成音声ＡＣ１を多重化し、この多重化信号Ｍ１を、ＷＡＮ出力部５９に出力する。ＷＡＮ出力部５９は多重化信号Ｍ１を、ＷＡＮ１を介してＬＡＮ２２，２３のＬＭＣＵ４２，４３にマルチキャスト送信する。
【００１５】
ＬＡＮ２１，２２のＬＭＣＵ４２，４３は、上記と同様のＬＡＮ入力処理部を備えており、多重化信号Ｍ２，Ｍ３をＷＡＮ１上に出力している。ここでは、Ｍ２は、端末装置２２１，２２２，２２３の参加者画像Ｖ２１，Ｖ２２，Ｖ２３の合成画像ＶＣ２、これら参加者画像の優先度情報Ｐ２（表示優先度Ｐ２１，Ｐ２２，Ｐ２３からなる）、および端末装置２２１〜２２３の合成音声ＡＣ２の多重化信号であり、Ｍ３は、端末装置２２２，２２３，２２４，２２５の参加者画像Ｖ３２，Ｖ３３，Ｖ３４，Ｖ３５の合成画像ＶＣ３、これら参加者画像の優先度情報Ｐ３（表示優先度Ｐ３２，Ｐ３３，Ｐ３４，Ｐ３５からなる）、および端末装置２３１〜２３６の合成音声ＡＣ３の多重化信号であるものとする。
【００１６】
図３に示すように、ＬＭＣＵ４２，４３からの多重化信号Ｍ２，Ｍ３は、ＷＡＮ入力部７１により受信される。
ＷＡＮ入力部７１はＭ２，Ｍ３を分配器７２に出力し、分配器７２はこれらの多重化信号Ｍ２，Ｍ３を分類器７３１，７３２にそれぞれ出力する。
分類器７３１は、合成画像ＶＣ２を画像分類器７４１に、優先度情報Ｐ２を優先度分類器７４２に、合成音声ＡＣ２を音声合成手段７５にそれぞれ出力する。また、分類器７３２は、合成画像ＶＣ３を画像分類器７４３に、優先度情報Ｐ３を優先度分類器７４４に、合成音声ＡＣ３を音声合成手段７５にそれぞれ出力する。
【００１７】
画像分類器７４１は、合成画像ＶＣ２をＶ２１，Ｖ２２，Ｖ２３に分けて、これらを第２の参加者画像選択手段７６に出力する。また、同様に、分類器７４３は、合成画像ＶＣ３をＶ３２，Ｖ３３，Ｖ３４，Ｖ３５に分けて、これらを第２の参加者画像選択手段７６に出力する。
優先度分類器７４２は、優先度情報Ｐ２を表示優先度Ｐ２１，Ｐ２２，Ｐ２３に分けて、これらを第２の表示優先度決定手段７７に出力する。また、同様に、優先度分類器７４４は、優先度情報Ｐ３を表示優先度Ｐ３２，Ｐ３３，Ｐ３４，Ｐ３５に分けて、これらを第２の表示優先度決定手段７７に出力する。
【００１８】
第２の表示優先度決定手段７７は、表示優先度Ｐ２１，Ｐ２２，Ｐ２３に対しＬＡＮ２１について予め定められた重み付けを施すと共に、表示優先度Ｐ３２，Ｐ３３，Ｐ３４，Ｐ３５に対しＬＡＮ２３について予め定められた重み付けを施す。
ここでは、第２の表示優先度決定手段７７は、表示優先度Ｐ２１，Ｐ２２，Ｐ２３をある度数だけ一律に低くし、新たな重み付き表示優先度Ｐ′２１，Ｐ′２２，Ｐ′２３を生成し、表示優先度Ｐ３２，Ｐ３３，Ｐ３４，Ｐ３５をある度数だけ一律に低くし、新たに重み付表示優先度Ｐ′３２，Ｐ′３３，Ｐ′３４，Ｐ′３５を生成している。第２の表示優先度決定手段７７は、図２で述べた優先度バッファ６２から、表示優先度Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１５を入力している。上記の各重み付き表示優先度を入力するとともに、これらの表示優先度の中から表示優先度が高い４つ（ここでは、Ｐ１２，Ｐ１５，Ｐ′２３，Ｐ′３２）を特定し、選択信号Ｓ２を第２の参加者画像選択手段７６に出力する。
【００１９】
参加者画像選択手段７６は、参加者画像Ｖ２１〜Ｖ２３，Ｖ３１〜Ｖ３６を入力すると共に、図２で述べた画像バッファ６３から参加者画像ＶＣ１（Ｖ１１〜Ｖ１３，Ｖ１５）を入力しており、これら参加者画像の中から、選択信号Ｓ２に基づき表示優先度が高い参加者画像Ｖ１２，Ｖ１５，Ｖ２３，Ｖ３２を選択して、第２の画像合成手段７８に出力する。第２の画像合成手段７８は、これらの参加者画像Ｖ１２，Ｖ１５，Ｖ２３，Ｖ３２を、表示領域が４分割された１画像Ｖ１に合成し、この合成画像Ｖ１を多重化手段７９に出力する。
音声合成手段７５は、前述したようにＡＣ２，ＡＣ３を入力すると共に、図２で述べた音声バッファ６１から合成音声ＡＣ１を入力しており、これらを１音声Ａ１に合成し、この合成音声Ａ１を多重化手段７９に出力する。
多重化手段７９は、入力した合成画像Ｖ１、および合成音声Ａ１を多重化し、この多重化信号ＭＬＡＮ１を、ＬＡＮ出力部８０に出力する。ＬＡＮ出力部８０はこの多重化信号ＭＬＡＮ１を、ＬＡＮ２１を介して端末装置２１１〜２１５および２１６，２１７にマルチキャスト送信する。
【００２０】
ＬＭＣＵが、表示優先度を各参加者の沈黙継続時間に基づき決定し、これら参加者画像を合成画面に出力する場合の実施例を図２を参照しつつ以下に説明する。
各ＬＭＣＵ４１〜４３の第１の表示優先度決定手段５５は、各ユーザの音声レベルを、あるしきい値と比較し、音声レベルから各参加者が音声を発しているかを判定する。表示優先度決定手段５５は、タイマーを有しており、参加者の沈黙継続時間を監視し、最後に喋った時刻を記録している。
評価値は、沈黙継続時間で決まる部分と、重み付けで決まる部分（後述する偏値参照）とがある。評価値が取り得る値は、通常は０〜１００である。たとえば、重み付けがなされない場合、参加者が発言し終わった瞬間は評価値は０であり、沈黙時間が経過するごとに高くなり、所定の時間が経過すると１００となり、それ以上は増加しない。評価値の重み付けで決まる部分は、沈黙時間とは独立に与えられる。例えば、重みが２０である場合には、評価値の初期値は２０であり、沈黙時間が経過するごとに２０から増加して行く。
【００２１】
なお、表示優先度は、評価値が大きいほど低く、評価値が小さいほど高い。
表示優先度決定手段５５は、上記評価値をもとに、表示優先度が高い４つ（すなわち、評価値が低い４参加者）の画像を特定する信号Ｓ１を第１の参加者画像選択手段５４に出力する。第１の参加者画像選択手段５４は、信号Ｓ１に基づく４画像を選択し、これらの画像を第１の参加者画像合成手段５７に出力する。第１の参加者画像合成手段５７は、当該４画像を表示領域が４分割された１画像に合成し、前述したように多重化手段５８に出力する。
【００２２】
図４（ａ−１），（ａ−２），（ａ−３）は、ＬＭＣＵ４１〜４３の第１の参加者画像合成手段５７により合成された画像ＶＣ１〜ＶＣ３、および各分割画像の評価値（沈黙継続時間で決まる部分）ｅ１〜ｅ３を示している。なお、各画像ＶＣ１〜ＶＣ３において、分割画像は表示優先度が高い順（評価値が低い順）に、左上，右上，左下，右下の順に表示されている。たとえば、ＬＭＣＵ４１においては、Ｖ１１，Ｖ１２，Ｖ１３，Ｖ１５が表示されており、（ａ−１）示すように、評価値は、Ｖ１２については「３」、Ｖ１５については「２１」、Ｖ１１については「７８」、Ｖ１３については「９０」である。
【００２３】
これらの合成画像ＶＣ１〜ＶＣ３、および評価値は、ＬＭＣＵ４１〜４３の多重化手段５８により合成音声と共に多重化され、ＷＡＮ１を介してＬＭＣＵ相互に交換される。各ＬＭＣＵは、他のＬＭＣＵからの音声は、自己のＬＡＮの各端末装置の音声とそのまま合成している。
図３で述べた第２の表示優先度決定手段７７による重み付けは、他のＬＭＣＵからの評価値に偏値（評価値のうち重み付けで決まる部分）を加えることにより行う。
【００２４】
たとえば、ＬＭＣＵ４１の第２の表示優先度決定手段７７は、自己の評価値ｅ１には偏値を加えずに、ＬＭＣＵ４２，４３からの評価値について他地点偏値「２０」を加える。図４（ｂ−１），（ｂ−２），（ｂ−３）に、偏値が加えられていない評価値ｅ１および偏値を加えた後の評価値ｅ′２，ｅ′３を示す。表示優先度決定手段７７は、各評価値ｅ１，ｅ′２，ｅ′３を参照して、最も評価値が小さい４画像を選択するための信号Ｓ２を生成し、これを参加者画像選択手段７６に出力する。前述したように参加者画像選択手段７６は、信号Ｓ２に基づき、４画像（この場合には、Ｖ１２，Ｖ１５，Ｖ２３，Ｖ３２）を選択し、第２の画像合成手段７８に出力し、該合成手段７８は図４（ｃ−１）に示すような合成画像を作成する。
【００２５】
ＬＭＣＵ４２，４３においても、上記と同様の処理が行われ、各第２の画像合成手段７８は、図４（ｃ−２），（ｃ−３）に示すような合成画像を作成する。前述したように、ＬＭＣＵ４１〜４３のＬＡＮ出力部８０は、図４（ａ−１），（ｃ−２），（ｃ−３）に示す合成画像ＶＣ１〜ＶＣ３を各ＬＡＮの端末装置に、合成音声ＡＣ１〜ＡＣ３と共にマルチキャスト転送する。
なお、図４（ｃ−１），（ｃ−２），（ｃ−３）では、参加者画像を優先度が高い順に配置しているが、表示はされるが位置が変わるだけである場合には、参加者画像の表示位置をもとのままに維持することが好ましい（すなわち、具体的には、４分割された参加者画像の表示領域の配置の交替を行う）。
【００２６】
図５にＬＭＣＵ４１〜４３における、処理過程を示す。同図では、参加者画像の処理の流れ、および音声信号の処理の流れを示している。たとえば、ＬＭＣＵ４１は、ＬＭＣＵ４２，４３から多重化信号Ｍ２（合成画像ＶＣ２，合成音声ＡＣ２）、多重化信号Ｍ３（合成画像ＶＣ３，合成音声ＡＣ３）を受信し、これらと自己の合成画像ＶＣ１，合成音声ＡＣ１とから、合成画像Ｖ１，合成音声Ａ１を作成した様子を示している。
【００２７】
他地点偏値は、ＬＡＮでの局所性を保つためのもので、この値を０とすると、会議に属する全ての端末装置には同一画像が表示される。すなわち、会議の全ての参加者の中から、沈黙継続時間が短い順に４人が選ばれて表示される。
他のＬＭＣＵからの他地点偏値を大きくすると、自己のＬＡＮ内の参加者の表示頻度が高くなる。
【００２８】
また、ＬＭＣＵ４１〜４３間の取り決めにより、議長を一人選ぶこともできる。議長が属するＬＡＮのＬＭＣＵは議長モードとなり、議長に対する評価値は音声レベルに関係なく、「−１２０」（他地点偏値（２０）と、沈黙継続時間で決まる評価値部分の最大値（１００）の和に負の符号を付した値）とする。これにより、議長の評価値は、どのＬＭＣＵにおいても最小となるために、議長画像は常に合成画面に現れるようにできる。なお、議長に限らず、注目しておきたい話者について、議長と同様の取り扱いをすることもできる。このような取り扱いがされる参加者は１人とは限らず同時に複数（たとえば２人とする）こともできる。
【００２９】
以上の実施例から明らかなように、本発明の会議システムは、以下の実施態様をも包含する。
すなわち、各ＬＡＮに設けられるＭＣＵが、
ＬＡＮ入力処理部として、
［１］当該ＬＡＮの各端末装置からそれぞれ受信した参加者画像についての表示優先度を、各参加者の沈黙継続時間の短さにより決定する第１の表示優先度決定手段（５５）と、
［２］所定人数分の参加者画像を、前記参加者画像の中から、上記表示優先度の高い順に選択する第１の参加者画像選択手段（５４）と、
［３］これらを１画面上に合成する第１の画像合成手段（５７）と、
［４］当該ＬＡＮの各端末装置からそれぞれ受信した音声を合成する第１の音声合成手段（５６）と、
［５］上記第１の参加者画像選択手段により合成された画像、これらの参加者画像についての前記表示優先度、および上記第１の音声合成手段により合成された音声を、他のＬＡＮのＭＣＵに多重データとして送信する第１の送信手段（５８，５９）と、
をそれぞれ備え、
ＷＡＮ入力処理部として、
［６］他の複数のＬＡＮのＭＣＵから、前記多重データを受信する手段（７１）と、
［７］前記他の複数のＬＡＮのＭＣＵから受信した沈黙継続時間に、当該他の複数のＬＡＮについてそれぞれ定められた重み付けを施し、前記出力処理部の第１の参加者画像選択手段により選択された所定人数分の参加者画像、および前記他の複数のＬＡＮのＭＣＵからそれぞれ受信した所定人数分の参加者画像についての表示優先度を各参加者の沈黙継続時間の短さにより決定する第２の参加者画像選択手段（７７）と、
［８］所定人数分の参加者画像を、前記出力処理部の第１の参加者画像選択手段により選択された所定人数分の参加者画像、および前記他の複数のＬＡＮのＭＣＵから受信した所定人数分の参加者画像の中から、表示優先度の高い順に選択し、これらを１画面上に合成する第２の画像合成手段（７６）と、
［９］第１の音声合成手段により合成された音声と、前記他の複数のＬＡＮのＭＣＵから受信した各音声とを合成する第２の音声合成手段（７５）と、
［１０］上記第２の参加者画像選択手段により合成された合成画像と、前記第２の音声合成手段により合成された音声を、多重データとして当該ＬＡＮ内の端末装置に送信する第２の送信手段（７９，８０）と、
をそれぞれ備えることを特徴とする。
【００３０】
【発明の効果】
本発明は、端末装置の画像表示装置に、各ＬＡＮごとに定められた沈黙時間に基づく優先度で会議画像を表示することができる。
特に、本発明ではＭＣＵ機能が分散管理されているので、１つのＬＭＣＵあたりの負荷を低減すると共に、ＷＡＮの通信量を会議システム全体を通じて減少させる効果をも奏することができる。
【図面の簡単な説明】
【図１】本発明のビデオ会議システムが適用されるシステムの一例を示す概略図である。
【図２】本発明のビデオ会議システムにおけるＬＭＣＵの入力処理部の一例を示す説明図である。
【図３】本発明のビデオ会議システムにおけるＷＡＮ入力処理部の一例を示す説明図である。
【図４】（ａ−１）〜（ａ−３）は、各ＬＭＣＵにより合成された各画像および各分割画像の評価値を示す図、（ｂ−１）〜（ｂ−３）は前記評価値に偏値を加えた後の評価値を示す図、（ｃ−１）〜（ｃ−３）は各ＬＭＣＵにより合成されて各端末装置に送信される画像を示す図である。
【図５】ＬＭＣＵがＷＡＮを介して相互に多重化信号を交換する様子を示す説明図である。
【符号の説明】
１ ＷＡＮ
２１〜２３ ＬＡＮ
２１１〜２１７ ＬＡＮ２１の端末装置
２２１〜２２３ ＬＡＮ２２の端末装置
２３１〜２３６ ＬＡＮ２３の端末装置
３１〜３３ ルータ
４１〜４３ ＬＭＣＵ
５１ ＬＡＮ入力部
５３１〜５３５ 分類器
５４ 第１の参加者画像選択手段
５５ 第１の表示優先度決定手段
５６ 第１の音声合成手段
５７ 第１の画像合成手段
５８ 多重化手段
５９ ＷＡＮ出力部
６１ 音声バッファ
６２ 優先度バッファ
６３ 画像バッファ
７１ ＷＡＮ入力部
７２ 分配器
７３１，７３２ 分類器
７４１，７４３ 画像分類器
７４２，７４４ 優先度分類器
７６ 第２の参加者画像選択手段
７７ 第２の表示優先度決定手段
７８ 画像合成手段
７９ 多重化手段
８０ ＬＡＮ出力部
Claims (3)
- 広域ネットワークに、複数の狭域ネットワークが接続され、前記各狭域ネットワークにそれぞれマルチポイントコントロールユニットを介して前記広域ネットワークに接続された少なくとも１つのビデオ会議端末装置が備えられ、各マルチポイントコントロールユニットが、他の狭域ネットワークに設けられたマルチポイントコントロールユニットと相互に通信し、かつ各ビデオ会議端末装置の画像表示装置に複数の参加者が表示されるビデオ会議システムであって、前記マルチポイントコントロールユニットが、前記各端末装置の参加者の沈黙継続時間を監視すると共に、当該沈黙継続時間に、当該端末装置が属する狭域ネットワークに応じて定められた重み付けを行い、当該各参加者画像の表示優先度を決定する表示優先度決定手段、および、前記各参加者画像の中から、表示優先度が高い順に所定個数の参加者画像を選択し、これらの選択画像を当該狭域ネットワーク内の各ビデオ会議端末装置にマルチキャストする手段、を備えたことを特徴とするビデオ会議システム。
- 特定の参加者に、最も高い表示優先度を付与する手段を設けてなることを特徴とする請求項１に記載のビデオ会議システム。
- 前記重み付けが、前記沈黙継続時間に基づいて定められる評価値への、重みを表す値の加算であり、前記表示優先度の序列が、前記加算の結果の値の低い順に決定されることを特徴とする請求項１または２に記載のビデオ会議システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29355195A JP3573850B2 (ja) | 1995-10-17 | 1995-10-17 | ビデオ会議システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29355195A JP3573850B2 (ja) | 1995-10-17 | 1995-10-17 | ビデオ会議システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH09135431A JPH09135431A (ja) | 1997-05-20 |
| JP3573850B2 true JP3573850B2 (ja) | 2004-10-06 |
Family
ID=17796225
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP29355195A Expired - Fee Related JP3573850B2 (ja) | 1995-10-17 | 1995-10-17 | ビデオ会議システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3573850B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5211001B2 (ja) * | 2009-09-09 | 2013-06-12 | 日本電信電話株式会社 | 会議通信システム、会議通信方法及びプログラム |
| EP2525533B1 (en) * | 2011-05-16 | 2014-02-26 | Alcatel Lucent | Method and apparatus for providing bidirectional communication between segments of a home network |
-
1995
- 1995-10-17 JP JP29355195A patent/JP3573850B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH09135431A (ja) | 1997-05-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP0724362B1 (en) | Priority controlled transmission of multimedia streams via a telecommunication line | |
| US7612793B2 (en) | Spatially correlated audio in multipoint videoconferencing | |
| US6330022B1 (en) | Digital processing apparatus and method to support video conferencing in variable contexts | |
| US5970054A (en) | Multipoint teleconference system employing H. 221 frames | |
| JP2827932B2 (ja) | 多地点テレビ会議における合成画面表示制御方式 | |
| US8289362B2 (en) | Audio directionality control for a multi-display switched video conferencing system | |
| JP2000270304A (ja) | 多地点テレビ会議システム | |
| JPH07200424A (ja) | 音声会議システム及びその制御方法 | |
| WO2010045515A1 (en) | Telepresence conference room layout, dynamic scenario manager, diagnostics and control system and method | |
| JPS6120190B2 (ja) | ||
| JPH09121251A (ja) | 会議を行なうための方法、通信システム、および会議装置 | |
| JPH0537933A (ja) | 多地点間テレビ会議システム | |
| JP2000253374A (ja) | テレビ会議制御システム及びテレビ会議システム | |
| JP3573850B2 (ja) | ビデオ会議システム | |
| JPH09149133A (ja) | テレビ会議システムのための音声入力端末および音声合成端末 | |
| KR20150042628A (ko) | 분산 텔레프레즌스 서비스 제공 방법 및 장치 | |
| JPH02125588A (ja) | 多地点画像表示装置 | |
| JP2823571B2 (ja) | 分散多地点通信会議装置 | |
| JPH08321884A (ja) | 多地点間テレビ会議システム | |
| JPH0758859A (ja) | 遠隔会議用情報送信装置及び情報受信装置 | |
| JP2008278166A (ja) | ビデオ会議視聴システム | |
| JPH0698030A (ja) | 通信会議方式および装置 | |
| JP2002204437A (ja) | 通信装置、通信システム、通信方法、及び記憶媒体 | |
| JPH08125760A (ja) | 情報処理装置 | |
| JPH0888692A (ja) | 送信装置、受信装置及び送受信装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040510 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040519 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040614 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040630 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080709 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090709 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090709 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100709 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110709 Year of fee payment: 7 |
|
| LAPS | Cancellation because of no payment of annual fees |