JP3697422B2 - 多地点制御装置、テレビ会議端末装置及び多地点テレビ会議システム - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、多地点間でのテレビ会議に用いるテレビ会議システムに関する。
【０００２】
【従来の技術】
近年、ＩＳＤＮ（Integrated Services Digital Network ：統合サービス・ディジタル通信網）サービスにより一般にもディジタル公衆網が利用できるようになり、テレビ会議システムの普及が盛んになってきている。
【０００３】
このテレビ会議システムは、遠隔地間で互いの映像及び音声を伝送することにより会議を行うシステムである。このようなテレビ会議システムは従来２地点間（１対１接続）のものが多かったが、最近ではより有効な利用や活用のため、例えば図４４に示すような概略構成の多地点間テレビ会議システムが注目されるようになってきている。このような多地点間テレビ会議システムに対する要望は、企業における業務の地理的分散、すなわち本社、工場、研究所、または本社、複数の営業所などが地理的に分散している状況から発生している。すなわち、このような事情のもとに、迅速な情報の伝達や人・物が移動（出張）する際の時間・経費の節減を目的として、遠隔地点に存在するテレビ会議端末間でテレビ会議が利用されるようになってきている。
【０００４】
図４４は４地点の会議室Ａ，Ｂ，Ｃ，及びＤを用いて行われる多地点テレビ会議システムの全体構成図である。
１０１〜１０４は、それぞれの会議室におけるテレビ会議端末装置、２００はセンタ局に設置された多地点制御装置を示す。
【０００５】
各会議室に設けられたテレビ会議端末装置（以下では端末装置と称す）１０１〜１０４は、例えばカメラ、モニタ、マイク、および符号化装置等を備え、映像および音声の入出力機能を有する。そして、各会議室における映像および音声の情報を入力してセンタ装置２００に送り、センタ装置２００から送られた映像および音声の情報を各会議室の会議参加者に対して出力する。
【０００６】
また、センタ装置２００は、全ての会議室からの映像および音声の情報を入力して、全ての音声データをミキシングして各端末装置１０１〜１０４に送ると共に、入力した映像データを、それぞれの端末装置に分配する。
【０００７】
このような多地点テレビ会議システムでは、各会議室（地点）のテレビ会議端末装置のモニタに他の会議室（１地点または複数地点）の画面を切替表示するようにしている。この画面切替は、一般に発言地点の検出により自動的に行っている。このため、各会議室のモニタには少なくとも発言地点の画面が表示されることになる（但し、発言地点の画面には一般に前回発言した地点等の画面が表示される）。
【０００８】
ところで、多地点制御装置の中には各会議室のテレビ会議端末装置に他のいずれか１つの会議室の映像を分配する切換表示方式のものもある。この多地点制御装置は、１対１接続（point to point接続）のテレビ会議システム用のテレビ会議端末装置をそのまま用いることが出来るため導入し易いという利点があり、開発、製品化が盛んに行われている。
【０００９】
このような多地点制御装置において、ＮＳ／ＰＳ指定モードを備えたものが知られている。ここで、ＮＳはNew Station ，ＰＳはPast Stationの略称であり、それぞれ現在表示地点、前回表示地点を意味するものである。
【００１０】
従来、このＮＳ／ＰＳ指定モードでの画像切替は各地点のテレビ会議端末装置での操作または多地点制御装置での発言者検出（話者検出）により自動的に行っていた。尚、この発言者検出（話者検出）は発言が行われた地点（ＮＳ）を自動的に検出する機能であり、多地点制御装置はこの機能を用いて発言地点（ＮＳ）以外のテレビ会議端末装置には発言地点（ＮＳ）の映像データを、発言地点（ＮＳ）のテレビ会議端末装置には前回発言地点（ＰＳ）の映像データを切換制御により分配する。
【００１１】
図４５は、ＮＳ／ＰＳ指定モードの動作の一例を示す模式図である。同図において、多地点制御装置３００には会議室Ａ，Ｂ，Ｃ，Ｄ，Ｅの５地点のテレビ会議端末装置１２０Ａ，１２０Ｂ，１２０Ｃ，１２０Ｄ，１２０Ｅがネットワークを介して接続されている。
【００１２】
このようなテレビ会議システムにおいて、会議室Ａで発言が行われるかまたはある会議室において画像を会議室Ａの画像に切替選択する操作が行われると、多地点制御装置３００はこの会議室ＡをＮＳに設定し他の会議室Ｂ，Ｃ，Ｄ，Ｅにこの会議室Ａの映像データを送る（実線の矢印参照）。一方、ＮＳに設定された会議室ＡにはＰＳとなっている会議室Ｄの映像データを送る（破線の矢印参照）。
【００１３】
次に、図４６はこのような発言者検出に応じてＮＳ／ＰＳを自動的に切り替えながら各端末装置１２０Ａ，１２０Ｂ，・・・１２０Ｅへ分配する映像データを切替制御する多地点制御装置１１０を用いた多地点テレビ会議システムの全体構成図である。
【００１４】
同図に示すように、各テレビ会議端末装置１２０は、会議参加者に対向して設けられた複数個のマイクロホン群１２１と、これらのマイクロホン群１２１からの出力を合成するマイクミキサ１２２と、他のテレビ会議端末装置１２０からの音声を出力するスピーカ１２３と、このスピーカ１２３の出力音声がマイクロホン群１２１へ回り込まないようにするための入出力音声のスイッチング動作またはエコー消去動作等を行う音声制御部１２４と、この音声制御部１２４からの又は音声制御部１２４への音声に対する符号化／復号化部（以下、音声ＣＯＤＥＣと略称する）１２５と、テレビ会議端末装置１２０の全景、人物または資料を映すためのカメラ１２６と、他のテレビ会議端末装置１２０の画像を表示するためのモニタ１２７と、カメラ１２６及びモニタ１２７の画像に対する画像ＣＯＤＥＣ１２８と、音声ＣＯＤＥＣ１２５と画像ＣＯＤＥＣ１２８の入力／出力信号に対する多重化／分離部（ＭＵＸ／ＤＭＵＸ）１２９とで構成されている。
【００１５】
そして、このような構成を有する各テレビ会議端末装置１２０が多地点制御装置１１０に相互接続されている。
この多地点制御装置１１０は、各テレビ会議端末装置１２０からのまたは各テレビ会議端末装置１２０への音声・映像データに対する多重化／分離部１１１と、この多重化／分離部１１１に接続された音声ＣＯＤＥＣ１１２と、各音声ＣＯＤＥＣ１１２からの音声信号のレベルを比較する音声レベル比較器１１３と、この比較器１１３で比較した後の音声信号を合成して音声ＣＯＤＥＣ１１２及び多重化／分離部１１１を介して各テレビ会議端末装置１２０のスピーカ１２３へ送るためのミキサ１１４と、多重化／分離部１１１で分離された映像データを選択して多重化／分離部１１１を介して各テレビ会議端末装置１２０のモニタ１２７へ当該映像データを送る画像選択部１１５と、音声レベル比較器１１３での比較結果を受けて画像選択部１１５に選択信号を与える制御部１１６とで構成されている。
【００１６】
この従来例においては、各テレビ会議端末装置１２０のマイクロホン群１２１からの合成音声のレベルを多地点制御装置１１０内の音声レベル比較器１１３で比較し、これらの中で最大の音声レベルを出力したテレビ会議端末装置１２０をＮＳに決定してこのテレビ会議端末装置１２０からの映像データを画像選択部４００で選択し、他のテレビ会議端末装置１２０へ分配している。
【００１７】
次に、図４７は上記画像選択部４００の内部ブロック図である。
入力端子４１０には、ｎ地点の会議室Ａ，Ｂ，Ｃ，・・・Ｘの映像データが入力される。これらの映像データは共にｎ：１選択を行うＮＳ選択部４２０並びにＰＳ選択部４３０に入力される。このＮＳ選択部４２０とＰＳ選択部４３０は、前記制御部１１６からの選択信号を受けて、それぞれ、ＮＳ，ＰＳとなっている会議室の映像データをｎ個のＮＳ／ＰＳ選択部４４０Ａ，４４０Ｂ，４４０Ｃ，・・・４４０Ｘに選択出力する。
【００１８】
これらＮＳ／ＰＳ選択部４４０Ａ，４４０Ｂ，４４０Ｃ，・・・４４０Ｘの出力端子はそれぞれ会議室Ａ，Ｂ，Ｃ，・・・Ｘ用の映像データの出力端子４５０に接続されており、ＮＳまたはＰＳとなっている会議室の映像データを選択出力する。
【００１９】
このような構成の画像選択部４００において、ＮＳに会議室Ａが、ＰＳに会議室Ｅが設定されると、制御部１１６はＮＳ選択部４２０に会議室Ａの映像データの選択信号をＰＳ選択部４３０に会議室Ｅの映像データの選択信号を出力する。これを受けて、ＮＳ選択部４２０とＰＳ選択部４３０はそれぞれ会議室Ａ、会議室Ｅからの映像データをＮＳ／ＰＳ選択部４４０Ａ，４４０Ｂ，・・・４４０Ｘへ選択出力する。そして、ＮＳ／ＰＳ選択部４４０ＡではＰＳとなっている会議室Ｅの映像データを選択出力し、それ以外のＮＳ／ＰＳ選択部４４０Ｂ，４４０Ｃ，・・・４４０ＸではＮＳとなっている会議室Ａの映像データを制御部１１６から選択信号を受けて選択出力する。このことにより、ＮＳ以外の会議室Ｂ，Ｃ，・・・ＸにはＮＳとなっている会議室Ａの画像が、ＮＳになった会議室ＡにはＰＳとなっている会議室Ｅの画像が表示される。
【００２０】
【発明が解決しようとする課題】
前記最初に述べた従来例の場合、モニタ表示が発言地点が複数／単数に係わりなく一定の固定表示形式で行われるため、モニタに同時表示される地点数は常時同じであった。したがって、１地点のみを表示する方式の場合には複数の地点で発言があっても主なる発言者となっている地点のみが表示されていた。また、複数地点を同時表示する方式の場合には１地点でのみ発言がなされているときでも、この地点以外に全く発言を行っていない地点も分割画面に同時に表示されていた。
【００２１】
このため、モニタ画面を見ている人は誰が発言しているかを特定するまでに時間を要し、またこのために多地点でのテレビ会議における臨場感も阻害されていた。
【００２２】
本発明の第１の目的は、発言地点が容易に特定できるようにすると共に、多地点でのテレビ会議における臨場感が表現される表示方式を実現することである。また、前記従来のＮＳ／ＰＳ指定モードを備えた多地点テレビ会議システムの場合には、ＮＳ以外の会議室で会議室の選択を行うと、この会議室がＮＳとなるため、他の会議室の画像が全て切り替わってしまう。さらに、発言者検出により自動的にＮＳを切り換えるモードでは、発言する会議室が変わるたびに意思とは無関係に勝手に画像が切り替わってしまうため、発言を行っている会議室以外の画像を継続して見続けることはできなかった。
【００２３】
このように、従来のＮＳ／ＰＳ指定モードを備えた多地点制御装置では、各会議室は他の会議室とは独立に自分が見たい会議室の画像を選択することができず、他の会議室の操作または発言により、自分の意思とは無関係に表示される会議室が切り替わっていた。このため、会議の運営に支障があった。
【００２４】
本発明の第２の目的は、通常の会議に近いイメージで多地点でのテレビ会議が運営できるようにすることである。
また、前記いずれの多地点テレビ会議システムにおいても会議室の映像のみが表示されるため、発言している人がどこの会議室の人なのか、またはどこに所属している人なのか等を容易に知ることができず、会議のスムーズな運営に支障をきたしていた。
【００２５】
本発明の第３の目的は、多地点テレビ会議システムにおいて表示されている会議室の画像に係わる背景情報（会議室名、地点名、発言者の名前や所属等）を容易に知ることができるようにすることである。
【００２６】
【課題を解決するための手段】
図１は、本発明の原理ブロック図である。
この図において、１−１，１−２・・・１−Ｎは、音声データ及び映像データを送受しうる会議端末装置であり、本発明はこれらのテレビ会議端末装置１−１，１−２，・・・１−Ｎが３地点以上に配置されるテレビ会議システムにおいて各端末１−ｉ（ｉ＝１，２，・・・Ｎ）から音声データおよび映像データを受信して各端末１−ｉへ当該映像データを送信する多地点制御装置を前提とする。
【００２７】
そして、各端末１−ｉの音声入力手段２から出力される音声信号から発言がなされた地点を検出する発言地点検出手段１１と、該発言地点検出手段１１により複数の発言地点が検出された場合には１画面の中にこれらの発言地点の映像が１画面に同時表示される映像データを作成する映像合成手段１２と、該映像合成手段１２により作成された映像データを各端末１−ｉへ送信する映像分配手段１３とを備える。
【００２８】
上記構成において、映像合成手段１２は発言地点検出手段１１により発言が検出されなかった視聴地点向けには、発言地点検出手段１１により発言が検出された発言地点の映像のみが１画面に表示される映像データを作成し、映像分配手段１３は該映像データを視聴地点の端末１１−ｉへ分配するような構成としてもよい。
【００２９】
また、さらには、映像合成手段１２は、発言地点向けには他の発言地点の映像と前回発言地点の映像が１画面に表示される映像データを作成し、映像分配手段１３は、該映像データを各発言者地点の端末１１−ｉへ送信するような構成としてもよい。
【００３０】
図２はさらなる発明の原理ブロック図である。
この発明は、音声データ及び映像データを送受しうるテレビ会議端末装置２０−ｉ（ｉ＝１，２，・・・Ｎ）が３会議室以上に配置される多地点テレビ会議システムにおいて、これらの端末装置２０−ｉ間で往来する音声データ及び映像データを切換制御する多地点制御装置を前提とする。
【００３１】
そして、全ての端末装置２０−１，２０−２，・・・２０−Ｎから全ての会議室の映像データを入力し、各端末装置２０−ｉに他の端末装置２０−ｊ（ｊ≠ｉ；ｊ＝１，２，・・・Ｎ）とは独立に任意の会議室の映像データを切替出力する切替出力手段３１と、ある端末装置２０−ｉからある会議室の画像への切替要求があったとき、この端末装置２０−ｉに送出される映像データのみが上記要求された会議室の映像データに切り替わるように切替出力手段３１を制御する制御手段３２と、を備える。
【００３２】
図３はさらなる別の発明の原理ブロック図である。まず、この発明は、音声データ及び映像データを送受しうるテレビ会議端末４０−ｉ（ｉ＝１，２，・・・Ｎ）が３会議室以上に配置される多地点テレビ会議システムにおいて、これらの端末装置４０−ｉ間で往来する音声データ及び映像データを切換制御する多地点制御装置であって、自会議室の端末装置４０−ｉにおいて表示される会議室の画像を他の会議室の端末装置４０−ｊ（ｊ≠ｉ；ｊ＝１，２，・・・Ｎ）とは独立に選択できる第１のモードと、ある端末装置４０−ｉからの特定のイベント発生に応じて他の端末装置４０−ｊに表示される会議室の画像を強制的に切り替える第２のモードの２つのモードを有し、
各会議室の端末装置４０−ｉからのモード指定要求に応じて、各会議室を前記第１のモードまたは前記第２モードのいずれか一方に設定するモード設定手段５１と、全ての端末装置４０−１，４０−２，・・・４０−Ｎから全ての会議室の映像データを入力し、各端末装置４０−ｉに他の端末装置４０−ｊ（ｊ≠Ｓ；ｊ＝１，２，・・・Ｎ）とは独立に任意の会議室の映像データを切替出力する切替出力手段５２と、前記第２のモードに設定されている会議室の端末装置４０−ｉからある会議室の画像への切替要求があったとき、この端末装置４０−ｉに送出される映像データのみが上記要求された会議室の映像データに切り替わるように前記切替出力手段５２を制御する第１の制御手段５３と、ある会議室の端末装置４０−ｉにおいて前記特定のイベントが発生したとき、前記第１のモードに設定されている会議室の端末装置４０−ｋ（ｋ＝１，２，・・・Ｎ）に送出される映像データのみが当該会議室の映像データに切り替わるように前記切替出力手段５２を制御する第２の制御手段５４とを備える。
【００３３】
前記特定のイベントは、例えばある会議室の発言検出またはある会議室の端末装置４０−ｉにおいて行われた画像切替要求操作等である。
上記構成において、例えば、前記モード設定手段５１は、前記第２のモードに設定されている会議室の端末装置４０−ｉから自動切替許可要求を受信した際、この会議室に対して自動切替許可を設定し、前記第２の制御手段５４は、ある会議室の端末装置４０−ｉにおいて発言が検出されたとき、前記第２のモードでかつ前記自動切替許可が設定されている会議室の端末装置４０−ｋ（ｋ＝１，２，・・Ｎ）に送出される映像データが上記ある会議室の端末装置４０−ｉからの映像データに切り替わるように前記切替出力手段５２を制御するような構成としてもよい。
【００３４】
また、上記手段５１，５２，５３、および５４に加え、全ての会議室の中から主会議室を選択・設定する主会議室設定手段５５と、ある会議室の端末装置４０−ｉからモードを前記２つのモードの内いずれか一方のモードに強制的に変更する旨の指定を受けたとき、この会議室が前記主会議室であれば前記モード設定手段５１が管理する全会議室のモードをこの指定されたモードに強制的に変更するモード変更手段５６をさらに備えることとしてもよい。
【００３５】
さらに、上記手段５１，５２，５３，５４または上記手段５１，５２，５３，５４，５５，５６に加え、さらに前記第１及び第２の制御手段５３，５４からの切替情報を受けて、各会議室の端末装置４０−ｉに現在表示されている会議室を記憶する表示会議室管理手段５７と、ある会議室の端末装置４０−ｉからの相手カメラの制御情報を受け取ると、該表示会議室管理手段５７を参照して上記ある会議室に現在表示されている会議室を見つけ、この会議室の端末装置４０−ｉに上記カメラ制御情報を転送する転送手段５８を、さらに備えることとしてもよい。
【００３６】
次に、図４はさらなる別の発明の原理ブロック図である。
図４に示すように、テレビ会議端末装置は、カメラによって撮像された会議室の映像信号にこの映像に係わる背景情報の映像とが重畳された映像信号を生成する映像重畳手段６１と、該映像重畳手段６１によって生成された映像信号を符号化する符号化手段６２とを備える。
【００３７】
また、テレビ会議端末装置は、上記のテレビ会議端末装置の符号化手段６２によって符号化されたデータを映像信号に復号する復号手段６５と、該復号手段６５によって復号された映像信号を基に画像を表示する画像表示手段６６とを備える。
【００３８】
図５はさらなる別の発明の原理ブロック図である。
図５に示すように、テレビ会議端末装置は、カメラによって撮像された会議室の映像信号を符号化する符号化手段７１と、該符号化手段７１によって得られた符号化データと前記カメラによって撮像された会議室の映像に係わる背景情報のコードとを多重化する多重化手段７２とを備える。
【００３９】
また、テレビ会議端末装置は、上記テレビ会議端末装置の多重化手段７２によって作成された多重化データから前記会議室の映像信号の符号化データと前記背景情報のコードとを分離する分離手段７５と、該分離手段７５によって分離された会議室の映像信号の符号化データを映像信号に復号する映像復号手段７６と、前記分離手段７６によって分離された背景情報のコードに対応する映像信号を生成する映像生成手段７７と、前記映像復号手段７６によって復号された映像信号と該映像生成手段７７によって生成された映像信号とを重畳する映像重畳手段７８とを備える。
【００４０】
図６はさらなる別の発明の原理ブロック図である。
この発明は、映像データを送受しうるテレビ会議用端末装置が３地点以上の会議室に配置された多地点テレビ会議室において、これらの端末装置間で往来する映像データを切換制御する多地点制御装置を前提とする。そして、切替選択された会議室の端末装置から映像信号が符号化されて送信されてくるこの会議室の映像に係わる背景情報に対応する番号を基に、この背景情報のコードを生成するコード生成手段８１と上記切替選択された会議室の端末装置から送信されてくるこの会議室の映像信号の符号化データと該コード生成手段８１によって生成されたコードとを多重化して、これによって得られた多重化信号を各端末装置に分配する多重化・分配手段８２とを備える。
【００４１】
コード生成手段８１は、上記番号から当該背景情報のコードへの変換を、例えば各会議室に予め割り当てられた番号とこれに対応する背景情報（例えば、地点名）のコードとが１対１に対応付けられて蓄積されているデータベースを参照することにより行う。
【００４２】
また、図６に示すように、テレビ会議端末装置は、上記多地点制御装置から送信されてくる多重化信号を、会議室の映像信号の符号化データとこの会議室の映像の背景情報に対応するコードとに分離する信号分離手段８５と、該信号分離手段８５によって分離された符号化データから会議室の映像信号を復号する映像復号手段８６と、前記信号分離手段８５によって分離されたコードに対応する背景情報の映像信号を生成する映像生成手段８７と、前記映像復号手段８６によって復号された映像信号と該背景情報映像生成手段８７によって生成された映像信号とを重畳する映像重畳手段８８とを備える。
【００４３】
図７は、さらなる別の発明の原理ブロック図である。
この発明は、映像データを送受しうるテレビ会議用端末が３地点以上の会議室に配置された多地点テレビ会議システムにおいて、これらの端末間で往来する映像データを切換制御する多地点制御装置を前提とする。
【００４４】
そして、切替選択された会議室の端末装置から映像信号が符号されて送信されてくるこの会議室の映像の背景情報に対応する番号を基にこの背景情報の映像信号を生成する映像生成手段９１と、前記切替選択された会議室の端末装置から送信されてくるこの会議室の映像信号の符号化データを映像信号に復号する映像復号手段９２と、該映像復号手段９２によって復号された映像信号と前記映像生成手段９１によって生成された映像信号とを重畳する映像重畳手段９３と、該映像重畳手段９３によって作成された映像信号を符号化する符号化手段９４とを備える。
【００４５】
図７に示すように、テレビ会議端末装置は、上記多地点制御装置の符号化手段９４によって得られた符号化データを映像信号に復号する映像復号手段９５と、該映像復号手段９５によって復号された映像信号を基に画像を表示する画像表示手段９６とを備える。
【００４６】
前記背景情報のコードは、例えば上述した地点名、会議室の名称、所属部署名等の文字コード等が挙げられる。
更なる別の発明は、音声データ及び映像データを送受しうるテレビ会議端末装置が複数地点に配置されるとともに、これらの端末装置間で往来するデータの切換制御を行う多地点制御装置が該端末装置間に介装されて成る多地点テレビ会議システムにおいて、各端末装置は会議室の映像とこの映像の背景情報とが重畳された映像データを多地点制御装置に送信するとともに、多地点制御装置から切換選択された映像データを受信して当該会議室の映像とこの映像の背景情報の映像とを重畳表示することを特徴とする。
【００４７】
更なる別の発明は、音声データ及び映像データを送受しうるテレビ会議端末装置が複数地点に配置されるとともに、これらの端末装置間で往来するデータの切換制御を行う多地点制御装置が該端末装置間に介装されて成る多地点テレビ会議システムにおいて、切換選択された会議室の映像とこの映像に係わる背景情報の映像とが重畳された映像データを多地点制御装置において生成し、各端末装置では、この映像データを該多地点制御装置から受信して当該会議室の映像とこの映像に係わる背景情報の映像とを重畳表示することを特徴とする。
【００４８】
更なる別の発明は、音声データ及び映像データを送受しうるテレビ会議端末装置が複数地点に配置されるとともに、これらの端末装置間で往来するデータの切換制御を行う多地点制御装置が該端末装置間に介装されて成る多地点テレビ会議システムにおいて、各端末装置は会議室の映像とこの映像に係わる背景情報とが多重化されたデータを多地点制御装置に送信するとともに、該多地点制御装置から切換選択された多重化データを受信して当該会議室の映像とこの映像に係わる背景情報の画像とを重畳表示することを特徴とする。
【００４９】
更なる別の発明は、音声データ及び映像データを送受しうるテレビ会議端末装置が複数地点に配置されるとともに、これらの端末装置間で往来するデータの切換制御を行う多地点制御装置が該端末装置間に介装されて成る多地点テレビ会議システムにおいて、切換選択された会議室の映像とこの映像に係わる背景情報とが多重化されたデータを多地点制御装置において生成し、各端末装置では、この多重化データを該多地点制御装置から受信して当該会議室の映像とこの映像に係わる背景情報の画像とを重畳表示することを特徴とする。
【００５０】
この発明によれば、発言地点検出手段１１によって各地点で発言があったか否かを各端末装置１−１，１−２，・・・１−Ｎからの音声入力信号等によって検出する。映像合成手段１２は、これらの発言が検出された地点の映像信号を分割合成して、１画面の中に発言地点の画像が１画面に表示される映像信号を生成する。映像分配手段１３はこのようにして生成された映像信号を各端末１−ｉ（ｉ＝１，２，・・・Ｎ）へ分配する。したがって、複数地点で発言があった場合には、各端末１−ｉには複数の発言地点の映像が表示される。また、発言地点数に応じて画面に表示される地点数も増減する。
【００５１】
また、上記発明においては、映像合成手段１２は視聴者地点向けの画像として発言地点の映像のみが１画面に表示される映像データを作成し、映像分配手段１２がこの映像データを視聴者地点の端末１−ｉへ分配する。
【００５２】
したがって、複数の地点で発言があった場合、視聴者地点の端末１−ｉには複数の発言地点の映像が同時に表示される。
また、上記発明においては、映像合成手段１２は各発言地点向けの画像として、他の発言地点と前回の発言地点とが１画面に表示される映像データを作成し、映像分配手段１３がこの映像データを各発言地点へ分配する。
【００５３】
したがって、発言を行った地点の端末装置１−ｉには自己以外の発言地点の映像と前回発言地点の映像とが同時に表示される。
さらなる発明においては、ある端末装置２０−ｉ（ｉ＝１，２，・・・Ｎ）から画像切替要求があったとき、制御手段３２はこの端末２０−ｉに送出される映像データのみがこの要求において指定された会議室の映像データに切り替わるように切替出力手段３１を制御する。
【００５４】
したがって、各会議室において端末装置２０−ｉの操作により任意の会議室への画像切替要求を行うと、他の会議室の画像を切り替えることなくこの操作を行った会議室の画像のみが指定された任意の会議室の画像に切り替わる。
【００５５】
更なる別の発明の作用は次の通りである。
ある会議室において端末装置４０−ｉによりモード指定操作を行うと、モード設定手段５１はこの会議室のモードとしてこの指定されたモードを設定する。
【００５６】
そして、第２のモードに設定されている会議室において端末装置４０−ｉの操作により、ある会議室の画像への切替要求を行うと、第１の制御手段５３はこの切替要求を行った会議室の端末装置４０−ｉに送出される映像データのみが上記要求のあった会議室の映像データに切り替わるように切替出力手段５２を制御する。
【００５７】
また、ある会議室の端末装置４０−ｉにおいて特定のイベント（発言または画像切替操作等）が発生すると、第２の制御手段５４は第１のモードに設定されている会議室の映像データのみが上記特定のイベントによって決定される当該会議室の映像データに切り替えるように切替出力手段５２を制御する。
【００５８】
したがって、第１のモードに設定されている会議室は、端末装置４０−ｉの操作により他の会議室とは独立に見たい会議室の画像を選択でき、また他の会議室の発言や画像切替操作等により見ている画像が切り替わってしまうこともない。
【００５９】
上記発明においては、第２のモードに設定されている会議室の端末装置４０−ｉにおいて自動切替許可指定の操作を行うと、モード設定手段５１がこの会議室に対しこの旨を設定する。
【００６０】
そして、ある会議室において発言が検出されたとき、第２の制御手段５４は第１のモードまたは第２のモードでかつ自動切替許可が設定されている会議室の端末装置４０−ｉに送出される映像データに対しては上記特定のイベント検出時のように切替出力手段５２を制御するが、第２のモードであっても自動切替許可が設定されていない会議室の端末装置４０−ｊに対しては上記発言が検出された会議室の映像データが送出されるように切替出力手段５２を制御する。
【００６１】
したがって、第２のモードにおいて自動切替許可が設定されている会議室の端末装置４０−ｉにおいては、発言が検出された場合のみ、この発言を行った会議室の画像に自動的に切り替わる。
【００６２】
上記発明においては、主会議室設定手段５５がシステム内の全会議の中から、主会議を選択・設定する。
そして、ある会議室が端末装置４０−ｉの操作により第１または第２のモードへの強制変更要求の操作を行うと、モード変更手段５６はこの要求をこの操作を行った会議室が主会議室のときのみ受け付け、受け付け後、全会議室のモードを指定されたモードに強制的に変更する。
【００６３】
したがって、主会議室に設定されている会議室は、端末装置４０−ｉの操作によりシステム内の全ての会議室のモードを所望するモードに強制的に変更できる。
【００６４】
上記発明においては、表示会議室管理手段５７が第１及び第２の制御手段５３，５４から切替出力手段５２の切替情報を受けて、各会議室において現在表示されている会議室を記憶する。
【００６５】
そして、ある会議室が端末装置４０−ｉの操作により相手カメラの制御情報を送出すると、転送手段５８は表示会議室管理手段５７を参照してこの会議室に現在画像が表示されている会議室の端末装置４０−ｊへ上記相手カメラの制御情報を転送する。
【００６６】
したがって、全ての会議室は端末装置４０−ｉの操作により、現在モニタに画像が表示されている会議室内のカメラを遠隔制御できる。
さらなる別の発明のテレビ会議端末装置では、映像重畳手段６１がカメラによって撮像された会議室の映像信号にこの映像信号によって表示される映像に係わる背景情報（例えば、地点名、会議室の名称、話者の所属部署など）の映像信号を重畳させる。そして、この重畳によって得られた映像信号を符号化手段６２によって符号化して、これによって得られた符号化データを多地点制御装置に送出する。
【００６７】
上記発明のテレビ会議端末装置は、多地点制御装置から上記符号化データを受信すると、この符号化データを復号手段６５により映像信号に復号する。そしてこの映像信号を画像表示手段６６により画像として表示する。
【００６８】
したがって、上記発明のテレビ会議端末装置により多地点テレビ会議システムを構築することにより、各会議室において当該会議室の画像をこの画像の背景情報（地点名等）と共に表示できる。
【００６９】
更なる別の発明のテレビ会議端末装置においては、符号化手段７１によりカメラによって撮像された会議室の映像信号を符号化し、多重化手段７２がこの符号化によって得られた符号化データと上記映像信号によって表示される画像に係わる背景情報のコードとを多重化する。そして、この多重化によって得られたデータ（多重化データ）は、多地点制御装置を介してテレビ会議端末装置に分配される。
【００７０】
上記発明のテレビ会議端末装置は、上記多重化データを受信すると、これを分離手段７５により会議室の映像信号の符号化データとこの映像信号によって表示される映像に係わる背景情報のコードとを分離する。そして、映像信号手段７６により上記符号化データを会議室の映像信号に復号すると共に、映像生成手段７７により上記コードに対応する映像信号を生成する。次に、映像重畳手段７８がこれらの映像信号を重畳する。そして、これにより得られた映像信号に対応する画像を所定の表示装置に表示する。
【００７１】
したがって、上記発明のテレビ会議端末装置を用いて多地点テレビ会議システムを構築することにより、前記発明と同様に各会議室において当該会議室の画像をこの画像の背景情報と共に表示できる。
【００７２】
更なる別の発明の多地点制御装置においては、コード生成手段８１が切替選択されたテレビ会議用端末装置（以下、端末装置と略称する）から送信されてくるこの会議室の映像信号により表示される映像に係わる背景情報に対応する番号を基に、この背景情報のコードを生成する。そして多重化・分配手段８２がこのコードと上記映像信号の符号化データとを多重化して各端末装置へ分配する。
【００７３】
上記発明のテレビ会議端末装置は、この多地点制御装置から送信されてくる多重化信号を、信号分離手段８５より上記切替選択された会議室の映像の符号化データとこの会議室の映像の背景情報に対応するコードとに分離する。そして、上記符号化データを映像復号手段８６により映像信号に復号すると共に、映像生成手段８７により上記コードに対応する背景情報の映像信号を生成する。次に、これらの映像信号を映像重畳手段８８により重畳する。そして、これにより得られた映像信号に対応する画像を所定の表示装置に表示する。
【００７４】
したがって、上記発明のテレビ会議端末装置と多地点制御装置とで多地点テレビ会議システムを構築することにより、各会議室において当該会議室の画像をこの画像の背景情報と共に表示できる。
【００７５】
更なる別の発明の多地点制御装置においては、映像生成手段９１が切替選択された会議室の端末装置から送信されてくるこの会議室の映像の背景情報に対応する番号を基にこの背景情報の映像信号を生成する。また、映像復号手段９２が同じく上記切替選択された端末装置から送信されてくるこの会議室の映像信号の符号データを復号する。続いて、映像重畳手段９３がこれらの映像信号を重畳し、これによって得られた映像信号を符号化手段８４が符号化する。そして、所定の分配手段により、この符号化によって得られたデータ（符号化データ）を上記発明の各端末装置へ分配する。
【００７６】
これらの各端末装置においては、上記符号化データを映像復号手段９５により会議室の映像に背景情報の映像が重畳された画像の映像信号に復号し、この画像を画像表示手段９６により表示する。
【００７７】
したがって、上記発明の多地点制御装置とテレビ会議端末装置を用いて多地点テレビ会議システムを構築することにより、各会議室において当該会議室の画像をこの画像の背景情報と共に表示できる。
【００７８】
更なる別の発明では、各テレビ会議端末装置は多地点制御装置に対しカメラにより撮像された会議室の映像信号とこの撮像された会議室の映像に係わる背景情報の映像信号とを重畳して多地点制御装置に送信する。
【００７９】
多地点制御装置では、これらの各端末装置から送信されてくる２つの映像信号が重畳された映像データを切換選択して、各端末装置へ分配する。
各端末装置では、多地点制御装置からこの映像データを受信して当該会議室の映像にこの映像に係わる背景情報が重畳された映像を表示する。
【００８０】
また、更なる別の発明では、上記２つの映像信号が重畳された映像データの生成を多地点制御装置により行う。そして、上記と同様にして各端末装置では当該会議室の映像にこの映像に係わる背景情報の映像を重畳させて表示する。
【００８１】
また、更なる別の発明では、各端末装置はカメラにより撮像された会議室の映像信号の符号化データとこの撮像された会議室の映像の背景情報とを多重化して多地点制御装置に送信する。
【００８２】
多地点制御装置では、これらの各端末装置から送信されてくる多重化データを切換選択して各端末装置へ分配する。
各端末装置は、多地点制御装置からこの多重化データを受信して当該会議室の映像にこの映像に係わる背景情報の映像を重畳させて表示する。
【００８３】
また、更なる別の発明では、上記多重化データの作成を多重化制御装置により行う。そして、上述と同様にして、各端末装置はこの多重化データを受信して、当該会議室の映像とこの映像に係わる背景情報の映像とが重畳された画像を表示する。
【００８４】
したがって、各会議室において当該会議室の映像と共にこの映像に係わる背景情報（会議室名、話者の名前、話者の所属部署名等）の映像を同一画面上に表示できる。
【００８５】
【発明の実施の形態】
以下、図面を参照しながら本発明の実施例を説明する。
図８は本発明の第１実施例である多地点テレビ会議システムの全体構成図である。
【００８６】
同図において、センタ局に設置された多地点制御装置１１００は、ＩＳＤＮや高速ディジタル専用線等のネットワーク１４００を介してＡ，Ｂ，Ｃ，Ｄ，及びＥの５地点にある会議室のテレビ会議端末装置１２００（１２００Ａ，１２００Ｂ，１２００Ｃ，１２００Ｄ、および１２００Ｅ）に接続されている。
【００８７】
図９は上記多地点テレビ会議システムの詳細な構成図である。
各テレビ会議端末装置１２００Ａ〜１２００Ｅには、会議参加者に対向して設けられた複数個のマイクロホン群１２０１と、これらのマイクロホン群１２０１からの出力を合成するマイクミキサ１２０２と、他のテレビ会議端末装置からの音声を出力するスピーカ１２０３と、このスピーカ１２０３の出力音声がマイクロホン群１２０１へ回り込まないようにするための入出力音声のスイッチング動作またはエコー消去動作等を行う音声制御部１２０４と、この音声制御部１２０４からのまたは音声制御部１２０４への音声に対する符号化／復号化部（以下、音声ＣＯＤＥＣと略称する）１２０５と、テレビ会議端末装置１２００（１２００Ａ〜１２００Ｅ）の全景、人物または資料を映すためのカメラ１２０６と、他の会議端末装置１２００の画像を表示するためのモニタ１２０７と、これらのカメラ１２０６及びモニタ１２０７の画像に対する画像ＣＯＤＥＣ１２０８と、音声ＣＯＤＥＣ１２０５と画像ＣＯＤＥＣ１２０８の入力／出力信号に対する多重化／分離部（ＭＵＸ／ＤＭＵＸ）１２０９とで構成されている。
【００８８】
このような構成を有する各テレビ会議端末装置１２００Ａ〜１２００Ｅが多地点制御装置１１０に相互接続されている。この多地点制御装置１１００は、各テレビ会議端末装置１２００Ａ〜１２００Ｅからの又は各テレビ会議端末装置１２００Ａ〜１２００Ｅへの音声・画像データに対する多重化／分離部１１０１と、この多重化／分離部１１０１に接続された音声ＣＯＤＥＣ１１０２と、各音声ＣＯＤＥＣ１１０２から入力する音声信号のレベルから各地点Ａ〜Ｅでの発言の有無を検出する音声検出部１１０３と、この検出部１１０３で発言が検出された地点の音声信号を合成して音声ＣＯＤＥＣ１１０２及び多重化／分離部１１０１を介して各テレビ会議端末装置１２００Ａ〜１２００Ｅのスピーカ１１０３へ送るための音声ミキサ１１０４と、上記音声検出部１１０３から各地点Ａ〜Ｅの発言の有無情報を受けて多重化／分離部１１０１から入力される各地点Ａ〜Ｅの映像データの中から１画面の中に合成すべき映像データを選択するとともにこの画面合成のための情報を出力する画面選択部１１０５と、該画面選択部１１０５から入力される映像データを基に上記画面合成情報によって指示される複数の合成画面の映像データを作成し、これらの合成画面の映像データを多重化／分離部１１０１を介し該当する地点の会議室のテレビ会議端末装置１２００へ分配する画面合成部１１０６から構成される。
【００８９】
上記構成において、音声検出部１１０３は、発言が行われている地点の検出をテレビ会議端末装置１２００Ａ〜１２００Ｅのモニタ１２０７に表示可能な最大の地点数分（例えば、４地点）だけ行う。この検出は、まず音声レベルが所定の閾値以上である地点を選択することにより行う。次にこの選択した地点数が上記最大地点数よりも多いか否かを調べ、多い場合には音声レベルの大きい方から上記最大地点数に等しい数の地点を選択する。この選択により、各地点Ａ〜Ｅは発言を行っている発言地点と発言を行っていない視聴地点とに分けられる。
【００９０】
そして、このようにして選択した全ての発言地点の映像データを、画面選択部１１０５と画面合成部１１０６とを用いて分割合成し、１画面の映像データを作成する。
【００９１】
この映像データは、発言地点と視聴地点とで異なる。したがって、多地点制御装置１１００のテレビ会議端末装置１２００Ａ〜１２００Ｅに対する画面並びに音声の入出力インタフェースは図１０に示すようになる。尚、実際には後述するように発言地点への画面出力は各地点毎に異なる。
【００９２】
音声ミキサ１１０４はこのように画像合成部１１０６が発言地点と視聴地点にそれぞれ異なる画像（映像データ）を出力するのに対応して、発言地点と視聴地点とで異なった音声を出力する（各地点Ａ〜Ｅの画像に適合した音声をミキシングして出力する）。これは、画面選択部１１０５から入力される画面合成情報を基に行う。
【００９３】
次に、各地点Ａ〜Ｅで発言があった場合の表示方式の例を説明する。
まず、図１１は４地点（この場合は地点Ａ，Ｂ，Ｃ，Ｄ）が同時に発言した場合の各テレビ会議端末装置１２００のモニタ１２０７上での表示画面（モニタ画面）を示す図である。同図(a) は発言していない視聴地点（この場合は地点Ｅの表示画面）、同図(b) は発言地点の１つであるＡ地点の表示画面である。
【００９４】
この場合には発言地点が４つなので、各地点Ａ〜Ｅのモニタ１２０７には４分割の画面が表示される。すなわち、視聴地点には同図(a) に示すように発言地点であるＡ，Ｂ，Ｃ，Ｄの４地点の画像が分割表示される。視聴地点の画面は全地点で共通である。
【００９５】
一方、発言地点であるＡ地点には他の発言地点であるＢ，Ｃ，Ｄの３地点の画像と共に前回の発言地点であるＥ地点の画像が表示される。また、図示していないが地点Ｂ，Ｃ，Ｄも地点Ａとほぼ同様であり、自地点以外の発言地点（３地点）の画像と前回発言地点Ｅの画像が分割表示される。
【００９６】
次に、図１２は２地点（この場合は地点Ａ，Ｂ）が発言した場合のモニタ画面の表示形式を示す図である。
この場合には発言地点が２つなのでモニタ画面には２つの地点の画像が分割表示される。
【００９７】
まず、視聴地点である地点Ｃ，Ｄ，Ｅのモニタ１２０７には同図(a) に示すように発言地点である地点Ａと地点Ｂの画像が分割表示される。一方、発言地点である地点Ａのモニタ１２０７には同図(b) に示すようにもう１つの発言地点である地点Ｂの画像と前回の発言地点Ｅの画像が分割表示される。図示してはいないが、同様にして発言地点Ｂのモニタ１２０７には地点Ｂに替えて他方の発言地点Ａの画像が前回の発言地点Ｅの画像と共に分割表示される。
【００９８】
このように、発言地点が２地点の場合には、視聴地点のモニタ１２０７には２つの発言地点の画像が表示され、発言地点のモニタ１２０７には他方の発言地点の画像と前回発言地点の画像が表示される。
【００９９】
続いて、図１３は発言地点が１地点（この場合は地点Ａ）のみの場合のモニタ画面の表示形式を示す図である。
この場合にはモニタ画面は分割されず、視聴地点である地点Ｂ，Ｃ，Ｄ，Ｅのモニタ１２０７には同図(a) に示すように発言地点Ａの画像が全面表示される。一方、発言地点Ａのモニタ１２０７には同図(b) に示すように前回の発言地点Ｅの画像が全面に表示される。
【０１００】
このように１地点のみが発言した場合には、視聴地点のモニタ１２０７には発言地点の画像のみが、発言地点のモニタ１２０７には前回発言地点の画像のみが表示される。
【０１０１】
ところで、64Kb/sから２Mb/sまでの１次群サブレートを用いる動画像通信用の映像符号化標準であるＣＣＩＴＴ（国際電信電話諮問委員会）の勧告Ｈ．２６１では、テレビ電話やテレビ会議用の画像コーディックの標準化として、世界共通の中間フォーマットＣＩＦ（Common Intermediate Format) を定めた。また、小型テレビ電話のような低ビットレートの簡単端末のために、解像度を水平・垂直とも上記ＣＩＦの半分にした。ＱＣＩＦ（Quater CIF) につていも定義を行った。
【０１０２】
図１４に示すように各地点Ａ〜Ｅのテレビ会議端末装置１２００Ａ〜１２００Ｅから多地点制御装置１１００への映像データの伝送をこのＣＩＦで行う場合において、前記図１１(a) に示すように画面を４分割して４地点の画像を同時に表示する方法を図１５に模式的に示す。
【０１０３】
この場合、多地点制御装置１１００内にＣＩＦ／ＱＣＩＦコンバータを内蔵し、地点Ａ，Ｂ，Ｃ，ＤのＣＩＦフォーマットの映像データを一端ＱＣＩＦフォーマットに変換した後、これら４地点のＱＣＩＦフォーマットの映像データを１画面に合成し図１１(a) に示す４地点Ａ，Ｂ，Ｃ，Ｄの画像が同時に表示される４分割画面のＣＩＦフォーマットの映像データを合成する。そして、これを地点Ｅのテレビ会議端末装置１２００Ｅへ伝送する。
【０１０４】
また、図１３に示すような１地点のみが発言した場合のモニタ表示においては、多地点制御装置１１００は受信したＣＩＦフォーマットの映像データをＣＩＦ／ＱＣＩＦコンバータを用いずにそのまま画面選択部１１０５及び画面合成部１１０６を介し当該地点のテレビ会議端末装置１２００へ選択出力する。
【０１０５】
次に、上記構成の多地点制御装置１１００により行われる各地点Ａ〜Ｅのテレビ会議端末装置１２００Ａ〜１２００Ｅへの画面出力処理（映像データ送信処理）を図１６乃至図１８のフローチャートを参照しながら説明する。
【０１０６】
図１６は、この処理のゼネラル・フローである。
同図において、まず、音声検出部１１０３により発言地点数を検出する（Ｓ１１）。次に、この検出結果を基に現在１地点のみで発言されているか否かを判別する（Ｓ１２）。そして、複数地点で発言があれば（Ｓ１２，ＮＯ）、複数地点の画面（画像）を各地点Ａ〜Ｅのテレビ会議端末装置１２００のモニタ１２０７に分割表示するための複数画面出力処理（Ｓ１３）、一方、１地点でのみ発言がなされていれば（Ｓ１２，ＹＥＳ）、各地点Ａ〜Ｅのモニタ１２０７に当該１地点の画面（画像）のみを表示する単画面出力処理を行う（Ｓ１４）。
【０１０７】
次に、上記複数の画面出力処理Ｓ１３の詳細フローチャートを図１７に示す。この処理においては、まず複数の発言地点の画面を１フレームに合成する（Ｓ１３１）。このことにより、図１１(a) または図１２(a) に示す形式の画面が作成される。
【０１０８】
続いて、画面の出力先（送信先）が現発言地点（現在の発言地点）であるか否か判別する（Ｓ１３２）。
そして、現発言地点であれば（Ｓ１３２，ＹＥＳ）分割画面表示用の映像データ中の送信先である発言地点の映像データを前回発言地点の映像データに入れ換え（Ｓ１３３）、これにより生成される分割画面の映像データを上記発言地点へ出力（送信）する（Ｓ１３４）。
【０１０９】
これにより、例えば図１１(a) または図１２(a) に示す分割画面の映像データがそれぞれ図１１(b) または図１２(b) に示す分割画面に変更されて地点Ａのテレビ会議端末装置１２００Ａへ送信される。
【０１１０】
一方、上記ステップＳ１３２で送信先が現発言地点でないすなわち視聴地点であれば上記ステップＳ１３１で合成した映像データをこの視聴地点へ出力（送信）する（Ｓ１３５）。
【０１１１】
これにより、例えば図１１(a) または図１２(a) に示す分割画面の映像データが視聴地点である地点Ｅのテレビ会議端末装置１２００Ｅへ送信される。
次に、図１８は前記単画面出力処理Ｓ１４の詳細フローチャートである。
【０１１２】
この処理においては、まず、画面の出力先（送信先）が現発言地点であるか否かを調べ（Ｓ１４１）、現発言地点であれば（ＹＥＳ）前回の発言地点の映像データのみから成る単画面の映像データを現発言地点のテレビ会議端末装置１２００へ出力（送信）する（Ｓ１４２）。
【０１１３】
これにより、例えば、単独の発言地点である地点Ａへ図１３(b) に示す形式の前回発言地点Ｅの単画面の映像データが送信される。
一方、上記ステップＳ１４１で視聴地点であると判別すれば、現発言地点の映像データのみから成る単画面の映像データを視聴地点のテレビ会議端末装置１２０へ出力（送信）する（Ｓ１４３）。
【０１１４】
このことにより、例えば発言地点が地点Ａのみであったとき図１３(a) に示す形式の現発言地点Ａの単画面の映像データが視聴地点Ｂ，Ｃ，Ｄ，Ｅへ出力（送信）される。
【０１１５】
尚、本実施例においては、多地点制御装置１１００側で各地点の発言検出を行っているが、各テレビ会議端末装置１２００側で自地点の発言検出を行うようにして、多地点制御装置１１００に対しては発言の有無を示すデータ（また、必要に応じてさらに音声レベルデータも）を送るようにしてもよい。
【０１１６】
次に、図１９は本発明の第２実施例のテレビ会議システムの全体構成図である。
このシステムは、前述した図４６の従来例に対してテレビ会議端末装置１２０′及び多地点制御装置１１０′とも一部異なっている。
【０１１７】
まず、テレビ会議端末装置１２０′においては、新たに・表示会議室切替・指定モード切替・自動会議室切替許可／不許可指定・相手カメラ制御・指定モード強制変更の各操作を行うための操作部１３１と、この操作部１３１から出力される操作信号を所定フォーマットの操作データに変換して多重化／分離部１２９′に出力するデータ伝送部１３２を備えている。多重化／分離部１２９′は画像コーデック１２８からの画像データ、音声コーデック１２５からの音声データに加えてこのデータ伝送部１３２からの操作データも多重化して多地点制御装置１１０′へ送出する。
【０１１８】
一方、多地点制御装置１１０′においては、各テレビ会議端末装置１２０Ａ′〜１２０Ｘ′から送信されてくる上記操作データを多重化／分離部１１１′から抽出するためのデータ伝送部１１７が各多重化／分離部１１１′毎に新たに設けられている。各データ伝送部１１７は抽出した操作データを制御部１１６′に出力する。
【０１１９】
図２０はこの画像選択部１１５′の内部構成図である。
同図に示すように、この画像選択部１１５′は会議室Ａ，Ｂ，Ｃ，・・・Ｘから送られてくる映像データが入力されるｎ個の入力端子１１５５と各会議室Ａ，Ｂ，Ｃ，・・・Ｘに送られる映像データが出力されるｎ個の出力端子１１５６とを有し、これらの入力端子１１５５と出力端子１１５６がマトリクス状に配置されたｎ×ｎ個のスイッチ素子１１５７のｎ本の入線１１５８とｎ本の出線１１５９に接続された構成になっている。このため、ｎ個の各入力端子１１５５は、いずれも対応するｎ個のスイッチ素子１１５７を介してｎ個の出力端子１１５６の全てに接続可能であり、各会議室Ａ，Ｂ，Ｃ，・・・Ｘのテレビ会議端末装置１２０′には任意の会議室の映像データを送れるようになっている。尚、上記ｎ×ｎ個の格子状に配置されたスイッチ素子１１５７群をマトリクス・スイッチャ１１５４と呼ぶ。画像選択部１１５′がこのような構成となっているため、本実施例では各会議室は前記ＮＳ／ＰＳ指定モード以外に独立指定モードを選択することが可能である。
【０１２０】
この独立指定モードは他の会議室の操作や発言に影響されることなく独立に所望の会議室の画像を選択可能なモードである。尚、本実施例では独立指定モードにおいても発言者検出があったときにＮＳの画面に自動的に切り替えるか否かを選択できるようになっている。
【０１２１】
また、さらに全ての会議室のモードを強制的に自己が所望するモードに切替可能なチェアマン会議室（主会議室）の設定も可能になっている。
図２１はＮＳ／ＰＳ指定モードと独立指定モードが混在しているときの本実施例の動作の一例を示す模式図である。
【０１２２】
同図において、会議室Ａ，Ｂ，Ｃ，Ｄ，ＥはＮＳ／ＰＳ指定モードとなっており、会議室Ｃのみが独立指定モードになっている。
この状態において会議室ＡがＮＳになると図中実線の矢印で示すように会議室Ｂ，Ｄ，Ｅには会議室Ａの画像が表示され、会議室Ａには破線の矢印で示すようにＰＳとなる会議室Ｄの画像が表示される。一方、独立指定モードとなっている会議室Ｃには図中一点鎖線の矢印で示すように指定した会議室Ｅの画像がそのまま表示される。
【０１２３】
次に、制御部１１６′が各テレビ会議端末装置１２０Ａ′〜１２０Ｘ′への映像データの送信制御のために内蔵している各種管理テーブルの構成を図２２乃至図２５に示す。
【０１２４】
まず、図２２は各会議室Ａ，Ｂ，・・・Ｘにおいて現在指定されているモード（指定モード）を管理するモード管理テーブルの構成図である。このテーブルが管理する情報には、上記「指定モード」以外に独立モードにおいて表示する会議室を発言者検出により自動的に切り替えることを許可するか否かを示す「自動会議室切替フラグ」、及びチェアマンとなる会議室を管理するための「チェアマンフラグ」が有る。これらの内、「自動会議室切替フラグ」は独立指定モードとなっている会議室についてのみ有効である。
【０１２５】
次に、図２３はＮＳ／ＰＳ管理テーブルの構成図であり、このテーブルは各会議室毎にその会議室が現在「ＮＳ」，「ＰＳ」、または「Ｓ」（これは、ＮＳまたはＰＳ以外の会議室を示す）のいずれとなっているかを管理するために用いられる。
【０１２６】
さらに、図２４は各会議室で現在表示されている会議室を管理するために用いられる表示会議室テーブルの構成図である。
そして、最後に、図２５はマトリクス・スイッチャ１１５４の各スイッチ素子１１５７の現在の状態を管理するためのマトリクス・スイッチャ状態テーブルの構成図である。同図において、「Ｏ」印がオン「Ｘ」印がオフとなっているスイッチ素子１１５７を示している。
【０１２７】
上記構成の本実施例において、各会議室Ａ，Ｂ，・・・Ｘのテレビ会議端末装置１２０Ａ′，１２０Ｂ′，・・・１２０Ｘ′からセンタ局の多地点制御装置１１０′に上がってくるイベントとしては以下の１）〜６）等がある。
【０１２８】
１）発言者検出
２）表示会議室切替え
３）指定モード切替え
４）自動会議室切替え許可／不許可指定
５）相手カメラ制御
７）指定モード強制変更
続いて、上記各イベントの発生に対応して制御部１１６′が行う動作をフローチャート等を参照しながら説明する。
【０１２９】
尚、これらのイベントが発生する前には、上記各テーブルの状態は上記図２２乃至図２５に示すように設定されているものとする。
すなわち、図２２のモード管理テーブルに示されているように会議室Ａ，Ｄ，・・・ＸはＮＳ／ＰＳ指定モードに設定され、会議室Ｂ，Ｃは独立指定モードに設定されているものとする。また、自動会議室切替フラグは会議室Ｂにおいては許可に、会議室Ｃにおいては不許可に設定されいてる。また、チェアマンは会議室Ａに設定されている。
【０１３０】
また、図２３のＮＳ／ＰＳ管理テーブルに示されているように会議室ＡがＮＳ、会議室ＤがＰＳに設定されており、それ以外はＳに設定されている。
そして、図２４の表示会議室管理テーブルに示されているように現在、会議室Ｄ，・・・Ｘのテレビ会議端末装置１２０Ｄ′，・・・１２０Ｘ′にはＮＳである会議室Ａの画像が表示されており、このＮＳとなっている会議室Ａのテレビ会議端末装置１２０Ａ′にはＰＳとなっている会議室Ｄの画像が表示されている。また、会議室Ｂ，Ｃのテレビ会議端末装置１２０Ｂ′，１２０Ｃ′にはそれぞれ各会議室において選択された会議室Ｃ，Ｄの画像が表示されている。
【０１３１】
以上のような表示状態に対応して、マトリクス・スイッチャ１１５４の各スイッチ素子１１５７の状態は図２５に示すテーブルの内容のようになっている。
上記構成において、まず、上記１）の発言者検出のイベント発生時の制御部１１６′の動作を図２６のフローチャートを参照しながら説明する。
【０１３２】
この場合、まず、音声レベル比較器１１３から発言者検出の通知があると、ＮＳ／ＰＳ管理テーブルを参照し、この通知された発言者（発言会議室）が現在ＮＳとなっているか否か判別する（Ｓ２０１）。
【０１３３】
そして、ＮＳであればこの発言会議室がＮＳに、前回のＮＳがＰＳになるようにＮＳ／ＰＳ管理テーブルを書き換える（Ｓ２０２）。
以上の動作により、例えば会議室Ｘで発言が行われた場合には、ＰＳ／ＮＳ管理テーブルは図２７(a) に示すような状態に書き換えられる。すなわち、会議室ＸがＮＳに書き換えられるのに伴ってＮＳであった会議室ＡがＰＳに書き換えられ、ＰＳであった会議室ＤがＳに書き換えられる。
【０１３４】
続いて、会議室No. （会議室番号）に「１」を初期設定する（Ｓ２０３）。そして、まず、この会議室No. を有する会議室の現在の指定モードをモード管理テーブルを参照して調べ（Ｓ２０４）、ＮＳ／ＰＳ指定モードであれば画像が切り替えられるのでこれに合わせて表示会議室管理テーブルを書き換える（Ｓ２０５）。
【０１３５】
一方、上記ステップＳ２０４で独立指定モードであることが判明した場合には、次に、この会議室の自動会議室切替フラグを参照して自動切替が許可されているか否か判別する（Ｓ２０６）。
【０１３６】
そして、許可されていれば、この会議室の画像は次にＮＳに切り替わるので、これに合わせて表示会議室テーブルのこの会議室の項目を書き換えるが（Ｓ２０５）、不許可であった場合には画像を切り替えないので表示会議室テーブルの書き換えは行わない。
【０１３７】
以上のステップＳ２０４〜Ｓ２０６を、会議室No. 順に全ての会議室について行う（Ｓ２０７，Ｓ２０８）。
以上の動作により、表示会議室管理テーブルは図２４から図２７(b) に示す状態に書き換えられる。すなわち、今度ＰＳとなる会議室Ａに新たにＮＳとなる会議室Ｘの画像が、また、ＰＳからＳとなる会議室ＤＡに同じく新たにＮＳとなる会議室Ａの画像が表示されるように書き換えられる。さらに、会議室Ｂは独立指定モードであっても自動会議室切替フラグが許可に設定されているので新たにＮＳとなる会議室Ｘの画像が表示されるように書き換えられる。ます、図示されてはいないが、残りの会議室Ｅ，・・・は全て会議室Ｘの画像が表示されるように書き換えられる。尚、会議室Ｘには既に今度新たにＰＳとなった会議室Ａの画像が表示されているので、書き換えは行わない。
【０１３８】
以上のようにして、表示会議室管理テーブルの書き換えが終了した後、最後にこの表示会議室管理テーブルの内容に従ってマトリクス・スイッチャ状態テーブルを書き換える（Ｓ２０８）。
【０１３９】
以上の動作により、マトリクス・スイッチャ状態テーブルは図２５に示す状態から図２７(c) に示す状態に書き換えられる。
尚、上記ステップＳ２０１で発言会議室が現在ＮＳとなっていれば、ＮＳ，ＰＳとも変化しないので、テーブルの書き換えは行わず直ちに処理を終了する。したがって、この場合各会議室Ａ，Ｂ，・・・Ｘの画像は変化しない。
【０１４０】
次に、２）表示会議室切替のイベントが発生したときの制御部１１６′の動作を図２８のフローチャートを参照しながら説明する。
いずれかの会議室で画像をある会議室の表示に切り替える操作が行われると、まずモード管理テーブルを参照してこの操作を行った会議室のモードは何であるか判別する（Ｓ２２１）。
【０１４１】
そして、独立指定モードとなっていれば表示会議室管理テーブルのこの会議室の欄を表示指定された会議室に書き換える（Ｓ２２２）。続いて、書き換えられた表示会議室管理テーブルの内容に従ってマトリクス・スイッチャ状態テーブルを書き換える（Ｓ２３１）。
【０１４２】
以上の動作により、各テーブルの状態が図２２乃至図２５に示すようになっているときに、会議室Ｂが会議室Ｘの画像を表示するように切替え操作すると、表示会議室管理テーブルは図２９(a) に示すように会議室Ｂの項目欄のみが会議室Ｃから会議室Ｘに書き換えられる。また、これに伴ってマトリクス・スイッチャ状態テーブルは図２５から図２９(b) に示すように書き換えられる。
【０１４３】
このように、独立指定モードの会議室は他の会議室とは独立に表示される会議室の画像を切り替えることができる。
一方、上記ステップＳ２２１で操作した会議室がＮＳ／ＰＳ指定モードであった場合には、次にＮＳ／ＰＳ管理テーブルを参照してこの会議室が現在ＮＳとなっているかどうか判別する（Ｓ２２３）。そして、ＮＳであればＮＳ／ＰＳ管理テーブルのこの表示指定された会議室の欄をＰＳに書き換える。またこれに伴いＰＳとなっている会議室をＳに書き換える（Ｓ２２４）。すなわち、ＮＳの会議室に表示されるのは原則としてＰＳの会議室なので、これに沿って書き換える。
【０１４４】
以上の動作により、ＮＳとなっている会議室Ａが会議室Ｘの画像を表示するような切替え操作を行うと、ＮＳ／ＰＳ管理テーブルは図２３から図３０(a) に示すように書き換えられる。
【０１４５】
一方、上記ステップＳ２２３で操作した会議室がＰＳまたはＳであればＮＳ／ＰＳ管理テーブルにおいて表示指定された会議室をＮＳに書き換え、これに伴いＮＳとなっている会議室をＰＳに書き換えると共に、ＰＳとなっている会議室をＳに書き換える（Ｓ２２５）。
【０１４６】
この動作により、例えばＰＳとなっている会議室Ｄが会議室Ｘの画像を表示するような切替え操作を行った場合、ＮＳ／ＰＳ管理テーブルは図２３から図３１(a) に示すように書き換えられる。
【０１４７】
以上のようにしてＮＳ／ＰＳ管理テーブルの書き換えを行った後、会議室No. （会議室番号）に「１」を初期設定する（Ｓ２２６）。
次に、モード管理テーブルを参照して、設定されている会議室No. の会議室のモードはＮＳ／ＰＳ指定モードまたは独立指定モードのいずれになっているか調べる（Ｓ２２７）。そして、ＮＳ／ＰＳ指定モードであれば上述のようにして書き換えられたＮＳ／ＰＳ管理テーブルの内容に従って表示会議室管理テーブルのこの会議室の欄を書き換える（Ｓ２２８）。すなわち、ＮＳとなっている会議室にはＰＳの会議室が、その他の会議室には新たにＮＳとなった会議室が表示されるように書き換える。
【０１４８】
一方、上記ステップＳ２２７で会議室のモードが独立指定モードであれば、この会議室は他の会議室からの切替操作の影響を受けないので表示会議室管理テーブルの書き換えは行わない。
【０１４９】
以上のようなステップＳ２２７〜Ｓ２２８の処理を、会議室番号順に全ての会議室について行い（Ｓ２２９，Ｓ２３０）、これが終了すると、書き換えた表示会議室管理テーブルの内容に従ってマトリクス・スイッチャ状態テーブルを書き換える（Ｓ２３１）。
【０１５０】
以上の動作により、ＮＳとなっている会議室Ａが会議室Ｘを表示するような切替え操作を行うと、表示会議室管理テーブルの会議室Ａの欄のみが図３０(b) に示すように会議室Ｄから会議室Ｘに書き換えられる。また、Ｓとなっている会議室Ｄが会議室Ａを表示するような切替え操作を行うと、表示会議室テーブルの内容は図２５から図３１(b) に示すように書き換えられる。すなわち、この場合にはＮＳ／ＰＳモードとなっている会議室の中でＰＳまたはＳになっている会議室の欄がＮＳとなる会議室Ｘに書き換えられる。また、それぞれの場合、マトリクス・スイッチャ状態テーブルは図３０(c) ，図３１(c) に示すように書き換えられる。
【０１５１】
次に、３）指定モード変更のイベントが発生した場合の制御部１１６′の動作を図３２のフローチャートを参照しながら説明する。
ある会議室において指定モードを変更する操作が行われると、まずモード管理テーブルを参照してこの操作を行った会議室のモードは現在独立指定モードまたはＮＳ／ＰＳ指定モードのいずれのモードに設定されているか調べる（Ｓ２４１）。
【０１５２】
そして、独立指定モードであればモード管理テーブルのこの会議室のモードをＮＳ／ＰＳ指定モードに書き換える（Ｓ２４２）。次に、このモード切り替えに伴って同じくモード管理テーブルのこの会議室の自動会議切替フラグをリセットする（Ｓ２４３）。さらに、続いて、ＮＳ／ＰＳ管理テーブルを参照して表示会議室管理テーブルのこの会議室の欄をＮＳとなっている会議室に書き換える（Ｓ２４４）。
【０１５３】
そして、この後、表示会議室管理テーブルの内容に変化があったか否か調べ（Ｓ２４５）、変化していればマトリクス・スイッチャ状態テーブルを表示会議室管理テーブルの内容に従って書き換える（Ｓ２４６）。
【０１５４】
以上の動作により、独立指定モードとなっている会議室Ｂが指定モードの変更操作を行うと、まずモード管理テーブルが図２２から図３３(a) に示すように書き換えられる。そして、図３３(b) に示すＮＳ／ＰＳ管理テーブルを参照して、同図(c) に示すように表示会議テーブルの会議室Ｂの欄が会議室Ｄから現在ＮＳとなっている会議室Ａに書き換えられる。また、この表示会議室管理テーブルの変化に伴ってマトリクス・スイッチャ状態テーブルの会議室Ｂに対応するスイッチ素子１１５７の状態が図３２(d) に示すように書き換えられる。尚、このとき、会議室ＢにＮＳとなっている会議室Ａが表示されていれば、表示は変化しないので表示会議室管理テーブル及びマトリクス・スイッチャ状態テーブルの書き換えは行われない。
【０１５５】
一方、上記ステップＳ２４１で指定モードの切替操作を行った会議室のモードがＮＳ／ＰＳ指定モードであった場合には、まずモード管理テーブルのこの会議室の指定モードを独立指定モードに書き換え（Ｓ２４７）、次に、自動会議室切替フラグを許可に設定する（Ｓ２４８）。
【０１５６】
以上の動作により、例えば会議室Ｄが指定モードを変更する操作を行うと、モード管理テーブルの会議室Ｄの指定モードと自動会議室切替フラグは図３４に示すように書き換えられる。
【０１５７】
続いて、４）自動会議室切替え許可／不許可指定のイベントが発生したときの制御部１１６′の動作を図３５のフローチャートを参照しながら説明する。
ある会議室の端末装置１２０′の操作部１３１で自動会議室切替え許可／不許可指定の操作が行われると、まずモード管理テーブルを参照してこの操作を行った会議室のモードが独立指定モードまたはＮＳ／ＰＳ指定モードのいずれであるかを調べる（Ｓ２５１）。
【０１５８】
そして、独立指定モードであったならば、モード管理テーブルのこの会議室の自動会議室切替え許可／不許可指定フラグを、許可となっていれば不許可に、不許可になっていれば許可に書き換える（Ｓ２５２）。
【０１５９】
一方、上記ステップＳ２５１でＮＳ／ＰＳ指定モードであったならば、自動会議室切替え許可／不許可は無効なので直ちに処理を終了する。
以上の動作により、独立指定モードになっている会議室は自端末装置１２０′の操作部１３１で自動会議室切替え許可／不許可指定の操作を行うことにより、自動での会議室の切替え、すなわち発言者検出があったときに表示を発言が行われた会議室の画像に切替えてもよいか否かを所望するように選択できる。
【０１６０】
次に、５）相手カメラ制御のイベントが発生したときの制御部１１６′の動作を図３６のフローチャートを参照しながら説明する。
ある会議室の端末装置１２０′の操作部１３１においてカメラの首振り、ズーム等の相手カメラ制御の操作が行われると、まず、表示会議室管理テーブルを参照してこの操作を行った会議室に現在表示されている会議室を調べる（Ｓ２６１）。
【０１６１】
そして、操作が行われた会議室の端末装置１２０′のモニタ１２７上に現在画像が表示されている会議室の端末装置１２０′に対し、この操作により指定された当該カメラ制御データを送出する（Ｓ２６２）。
【０１６２】
以上の動作により、いずれの会議室においても現在、自端末装置１２０′のモニタ１２７上に画像が表示されている会議室に設置されているカメラ１２６を遠隔操作して所望の画像を得ることができる。
【０１６３】
また、上記方式以外にも、独立指定モードの会議室において現在画像が表示されている会議室のカメラについてはこの独立指定モードに設定されている会議室以外は制御を無効とする、またはこの相手カメラ制御の使用そのものを独立モードの会議室にのみ限定する等の方式を採用してもよい。
【０１６４】
そして、最後に６）指定モード強制変更のイベントが発生したときの制御部１１６′の動作を図３７のフローチャートを参照しながら説明する。
ある会議室において指定モード強制変更の操作が行われると、まずモード管理テーブルを参照してこの操作を行った会議室はチェアマン会議室になっているか否かを調べる（Ｓ２７１）。
【０１６５】
そして、チェアマン会議室であれば、次に変更指定モードはＮＳ／ＰＳ指定モードまたは独立指定モードのいずれであるか判別する（Ｓ２７２）。
そして、ＮＳ／ＰＳ指定モードであればモード管理テーブルの全会議室のモードをＮＳ／ＰＳ指定モードに変更し（Ｓ２７３）、続いてモード管理テーブル内のセットされている全ての自動会議室切替フラグをリセットする（Ｓ２７４）。
【０１６６】
一方、上記ステップＳ２７２で変更指定モードが独立指定モードであれば、モード管理テーブルの全会議室のモードを独立指定モードに変更し（Ｓ２７５）、続いてモード管理テーブルの全会議室の自動会議切替フラグを「許可」にセットする（Ｓ２７６）。
【０１６７】
また、前記ステップＳ２７１で操作した会議室がチェアマン会議室でないことが判明した場合には、チェアマン会議室以外の会議室においてはこの操作は無効なので直ちに処理を終了する。
【０１６８】
以上の動作により、チェアマン会議室は全ての会議室のモードを所望するモードに強制的に変更することができる。
ところで、チェアマン会議室の設定は、例えばｉ）多地点制御装置で指定する、ii）多地点制御装置にテレビ会議端末装置１２０′が最初に接続された会議室とする等の方法により行う。
【０１６９】
このように本実施例によれば、独立モードでかつ自動会議室切替を不許可に設定することにより、多地点会議の際に表示されている会議室が他会議室の操作や発言により勝手に切り替わってしまう事態を防止できる。また、チェアマン会議室を設定でき、このチェアマン会議室において全ての会議室のモードを強制的に統一することができるので、より通常の会議に近い形態で多地点会議を運用できる。
【０１７０】
また独立モードにおいて表示画像を発言が行われた会議室の画像に自動的に切替える方式を選択できるので、他の会議室で重要な発言が行われたとき、この発言をうっかりして聞き逃してしまう事態などを防止できる。
【０１７１】
続いて、図３８は本発明の第３実施例の多地点テレビ会議システムの全体構成図である。
多地点制御装置３１０には、専用回線やＩＳＤＮ等の交換回線を介してＡ地点、Ｂ地点、・・・Ｚ地点のテレビ会議端末装置３２０Ａ，３２０Ｂ，・・・３２０Ｚが接続されている。
【０１７２】
多地点制御装置３１０は、各テレビ会議端末装置３２０Ａ，３２０Ｂ，・・・３２０Ｚから送信されてくる各会議室の映像データの切替制御を行い、ある１つのテレビ会議端末装置からの映像データを他の会議室のテレビ会議端末装置３２０に分配する。
【０１７３】
本実施例においては、ある会議室の映像データを分配するとき、この会議室の地点名に係わる情報も映像またはコードの形で多重化して送信する。そして、このことにより、例えば図３９に模式的に示すように各テレビ会議端末装置３２０のモニタに会議室の名称（地点名）をこの会議室の映像に重畳（スーパーインポーズ）させて表示させる。
【０１７４】
図４０は、このような表示方式を実現する第１のシステム構成例である。
テレビ会議端末装置３２０の画像送信系は、カメラ３２１、地点名映像生成部３２２、映像重畳部３２３、および画像符号化部３２４を備えている。
【０１７５】
カメラ３２１は会議室を撮像して得られる映像信号（ＮＴＳＣ信号）を映像重畳部３２３に出力する。また、地点名映像生成部３２２は会議室の地点名の映像信号を生成し、これを映像重畳部３２３に出力する。
【０１７６】
映像重畳部３２２は、カメラ３２１から入力する会議室の映像信号の所定部分に地点名映像生成部３２３からの地点名映像信号を重畳し、これにより得られる映像信号を画像符号化部３２４に出力する。
【０１７７】
画像符号化部３２４はこの会議室の映像に地点名の映像が重畳された映像信号をディジタル符号化する。このディジタル符号化により得られた符号化データは不図示の網インタフェースを介して多地点制御装置３１０に送信される。画像符号化部３２４は、例えばＣＣＩＴＴの勧告Ｈ．２６１に従って映像信号（ＮＴＳＣ信号）を符号化する。
【０１７８】
多地点制御装置３１０は、上述のようにして各会議室のテレビ会議端末装置３２０から受信する画像のディジタル符号化データを切替制御して各会議室のテレビ会議端末装置３２０へ分配する。
【０１７９】
テレビ会議端末装置３２０の画像受信系は画像復号部３２６と受信モニタ３２８を備えている。
画像復号部３２７は、多地点制御装置３１０から受信するディジタル符号化データを元の映像信号（ＮＴＳＣ信号）に復元して受信モニタ３２７に出力する。
【０１８０】
受信モニタ３２７は、会議室の映像にその地点名が重畳された画像を表示する。
次に、図４１は第２のシステム構成例である。
【０１８１】
このシステムのテレビ会議端末装置３２０の画像送信系は、上記カメラ３２１、上記画像符号化部３２４の他に地点名コード生成部３３１、信号多重部３３２、及び回線処理部３３３を備えている。
【０１８２】
カメラ３２１により撮像された会議室の映像信号は画像符号化部３２４によりディジタル符号化されて信号多重部３３２に入力される。
地点名コード生成部３３１は、この会議室の地点名コード（文字コード）を生成し、これを信号多重部３３２に出力する。
【０１８３】
信号多重部３３２は、画像符号化部３２４から入力される会議室の映像の符号化データと地点名コード生成部３３１から入力される地点名コードとを多重化して回線処理部３３３に出力する。
【０１８４】
回線処理部３３３は、入力される多重化データを多地点制御装置３１０に送信する。
多地点制御装置３１０は、この多重化データを各会議室のテレビ会議端末装置３２０から受信し、当該多重化データを各会議室のテレビ会議端末装置３２０へ分配する。
【０１８５】
テレビ会議端末装置３２０の画像受信系は、信号分離部３３６、地点名映像生成部３３７、上記画像復号部３２６、映像重畳部３３８、及び上記受信モニタ３２７を備える。
【０１８６】
信号分離部３３６は、上記多重化データから会議室の映像のディジタル符号化データと地点名コードとを分離し、それぞれ画像復号部３２６と地点名映像生成部３３７に出力する。
【０１８７】
地点名映像生成部３３７は、入力される地点名コードから地点名の映像信号を生成し、これを映像重畳部３３８に出力する。
映像重畳部３３８は、この地点名映像信号と画像復号部３３６から入力される会議室の映像信号とを重畳し、これにより得られる映像信号を受信モニタ３２７に出力する。
【０１８８】
受信モニタ３２７は、この映像信号から会議室の映像にこの会議室の地点名を重畳させて表示する。
次に、図４２は第３のシステム構成例を示す図である。
【０１８９】
テレビ会議端末装置３２０の画像送信系は、会議室の映像信号の符号化データにこの会議室に予め割り当てられている地点名番号を多重化して多地点制御装置３１０に送信する。すなわち、この画像送信系は、前述した第２のシステム例における地点名コード生成部３３１の代わりに地点名番号を生成する不図示の地点名番号生成部を備えている。
【０１９０】
多地点制御装置３１０は、各会議室の地点名番号１，２，・・・ｎに対応する地点名コードを格納しているデータベース部３１１を備え、これ以外に分離部３１２、地点名コード検索部３１３、及び多重・分配部３１４を備えている。
【０１９１】
分離部３１２は、切替選択されるテレビ会議端末装置３２０から送信されてくる会議室の映像信号と地点番号の多重化データから映像信号と地点番号を分離し、地点番号を地点名コード検索部３１３に、映像信号を多重・分配部３１４に出力する。
【０１９２】
地点名コード検索部３１３は、入力される地点番号に対応する地点名コードをデータベース部３１１から読み出し、これを多重・分配部３１４に出力する。
多重・分配部３１４は、上述のようにして入力される会議室の映像信号と地点名コードを多重化して各会議室のテレビ会議端末装置３２０へ分配送信する。
【０１９３】
テレビ会議端末装置３２０の画像受信系は、上記第２の実施例と同様になっており、上述と同様にして受信モニタ３２７に会議室の映像にこの会議室の地点名を重畳させて表示させる。
【０１９４】
次に、図４３は第４のシステム構成例を示す図である。
このシステムでは、テレビ会議端末装置３２０の画像送信系の構成は上述した第３のシステム例と同様になっている。
【０１９５】
また、多地点制御装置３１０は、上記第３のシステム例と同様にデータベース部３１１、分離部３１２、及び地点コード検索部３１３を備えると共に、さらに画像復号部３１５、地点名映像生成部３１６、映像重畳部３１７、及び符号化・分配部３１８を備えている。
【０１９６】
画像復号部３１５は、分離部３１２から入力される符号化データを復号して切替選択された会議室の映像信号を復元し映像重畳部３１７に出力する。
地点名映像生成部３１６は、地点名コード検索部から入力される地点名コードから対応する地点名の映像信号を生成し、これを映像重畳部３１７に出力する。
【０１９７】
映像重畳部３１７は、上記会議室の映像信号の所定位置に上記当該地点名の映像信号を重畳させ、これにより得られた映像信号を符号化・分配部３１８に出力する。
【０１９８】
符号化・分配部３１８は、入力される会議室の映像と地点名の映像とが重畳された映像信号を、例えばＣＣＩＴＴの勧告Ｈ．２６１で符号化して各会議室のテレビ会議端末装置３２０に分配する。
【０１９９】
各会議室のテレビ会議端末装置３２０の画像受信系は、前記画像復号部３２６と前記受信モニタ３２７を備えている。そして、多地点制御装置３１０から受信する映像信号の符号化データを復号して、切替選択された会議室の映像とこの会議室の地点名を受信モニタ３２７に重畳表示させる。
【０２００】
尚、上記構成例以外にも、以下のようなシステムも考えられる。
１）多地点制御装置が各端末装置から会議室の映像データと地点名コードを受信する。そして、多地点制御装置は会議室の映像データを映像信号に復号すると共に、地点名コードから対応する地点名の映像信号を生成する。そして、次に、多地点制御装置は会議室の映像信号に地点名の映像信号が重畳された映像信号を生成し、これを符号化してから各端末装置へ分配する。
【０２０１】
端末装置は、この符号化データを映像信号に復号して会議室の映像に地点名の映像が重畳された画像を表示する。
２）端末装置は会議室の映像データと地点名番号を多重化して多地点制御装置に送信する。
【０２０２】
多地点制御装置は、この多重化データをそのままの形で端末装置へ分配する。端末装置は、多重化データを会議室の映像データと地点名番号に分離する。そして、会議室の映像データを映像信号に復号すると共に地点名番号を基に地点名の映像信号を生成する。次に、上記復号した会議室の映像信号にこの地点名の映像信号を重畳させ、これにより得られた映像信号を基に会議室の映像に地点名の映像が重畳された画像を表示する。
【０２０３】
尚、この実施例では、会議室の映像に地点名の映像を重畳して表示するようにしているが、これに限定されることなく会議室の映像に係わる他の背景情報（話者の名前や所属等）を表示するようにしてもよい。
【０２０４】
【発明の効果】
本発明によれば、複数の地点で発言が検出されたとき、これらの発言地点の映像が１画面に表示される映像データを作成し、この映像データを各テレビ会議端末装置へ分配するので、複数地点で議論が行われたとき、議論している複数地点の画像を同時に表示できる。また、発言地点の増減によって画面に表示される地点数が変化する臨場感のある画像を表示できる。さらに、発言が同時に行われた場合でも、これらの地点が同一画面上に表示されるので発言があった地点を容易に確認できる。
【０２０５】
本発明によれば、視聴地点においては、発言地点の映像のみから成る画像が表示されるので視聴地点は発言地点を直ちに確認できる。
また、本発明によれば、発言地点においては他の発言地点の映像と前回発言地点の映像とが同一画面上に表示されるので発言地点は他の発言地点を容易に確認できる。
【０２０６】
本発明によれば、個々のテレビ会議端末装置へ他のテレビ会議端末装置とは独立に映像データを切替出力できるので、各テレビ会議端末装置は他のテレビ会議端末装置の画像を切り替えることなく所望の会議室の画像を選択できる。また、逆に、他の会議室の操作によって画像が切り替えられることもない。
【０２０７】
本発明によれば、各会議室が、上記のような他の会議室とは独立に所望する会議室の画像を選択できる第１のモードと、発言地点の検出やテレビ会議端末装置の操作等によって各会議室の表示が切り替えられる第２のモードのいずれか一方を選択できる。したがって、表示されている画像が他の会議室の操作や発言によって勝手に切り替わらないモード（第１のモード）や、自動的に発言地点の映像に切り替わるモード（第２のモード）を選択できるので、その場の状況に応じた画像のモニタが可能になる。
【０２０８】
本発明によれば、上記第１のモードであっても発言地点の検出によってこの発言がなされた会議室の画像に自動的に切り替わるモードも選択できるようになるので、うっかりして重要な発言を聞き損なうような事態を防止できる。
【０２０９】
本発明によれば、さらに主会議室に設定された会議室は必要であれば強制的に全ての会議室のモードを統一できるので、議長を中心として会議を進行していく通常の会議に近い形態での会議の運営が可能になる。
【０２１０】
本発明によれば、さらに各会議室が現在自会議室において画像が表示されている会議室のカメラを遠隔制御できるので、ズームやカメラの向きを変えるなどして所望の映像を得ることができるようになる。
【０２１１】
また、以下のような１）乃至４）の構成で多地点テレビ会議システムを構築することにより、表示されている会議室の映像についてこの会議室の地点名やこの会議室における話者の名前や所属などの情報を容易に知ることができるので会議の運営をスムーズに行うことができるようになる。
１）図４に示すテレビ会議端末装置を端末装置として使用
２）図５に示すテレビ会議端末装置を端末装置として使用
３）図６に示す多地点制御装置とテレビ会議端末装置を使用
４）図７に示す多地点制御装置とテレビ会議端末装置を使用
【図面の簡単な説明】
【図１】本発明の原理ブロック図（その１）である。
【図２】本発明の原理ブロック図（その２）である。
【図３】本発明の原理ブロック図（その３）である。
【図４】本発明の原理ブロック図（その４）である。
【図５】本発明の原理ブロック図（その５）である。
【図６】本発明の原理ブロック図（その６）である。
【図７】本発明の原理ブロック図（その７）である。
【図８】本発明の第１の実施例の多地点テレビ会議システムの全体構成図である。
【図９】第１実施例の多地点会議システムの詳細なブロック図である。
【図１０】第１実施例の動作原理を説明する図である。
【図１１】４地点が同時に発言した場合の表示方法を説明する図である。
【図１２】２地点が同時に発言した場合の表示方法を説明する図である。
【図１３】１地点のみが発言した場合の表示方法を説明する図である。
【図１４】各テレビ会議端末装置から多地点制御装置への映像信号の送信方法の一例を示す図である。
【図１５】４画面分割表示用の画像信号の生成方法の一例を示す図である。
【図１６】第１実施例の全体動作を説明するフローチャートである。
【図１７】同時に複数の地点で発言が有った場合の動作を説明するフローチャートである。
【図１８】１地点のみで発言が有った場合の動作を説明するフローチャートである。
【図１９】本発明の第２実施例の多地点テレビ会議システムの全体ブロック図である。
【図２０】画像選択部の詳細構成図である。
【図２１】第２実施例の概略動作を説明する模式図である。
【図２２】モード管理テーブルの内部構成図である。
【図２３】ＮＳ／ＰＳ管理テーブルの内部構成図である。
【図２４】表示会議室管理テーブルの内部構成図である。
【図２５】マトリクス・スイッチャ状態テーブルの内部構成図である。
【図２６】発言者検出のイベント発生時の動作フローチャートである。
【図２７】発言者検出に伴う各テーブルの書換動作を説明する図である。
【図２８】表示会議室切替の操作が行われたときの動作フローチャートである。
【図２９】表示会議室の切替操作が行われたときのテーブル書き換え動作を説明する図（その１）である。
【図３０】表示会議室の切替操作が行われたときのテーブル書き換え動作を説明する図（その２）である。
【図３１】表示会議室の切替操作が行われたときのテーブル書き換え動作を説明する図（その３）である。
【図３２】指定モード変更の操作が行われたときの動作フローチャートである。
【図３３】指定モードの操作が行われたときのテーブルの書き換え動作を説明する図（その１）である。
【図３４】指定モードの操作が行われたときのテーブルの書き換え動作を説明する図（その２）である。
【図３５】自動会議室切替え許可／不許可指定の操作が行われたときの動作フローチャートである。
【図３６】相手カメラ制御の操作が行われたときの動作フローチャートである。
【図３７】指定モード強制変更の操作が行われたときの動作フローチャートである。
【図３８】本発明の第３実施例の多地点テレビ会議システムの全体構成図である。
【図３９】第３実施例における画面表示の一例を示す図である。
【図４０】第３実施例の第１のシステム構成例を示す図である。
【図４１】第３実施例の第２のシステム構成例を示す図である。
【図４２】第３実施例の第３のシステム構成例を示す図である。
【図４３】第３実施例の第４のシステム構成例を示す図である。
【図４４】多地点間におけるテレビ会議システムの全体構成図である。
【図４５】ＮＳ／ＰＳ指定モードの動作を説明する図である。
【図４６】従来の多地点間テレビ会議システムのブロック図である。
【図４７】従来のＮＳ／ＰＳ指定モードを備えた多地点制御装置の内部構成図である。
【符号の説明】
１−１〜１−Ｎ テレビ会議端末装置
１１ 発言地点検出手段
１２ 映像合成手段
１３ 映像分配手段
２０−１〜２０−Ｎ テレビ会議端末装置
３１ 切替出力手段
３２ 制御手段
４０−１〜４０−Ｎ テレビ会議端末装置
５１ モード設定手段
５２ 切替出力手段
５３ 第１の制御手段
５４ 第２の制御手段
５５ モード変更手段
５６ 主会議設定手段
５７ 表示会議室管理手段
５８ 転送手段
６１，７８，８８，９３ 映像重畳手段
６２，７１，９４ 符号化手段
６５ 復号手段
６６，９６ 画像表示手段
７２ 多重化手段
７５ 分離手段
７６，８６，９２，９５ 映像復号手段
７７，８７，９１ 映像生成手段
８１ コード生成手段
８２ 多重化・分配手段
８５ 信号分離手段

Claims (3)

1. テレビ会議用端末装置が３会議室以上に配置される多地点テレビ会議システムのための多地点制御装置において、
   各前記端末装置からの会議室の映像データを入力し、端末装置毎に任意の会議室の映像データを切替出力する切替出力手段と、
   ある端末装置に送出される映像データがある会議室の映像データに切り替わるように前記切替出力手段を制御する制御手段と、
   前記ある端末装置から特定の会議室の画像への切替要求があったとき、他の端末装置とは独立に、該ある端末装置に送出される映像データを前記要求された特定の会議室の映像データに切り替わるように前記制御手段が前記切替出力手段を制御する独立モードが指定されたことを前記端末装置対応に記憶するモード管理テーブルと、
   各会議室の端末装置からの独立モード指定要求に応じて、前記モード管理テーブルに各会議室対応に独立モードを設定するモード設定手段とを備え、
   前記制御手段はある端末装置から特定の会議室の画像への切替要求があったとき、前記モード管理テーブルを参照して、当該端末装置のモードが上記独立モードである場合に、他の端末装置と独立に会議室の映像データを切り替えるよう上記切替出力手段を制御することを特徴とする多地点制御装置。
2. 前記モード管理テーブルは、さらに、発言地点以外の端末装置には発言地点の映像データを配信し、発言地点の端末装置には前回発言地点の映像データを配信するＮＳ／ＰＳモードが指定されたことを前記端末装置対応に記憶するとともに、前記独立モードが指定されている前記端末装置について、発言会議室が検出された場合に前記ＮＳ／ＰＳモードに変更することを許可するか否かの自動切替許可情報を記憶し、
   前記制御手段は、発言会議室の検出の通知を受けると前記モード管理テーブルを参照して前記自動切替許可が設定されているか否かを判定し、自動切替許可が設定されている端末装置へ送出する映像データを前記発言会議室の端末装置からの映像データに切り替えるように制御する、ことを特徴とする請求項１記載の多地点制御装置。
3. 前記モード管理テーブルは、さらに、ある端末装置が他の端末装置の上記モード指定を変更可能であるか否かを判断するための情報を前記端末装置対応に記憶し、
   上記制御手段は、ある端末装置から他の端末装置のモード指定の変更要求を受信すると、前記モード管理テーブルを参照して前記変更要求を行った端末装置のモード指定変更権限の有無を判断し、権限があると判断すると、他の端末装置のモード指定を変更することを特徴とする請求項１又は２記載の多地点制御装置。

Images