JPH05292494A - 多地点画像通信方式 - Google Patents

Abstract

(57)【要約】 【目的】 複数の通信端末装置相互間で多地点接続装置
を介して画像通信を行う多地点画像通信方式に関し、伝
送可能チャネル数を有効利用して、同一会議室内の複数
の発言者のそれぞれの画像信号も同時に伝送する。 【構成】 複数の通信端末装置１−１〜１−ｎは、複数
チャネルの画像信号を送受信する送受信部３と、複数の
テレビカメラ６−１〜６−ｍと、複数チャネルの画像信
号を受信表示するモニタ７とを備え、多地点接続装置２
は、複数チャネルの画像信号をチャネル対応に分離し、
有効チャネルの画像信号を最大送信チャネル数分を多重
化して送信する画像送受信処理部４と、音声信号のミキ
シングを行う音声送受信処理部５とを備え、複数テレビ
カメラによる複数の発言者等の撮像画像を同時に伝送す
る。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、複数の通信端末装置を
多地点接続装置を介して接続し、相互に画像通信を行う
多地点画像通信方式に関する。２個所の会議室間を接続
してテレビ会議を行うシステムが一般的であったが、会
議室が多地点に散在する場合に於いてもテレビ会議を行
うことが要望され、多地点接続装置を介して複数個所の
会議室間を接続し、多地点接続装置により画像信号を中
継分配するシステムが開発されている。このような多地
点間のテレビ会議に於いて、会議参加者が１名や２名の
少人数の会議室のみでなく、１０名程度の比較的多人数
の会議室も含まれることがあり、このような場合に於い
ても、最適な画像信号を送信して、表示することが要望
されている。

【０００２】

【従来の技術】多地点画像通信システムは、例えば、図
６に示すように、複数の会議室等に対応して設置された
通信端末装置５１−１〜５１−ｎを通信回線５３−１〜
５３−ｎを介して多地点接続装置５２と接続したもので
あり、通信回線５３−１〜５３−ｎは交換網を含むもの
である。多地点接続装置５２は、通信端末装置５１−１
〜５１−ｎから通信回線５３−１〜５３−ｎを介して受
信した画像信号を多重化し、通信回線５３−１〜５３−
ｎを介して各通信端末装置５１−１〜５１−ｎに送信
し、各通信端末装置５１−１〜５１−ｎは多重化された
画像信号を分離し、所望の画像信号を選択してモニタに
表示することになる。

【０００３】図７は従来例の通信端末装置のブロック図
であり、６１は制御部、６２は回線対応部、６３は表示
操作部、６４はテレビカメラ、６５−１〜６５−ｊはマ
イクロホン、６６はレベル検出部、６７は画像送信部、
６８は画像受信部、６９はモニタ、７０は音声送信部、
７１は音声受信部、７２は音声ミキサ、７３はスピー
カ、７４は旋回台であり、Ｐ１〜Ｐｊは会議参加者を示
す。

【０００４】回線対応部６２は、画像信号，音声信号，
制御信号の分離，多重化を行う通信回線とのインタフェ
ースに相当し、又テレビカメラ６３は、旋回台７４によ
って撮像方向等の制御が行われ、又旋回台７４は制御部
６１によって制御される。又表示操作部６３或いは他の
通信端末装置からの制御信号が制御部６１に加えられ
て、旋回台７４の制御や、テレビカメラ６４による会議
室の全景撮影や会議参加者Ｐ１〜Ｐｊの現在の発言者の
クローズアップ等の制御が行われる。

【０００５】又会議参加者Ｐ１〜Ｐｊ対応のマイクロホ
ン６５−１〜６５−ｊが配置され、レベル検出部６６に
よりマイクロホン６５−１〜６５−ｊからの音声信号レ
ベル検出が行われ、現在の発言者が識別される。制御部
６１は、現在の発言者をテレビカメラ６４により撮像す
るように、旋回台７４の制御等を行う。又音声ミキサ７
２によりミキシングされた音声信号は、音声送信部７０
から回線対応部６２に加えられる。

【０００６】又テレビカメラ６４による画像信号は、画
像送信部６７から回線対応部６２に加えられる。回線対
応部６２に於いては、制御部６１からの制御信号と画像
送信部６７からの画像信号と音声送信部７０からの音声
信号とを多重化し、多地点接続装置に送信する。又多地
点接続装置からの受信信号は、回線対応部６２に於いて
多重分離され、制御信号は制御部６１に、画像信号は画
像受信部６８に、音声信号は音声受信部７１にそれぞれ
加えられる。そして、画像受信部６８からの画像信号が
モニタ６９に加えられ、音声受信部７１からの音声信号
はスピーカ７３に加えられる。又モニタ６９には、複数
の地点の画像が同時に表示される構成を有し、表示地点
の切替えは表示操作部６３からの入力により行うことが
できる。或いは、表示操作部６３からの入力に対応して
制御部６１から多地点接続装置に通知することにより、
表示切替えを行うこともできる。

【０００７】図８は従来例の多地点接続装置のブロック
図であり、８１−１〜８１−ｎは受信側の回線対応部、
８２−１〜８２−ｎは送信側の回線対応部、８３は制御
部、８４は画像処理部、８５は音声処理部である。回線
対応部８１−１〜８１−ｎは制御信号と画像信号と音声
信号とを分離し、制御信号は制御部８３に、画像信号は
画像処理部８４に、音声信号は音声処理部８５にそれぞ
れ加えられる。又回線対応部８２−１〜８２−ｎは制御
信号と画像信号と音声信号とを多重化して送信する。

【０００８】各通信端末装置５１−１〜５１−ｎから１
台のテレビカメラ６４による１チャネル分の画像信号が
送信され、多地点接続装置５２に於いては、通信端末装
置側からの受信希望地点情報に従って制御部８３が画像
処理部８４を制御して、任意数のチャネルの画像信号を
多重化する。又音声処理部８５は、各地点からの音声信
号をミキシングして送出する。従って、各通信端末装置
５１−１〜５１−ｎは複数チャネルにより複数の受信希
望地点の画像信号を受信することができる。

【０００９】

【発明が解決しようとする問題点】従来例に於いては、
会議室対応の通信端末装置５１−１〜５１−ｎからの送
信画像信号は１チャネルに限定されており、複数のテレ
ビカメラを設置した場合でも、何れかのテレビカメラに
よる画像信号が選択して送信されていた。又受信画像信
号は複数チャネルとなっており、モニタ６９には複数会
議室の状態を表示することが可能であった。従って、多
人数の会議参加者の中で白熱した討論が行われている
時、発言者が隣合わせでない場合、一人の発言者のみを
クローズアップするか、或いは会議室の全景とするかの
何れかを選択することになる。その為に、同一会議室内
の討論等を行っている複数の会議参加者の表情等を他の
会議室に伝送することができない欠点があった。

【００１０】又テレビカメラ６４の撮像方向やズーミン
グ等は、画面切替え等に比較して長時間を要するもので
あるから、複数の発言者が同一会議室内に存在する時、
或いは、多人数の会議参加者の中の発言者がランダム的
に変わる場合、それに追従してテレビカメラ６４を制御
することは、機械的な制御機構が含まれるから困難であ
る。従って、前述のように、会議室の全景を撮像するこ
とになり、会議参加者の雰囲気を充分に他の会議室に伝
達することができない欠点があった。本発明は、双方向
画像通信に於ける画像信号の伝送可能チャネル数を有効
に利用し、同一会議室内の複数の発言者についても複数
チャネルを用いてクローズアップ画像を伝送することを
目的とする。

【００１１】

【課題を解決するための手段】本発明の多地点画像通信
制御方式は、図１を参照して説明すると、複数の通信端
末装置１−１〜１−ｎ相互間で多地点接続装置２を介し
て画像通信を行うシステムに於いて、複数の通信端末装
置１−１〜１−ｎは、複数チャネルの画像信号の送受信
部３を備え、多地点接続装置２は、任意の地点の通信端
末装置からの複数チャネルの画像信号をチャネル対応に
分離し、他の通信端末装置への最大送信チャネル数分を
多重化して中継送信する画像送受信処理部４を備え、多
地点接続装置２は、複数の通信端末装置１−１〜１−ｎ
からの有効チャネル情報に従って複数チャネルの画像信
号の分離，多重化を行って中継送信するものである。又
５は音声送受信処理部、６−１〜６−ｍはテレビカメ
ラ、７はモニタ、８−１〜８−ｎは通信回線を示す。

【００１２】又通信端末装置１−１〜１−ｎは、チャネ
ル対応の音声信号レベルが所定レベルを超えた時に任意
数の現在の発言者と判定し、そのチャネルを有効チャネ
ルとして多地点接続装置２に通知し、その多地点接続装
置２は、画像送受信処理部４により複数チャネルの画像
信号をチャネル対応に分離し、有効チャネルの画像信号
を多重化するものである。

【００１３】

【作用】通信端末装置１−１〜１−ｎに於けるテレビカ
メラ６−１〜６−ｍは、マイクロホン対応に設けるか或
いは少人数対応に設け、送受信部３は、通信回線８−１
〜８−ｎの伝送可能の画像信号のチャネル数分の画像信
号を多重化して多地点接続装置２へ送信する。その時
に、参加者の氏名等を含めて有効チャネル情報を送信す
る。多地点接続装置２の画像送受信部４は、受信多重化
画像信号をチャネル対応に分離し、有効チャネルの画像
信号を、通信端末装置側からの要求等に従って多重化し
て中継送信する。通信端末装置は、所望のチャネルの画
像信号を送受信部３により受信してモニタ７に表示する
ことができる。従って、同一会議室内の同時的な複数の
発言者についても、それぞれクローズアップ画面を表示
することができる。

【００１４】参加者対応のマイクロホンが設けられてい
るから、各マイクロホンによる音声信号レベルを監視
し、所定レベルを超えた音声信号対応の参加者を現在の
発言者と判定し、その発言者を撮像した画像信号を有効
チャネルとし、その有効チャネルを制御信号やヘッダ等
により多地点接続装置２へ通知する。多地点接続装置２
は、受信多重化画像信号をチャネル対応に分離し、有効
チャネル情報を基に多重化して中継送信する。

【００１５】

【実施例】図２は本発明の実施例の通信端末装置のブロ
ック図であり、制御部１１，回線対応部１２，画像送信
部１７，画像受信部１８，音声送信部２０及び音声受信
部２１を含めて、図１の送受信部３を構成している。又
会議参加者Ｐ１〜Ｐｊ対応にテレビカメラ１４−１〜１
４−ｊとマイクロホン１５−１〜１５−ｊとを設けた場
合を示し、各マイクロホン１５−１〜１５−ｊからの音
声信号は、レベル検出部１６により所定レベル以上か否
かを識別され、且つ音声ミキサ２２によりミキシングさ
れて音声送信部２０に加えられる。又１３は表示操作
部、１９はモニタ、２３はスピーカである。表示操作部
１３は、有効チャネル情報等の受信表示が可能であると
共に、会議進行上に於いて必要となる各種の情報を入力
するものであり、例えば、モニタ１９に表示すべき他の
会議室の通信端末装置を指定することができる。

【００１６】回線対応部１２は、制御信号，画像信号，
音声信号の多重化を行い、通信回線を介して多地点接続
装置へ送信し、又多地点接続装置から受信した多重化信
号から制御信号，画像信号，音声信号を分離するもので
あるが、画像送信部１７により或いは回線対応部１２に
より、複数のテレビカメラ１４−１〜１４−ｊからの画
像信号を多重化する。その場合、制御部１１の制御によ
り有効チャネルであるか否かの情報を付加して多重化す
る。又画像送信部１７に於いて各チャネルの画像信号の
帯域圧縮符号化を行うこともできる。又他の通信端末装
置から多地点接続装置を介して受信した多重化画像信号
を画像受信部１８に於いて分離し、多画面表示等により
複数チャネルの画像をモニタ１９に表示し、又多地点接
続装置に於いてミキシングされた音声信号を、スピーカ
２３から再生する。

【００１７】図３は本発明の実施例の多地点接続装置の
ブロック図であり、３１−１〜３１−ｎは受信側の回線
対応部、３２−１〜３２−ｎは送信側の回線対応部、３
３は制御部、３４は画像分離部、３５は画像多重化部、
３６は音声処理部である。画像分離部３４は、各回線対
応部３１−１〜３１−ｎからの多重化画像信号をチャネ
ル対応に分離するものである。又画像多重化部３５は、
制御部３３の制御に従って有効チャネル及び受信側の通
信端末装置からの要求チャネルの画像信号を多重化する
ものである。

【００１８】図４は画像分離部と画像多重化部とのブロ
ック図であり、４１−１〜４１−ｎはチャネル分離部、
４２はバッファメモリ（ＢＦ）、４３−１〜４３−ｎは
セレクタである。画像分離部３４のチャネル分離部４１
−１〜４１−ｎは、多重化画像信号をチャネル対応に分
離して、画像多重化部３５のバッファメモリ４２に加え
るものである。

【００１９】送信する画像信号の有効チャネルか否かの
情報は、表示操作部１３から入力する手動指定と、レベ
ル検出部１６により音声信号レベルが所定レベル以上の
時に有効チャネルとする自動指定とがあり、何れかが選
択される。この選択情報は例えば表示操作部１３から入
力することができる。

【００２０】手動指定を行う場合、例えば、会議参加人
数に応じた使用チャネル数，チャネル情報（テレビカメ
ラ１４−１〜１４−ｊと会議参加者氏名等との対応情
報）を表示操作部１３から入力する。制御部１１は、こ
の入力情報に従って有効チャネルを識別し、多地点接続
装置２に、自通信端末装置名と有効チャネル情報とを通
知する。この有効チャネル情報には会議参加者氏名等を
含めることができる。多地点接続装置２は、制御部３３
に於いて各通信端末装置１−１〜１−ｎの有効チャネル
の管理を行っており、各通信端末装置１−１〜１−ｎ
に、他の通信端末装置の有効チャネル情報を通知する。
通信端末装置１−１〜１−ｎは、多地点接続装置２から
通知された有効チャネル情報を表示操作部１３に表示す
る。

【００２１】各通信端末装置１−１〜１−ｎは、他の通
信端末装置とその有効チャネルとの中から、会議の進行
上必要とする有効チャネルを選択して表示操作部１３か
ら入力する。この選択情報は多地点接続装置２に送信さ
れる、多地点接続装置２の制御部３３は、通信端末装置
１−１〜１−ｎ対応の要求有効チャネルを記憶し、画像
多重化部３５を制御して有効チャネルの画像信号を多重
化する。即ち、画像分離部３４のチャネル分離部４１−
１〜４１−ｎに於いてチャネル対応に分離された画像信
号は、それぞれバッファメモリ４２に一時的に蓄積さ
れ、セレクタ４３−１〜４３−ｎが制御されて、要求有
効チャネルの画像信号が多重化される。

【００２２】各通信端末装置１−１〜１−ｎは、多地点
接続装置２からの多重化画像信号を分離してモニタ１９
に表示することができるから、同一会議室内に複数の発
言者が同時的に存在する場合でも、それぞれの発言者の
クローズアップ画像をモニタ１９に同時的に表示するこ
とができる。従って、会議の雰囲気を他の会議室にまで
伝えることができる。

【００２３】又自動指定を行う場合は、レベル検出部１
６により音声信号レベルが所定レベルを一定時間以上超
えたことを検出した時に、そのマイクロホン対応の会議
参加者が発言者であると判定して、その発言者を撮像し
た画像信号のチャネルを有効チャネルと指定することが
できる。それにより、同一会議室内に同時的に複数の発
言者が存在すれば、その複数の発言者対応の画像信号を
それぞれ有効チャネルとすることができる。

【００２４】又レベル検出部１６による検出結果を多地
点接続装置２に送信し、多地点接続装置２の制御部３３
に於いて、各通信端末装置１−１〜１−ｎから送信され
た発言者の情報を収集し、一定時間内で一定回数以上の
通知が行われた複数の通信端末装置が新規の発言者を含
むものと判定し、その発言者の画像信号を他の通信端末
装置へ多重化して送信することができる。この場合も、
同一会議室内に複数の発言者が存在すれば、複数の発言
者の画像信号が複数チャネルにより通信端末装置から送
信され、且つ多地点接続装置２に於いて有効チャネルと
判定して、他の通信端末装置へ多重化して中継送信する
ことになり、他の通信端末装置は、同一会議室内の複数
の発言者のクローズアップ画像を表示することができ
る。

【００２５】図５は本発明の実施例の画像通信のフォー
マット説明図であり、通信端末装置１−１〜１−ｎから
多地点接続装置２へは、（ａ）に示すように、先頭に有
効チャネル指定コードを付加した有効チャネル指定情報
が送信される。この有効チャネル指定情報には会議参加
者氏名等を含むことができる。又多地点接続装置２から
会議参加の通信端末装置に対しては、（ｂ）に示すよう
に、先頭に有効チャネル指定コードを付加した有効チャ
ネル指定情報が送信される。この有効チャネル指定情報
は、通信端末装置からの有効チャネル指定情報を基に形
成され、会議参加者氏名等を含ませることができる。

【００２６】又図５の（ｃ）は、通信端末装置１−１〜
１−ｎの表示操作部１３等から入力されて、自通信端末
装置のモニタ１９に表示して会議を進行させようとする
受信画像を指定する制御信号であり、その受信画像の指
定情報の先頭には表示地点切替コードが付加されてい
る。多地点接続装置２は、制御部３３によって画像多重
化部３５を制御して、指定された画像信号を多重化する
ことになる。

【００２７】又図５の（ｄ）は、通信端末装置１−１〜
１−ｎのレベル検出部１６により所定レベル以上の音声
信号レベルを検出した情報を多地点接続装置２に通知す
る制御信号であり、先頭に話者情報コードが付加され、
検出された現在の話者のチャネル番号が送信される。こ
の場合、通信端末装置１−１〜１−ｎの制御部１１は、
レベル検出部１６からの検出信号が加えられる毎に、制
御信号によって多地点接続装置２へ通知し、多地点接続
装置２は、前述のように、一定時間内に一定回数以上受
信した場合に、その話者を現在の発言者と判定し、その
発言者を撮像した画像信号を有効チャネルとして多重化
し、他の通信端末装置へ送信する。

【００２８】通信端末装置１−１〜１−ｎと多地点接続
装置２との間には、（ｅ）に示すように、フレーム同期
信号Ｆと制御データと音声データと画像データとが多重
化されたフレーム構成によって伝送される。又（ｆ）は
通信端末装置１−１〜１−ｎから多地点接続装置２への
画像データ、（ｇ）は多地点接続装置２から通信端末装
置１−１〜１−ｎへの画像データの一例を示し、チャネ
ル対応の画像データにはヘッダＨＤが付加されており、
このヘッダＨＤに有効チャネル表示を行うことができ
る。

【００２９】例えば、通信端末装置１−１〜１−ｎと多
地点接続装置２との間の通信回線により３チャネル分の
画像信号を多重化伝送できる場合に、通信端末装置１−
１〜１−ｎから多地点接続装置２へは３チャネル分の画
像信号が送信される。そして、地点Ａは２チャネル分が
有効チャネル、地点Ｂは１チャネル分が有効チャネルで
あるとすると、（ｇ）に示すように、地点Ａの画像デー
タが２チャネル分、地点Ｂの画像データが１チャネル分
多重化されて、他の通信端末装置へ送信されることにな
る。

【００３０】又会議参加者Ｐ１〜Ｐｊ対応にテレビカメ
ラ１４−１〜１４−ｊを設けた場合を示すが、会議参加
者Ｐ１〜Ｐｊの２〜３名対応にテレビカメラを設けるこ
とも可能であり、その場合は、会議参加者Ｐ１〜Ｐｊ対
応のマイクロホン１５−１〜１５−ｊによる音声信号レ
ベルをレベル検出部１６に於いて検出し、発言者を識別
してテレビカメラを制御することにより、その発言者を
クローズアップ撮像することができる。そして、そのテ
レビカメラによる画像信号を有効チャネルとして多重化
することができる。又テレビカメラの設置台数より少な
い会議参加者の場合は、前述のように、使用チャネル数
を通知することになり、会議参加者の多い会議室に多く
のチャネルを割当てることができる。又テレビカメラの
設置台数が使用可能のチャネル数より多い場合は、前述
のような発言者を撮像した画像信号を有効チャネルと
し、それ以外の重要参加者を撮像した画像信号も有効チ
ャネルとすることができる。

【００３１】又使用可能のチャネル数を増加する為に、
画像信号の帯域圧縮符号化を行うことも可能であり、又
会議室全景等は静止画として最初に伝送し、発言者等に
ついては動画として伝送することもできる。又通信端末
装置１−１〜１−ｎのモニタ１９は、受信表示のチャネ
ル対応の台数を設けることもできるが、１台のモニタと
して、画像受信部１８に於いて処理した多画面表示とす
ることもできる。

【００３２】

【発明の効果】以上説明したように、本発明は、通信端
末装置１−１〜１−ｎと多地点接続装置２との間に複数
チャネルの画像信号を送受信する構成を備え、多地点接
続装置２は、通信端末装置１−１〜１−ｎからの複数チ
ャネルの画像信号をチャネル対応に分離し、有効チャネ
ルの画像信号及び他の通信端末装置からの要求に従って
多重化して、通信端末装置へ中継送信するもので、同一
会議室内に同時的に複数の発言者が存在する場合でも、
それらの発言者を顔等のクローズアップ画像を伝送して
表示させることができる。従って、大会議室を含む会議
の場合でも、その大会議室の雰囲気を他の会議室に伝え
ることができる利点がある。

【００３３】又音声信号レベルが所定レベルを超えた時
に、現在の発言者と判定して、その発言者を撮像した画
像信号を有効チャネルとすることにより、同一会議室内
の複数の発言者が存在する場合でも、その発言者に対応
して自動的に有効チャネルを指定することができる。従
って、発言者がランダム的に変更になる場合でも、発言
者の表示画像の切替えを円滑に行うことができ、臨場感
のある遠隔会議を行うことができる利点がある。

【図面の簡単な説明】

【図１】本発明の原理説明図である。

【図２】本発明の実施例の通信端末装置のブロック図で
ある。

【図３】本発明の実施例の多地点接続装置のブロック図
である。

【図４】本発明の実施例の画像分離部及び画像多重化部
のブロック図である。

【図５】本発明の実施例の画像通信のフォーマット説明
図である。

【図６】多地点画像通信システムの説明図である。

【図７】従来例の通信端末装置のブロック図である。

【図８】従来例の多地点接続装置のブロック図である。

【符号の説明】

１−１〜１−ｎ 通信端末装置 ２ 多地点接続装置 ３ 送受信部 ４ 画像送受信処理部 ５ 音声送受信処理部 ６−１〜６−ｍはテレビカメラ ７ モニタ ８−１〜８−ｎ 通信回線

───────────────────────────────────────────────────── フロントページの続き (72)発明者 木下 勝正 神奈川県川崎市中原区上小田中1015番地 富士通株式会社内 (72)発明者 松田 喜一 神奈川県川崎市中原区上小田中1015番地 富士通株式会社内

Claims (2)

【特許請求の範囲】
1. 【請求項１】 複数の通信端末装置（１−１〜１−ｎ）
   相互間で多地点接続装置（２）を介して画像通信を行う
   システムに於いて、 前記複数の通信端末装置（１−１〜１−ｎ）は、複数チ
   ャネルの画像信号の送受信部（３）を備え、 前記多地点接続装置（２）は、任意の地点の通信端末装
   置からの複数チャネルの画像信号をチャネル対応に分離
   し、他の通信端末装置への最大送信チャネル数分を多重
   化して中継送信する画像送受信処理部（４）を備え、 前記多地点接続装置（２）は、前記複数の通信端末装置
   （１−１〜１−ｎ）からの有効チャネル情報に従って複
   数チャネルの画像信号の分離，多重化を行って中継送信
   することを特徴とする多地点画像通信方式。
2. 【請求項２】 前記通信端末装置（１−１〜１−ｎ）
   は、チャネル対応の音声信号レベルが所定レベルを超え
   た時に任意数の現在の発言者と判定し、該チャネルを有
   効チャネルとして前記多地点接続装置（２）に通知し、
   該多地点接続装置（２）は、前記画像送受信処理部
   （４）により複数チャネルの画像信号をチャネル対応に
   分離し、有効チャネルの画像信号を多重化することを特
   徴とする請求項１記載の多地点画像通信方式。