JPH09331510A

JPH09331510A - 多地点制御装置およびテレビ会議通信端末装置

Info

Publication number: JPH09331510A
Application number: JP8171604A
Authority: JP
Inventors: Nozomi Imae; 望今江
Original assignee: Ricoh Co Ltd
Current assignee: Ricoh Co Ltd
Priority date: 1996-06-12
Filing date: 1996-06-12
Publication date: 1997-12-22

Abstract

(57)【要約】【課題】多地点制御装置の装置コストを低減できるテ
レビ会議通信端末装置および多地点制御装置を提供する
ことを目的としている。【解決手段】多地点制御装置の画面モードが分割モー
ドの場合、画面を分割して合成する処理を符号化された
状態の動画情報に基づいて行うので、その処理対象とな
るデータ量が小さくて済み、装置構成を小規模に抑える
ことができ、装置コストを低減することができるという
効果を得る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ＩＳＤＮを伝送路
として用い、少なくとも動画情報、音声情報および汎用
データを多重化した状態で通信するテレビ会議通信機能
を備えたテレビ会議通信端末装置、および、複数のテレ
ビ会議通信端末装置との間に呼を確立し、それらの複数
のテレビ会議通信端末装置の間で多地点通信セッション
を行う多地点制御装置に関する。

【０００２】

【従来の技術】従来より、例えば、ＩＴＵ−Ｔ勧告Ｈ．
３２０で規定されているテレビ会議通信機能などを備
え、遠隔地間で映像や音声等の種々の情報をやりとりし
て会議通信を実現するテレビ会議通信端末装置が提案さ
れている。とくに、近年では、回線としてＩＳＤＮを用
いた通信アプリケーションとして、テレビ会議通信端末
装置が重要視されており、徐々に普及しつつある。

【０００３】また、テレビ会議通信セッションには、２
つのテレビ会議通信端末装置を対向して行う１対１のテ
レビ会議通信セッションの他に、網に接続された多地点
制御装置を介して複数（通常は３以上）のテレビ会議通
信端末装置を接続し、これらの複数のテレビ会議通信端
末装置間で行う多地点テレビ会議通信セッションがあ
る。

【０００４】このような多地点テレビ会議通信セッショ
ンでは、同一の多地点制御通信セッションに参加する複
数のテレビ会議通信端末装置（参加端末）から受信した
動画画面をおのおの縮小し、全ての参加端末についての
縮小動画画面を合成して１つの画面（いわゆる、スプリ
ット（分割）画面）を形成し、その合成画面の動画情報
を全ての参加端末に向けて配信している（スプリットモ
ード）。

【０００５】

【発明が解決しようとする課題】しかしながら、このよ
うな従来装置では、次のような不都合を生じていた。

【０００６】すなわち、多地点制御装置では、複数のテ
レビ会議通信端末装置より受信した動画情報を一旦生の
動画データ（例えば、ＣＩＦフォーマット）に復号化
し、その動画データを直接縮小処理して、１つのテレビ
会議通信端末装置の縮小動画画面を形成するので、その
ために非常に大きい処理能力を必要とする。

【０００７】例えば、ＣＩＦフォーマットの動画データ
では、画面サイズが３５２×２８８（ドット）で、１画
素当たりの情報量が２４ビットで、１秒間当たりのフレ
ーム数を１５フレームとすると、１秒間に処理するデー
タ量は、３４．８Ｍビット程度となり、ｎ個のテレビ会
議通信端末装置との間で多地点制御通信セッションを行
う場合には、そのｎ倍のデータ処理能力が必要となる。

【０００８】そのために、多地点制御装置の装置構成が
大規模になり、装置コストが高くなるという事態を生じ
ていた。

【０００９】本発明は、かかる実情に鑑みてなされたも
のであり、多地点制御装置の装置コストを低減できるテ
レビ会議通信端末装置および多地点制御装置を提供する
ことを目的としている。

【００１０】

【課題を解決するための手段】本発明は、複数のテレビ
会議通信端末装置との間に呼を確立し、それらの複数の
テレビ会議通信端末装置の間で多地点通信セッションを
行う多地点制御装置において、おのおののテレビ会議通
信端末装置よりそれぞれ受信した動画情報の所定の符号
化単位毎に、１画面の動画情報を切り出す複数の動画情
報切り出し手段と、上記複数の動画情報切り出し手段が
切り出した部分動画情報を合成して１画面分の動画情報
を形成する動画情報合成手段を備え、上記動画情報合成
手段により形成した動画情報を複数のテレビ会議通信端
末装置に送出するようにしたものである。

【００１１】また、前記動画情報がＩＴＵ−Ｔ標準Ｈ．
２６１準拠の動画情報の場合には、前記動画情報の所定
の符号化単位としてＧＯＢを用いることができる。ま
た、前記動画情報がＩＴＵ−Ｔ標準Ｈ．２６１準拠の動
画情報の場合には、記動画情報の所定の符号化単位とし
てマクロブロックを適用することができる。また、前記
複数の動画情報切り出し手段が切り出す動画情報の所定
の符号化単位の切り出し位置は、１画面に合成する動画
情報の数に応じて設定するとよい。

【００１２】また、ＩＳＤＮを伝送路として用い、少な
くとも動画情報、音声情報および汎用データを多重化し
た状態で通信するテレビ会議通信機能を備えたテレビ会
議通信端末装置、および、複数のテレビ会議通信端末装
置との間に呼を確立し、それらの複数のテレビ会議通信
端末装置の間で多地点通信セッションを行う多地点制御
装置において、多地点制御装置は、おのおののテレビ会
議通信端末装置よりそれぞれ受信した動画情報の所定の
符号化単位毎に、１画面の動画情報を切り出す複数の動
画情報切り出し手段と、上記複数の動画情報切り出し手
段が切り出した部分動画情報を合成して１画面分の動画
情報を形成する動画情報合成手段を備え、上記動画情報
合成手段により形成した動画情報を複数のテレビ会議通
信端末装置に送出する一方、テレビ会議通信端末装置
は、上記動画情報切り出し手段が切り出す部分的動画画
面に、撮影対象がほぼ収まるように撮影手段の撮影画面
を制御するようにしたものである。

【００１３】

【発明の実施の形態】以下、添付図面を参照しながら、
本発明の実施の形態を詳細に説明する。

【００１４】図１は、本発明の一実施例にかかる多地点
通信システムの構成の一例を示している。

【００１５】同図において、ＩＳＤＮには、多地点通信
サービスを提供する多地点制御装置ＭＣＵ、および、複
数のテレビ会議通信端末Ｔ１〜Ｔｎが接続され、この複
数のテレビ会議通信端末Ｔ１〜Ｔｎが多地点制御装置Ｍ
ＣＵへ発呼して呼を確立し、その後、多地点制御装置Ｍ
ＣＵによる音声情報、動画情報、および、汎用データの
配信が行われて、複数のテレビ会議通信端末Ｔ１〜Ｔｎ
による多地点通信セッションが行われる。

【００１６】図２は、本発明の一実施例にかかるテレビ
会議通信端末の構成の一例を示している。このテレビ会
議通信端末装置は、ＩＳＤＮの基本インタフェースを伝
送路として用いるものであり、音声情報の通信機能、動
画情報の通信機能、テレライティング機能、および、こ
れらの通信機能の多重化通信機能を備え、また、ＩＳＤ
Ｎの２つの情報チャネル（Ｂチャネル）を用いたデータ
通信が可能である。

【００１７】同図において、システム制御部１は、この
テレビ会議通信端末装置の各部の制御処理、テレビ会議
通信の上位レイヤの処理、および、このテレビ会議通信
端末装置が備えている各種のアプリケーションプログラ
ムの実行処理などの各種制御処理を実行するものであ
り、ＲＯＭ（リード・オンリ・メモリ）２は、システム
制御部１が実行する制御処理プログラムの一部や、制御
処理プログラムを実行するために必要な各種のデータな
どを記憶するものであり、ＲＡＭ（ランダム・アクセス
・メモリ）３は、システム制御部１のワークエリアなど
を構成するものである。

【００１８】時計回路４は、現在日時情報を出力するた
めのものであり、画像処理部５は、画像データについて
種々の画像処理を適用するためのものであり、磁気ディ
スク装置６は、システムソフトウェア、複数のアプリケ
ーションプログラム、および、多数のユーザデータなど
を記憶するためのものである。

【００１９】液晶表示装置７は、テレライティング通信
機能における表示装置として用いられるとともに、ユー
ザがこのテレビ会議通信端末装置を操作するときの表示
部として用いられるものであり、タッチパネル装置８
は、液晶表示装置７の表示画面に設けられて、タッチ操
作された座標データや、タッチ状態データなどを出力す
るものである。

【００２０】音声入出力装置９は、通話のための音声を
マイク入力するとともにスピーカ出力するためのもので
あり、音声入出力装置９からマイク入力されたアナログ
音声信号は音声ＣＯＤＥＣ１０に出力され、また、音声
入出力装置９からスピーカ出力するアナログ音声信号
は、音声ＣＯＤＥＣ１０から出力されて音声入出力装置
９に加えられている。

【００２１】音声ＣＯＤＥＣ１０は、ＩＳＤＮのＢチャ
ネルを用いてアナログ音声信号を伝送するためのアナロ
グ信号／デジタルデータの信号変換処理を行なうための
ものである。また、音声制御部１１は、音声入出力装置
９の動作を制御するためのものである。

【００２２】ビデオカメラ装置１２は、このテレビ会議
通信端末装置のユーザ側の映像を撮影するためのもので
あり、このビデオカメラ装置１２から出力される動画信
号は、映像入力部１３に加えられている。

【００２３】映像入力１３は、ビデオカメラ装置１２よ
り入力したアナログＮＴＳＣ形式の動画信号を対応する
デジタルデータの動画データに変換するものであり、そ
の出力信号は、ビデオＣＯＤＥＣ１４の映像信号入力端
に加えられるとともに、表示制御部１５の動画信号入力
端に加えられている。

【００２４】ビデオＣＯＤＥＣ１４は、入力した動画デ
ータを所定のＣＩＦ形式の動画データに変換し、さら
に、ＴＴＣ標準ＪＴ−Ｈ．２６１の符号化方式で符号化
圧縮して動画情報を形成するとともに、符号化圧縮され
た状態の動画情報を元のＣＩＦ形式の動画データに変換
し、その動画データをＮＴＳＣ形式の動画データに変換
するものである。

【００２５】表示制御部１５は、ビデオモニタ装置１６
に表示する画面の表示内容を制御するものであり、シス
テム制御部１からの指令により、映像入力部１３または
ビデオＣＯＤＥＣ１４から入力する動画データの表示画
面情報を形成し、その表示画面情報をアナログＮＴＳＣ
形式の動画信号に変換した後に、ビデオモニタ装置１６
に出力する。

【００２６】また、ビデオカメラ制御部１７は、ビデオ
カメラ装置１２の撮影オン／オフ、ズームイン／ズーム
アウト、および、パンなどの動作を制御するためのもの
である。

【００２７】ＩＳＤＮインターフェース回路１８は、Ｉ
ＳＤＮに接続するとともに、ＩＳＤＮのレイヤ１の信号
処理機能およびＤチャネルの信号と２つのＢチャネルの
信号の統合／分離機能を備えたものであり、Ｄチャネル
の信号はＤチャネル伝送制御部１９とやりとりし、ま
た、２つのＢチャネルの信号は多重化／分離装置２０と
やりとりしている。

【００２８】Ｄチャネル伝送制御部１９は、Ｄチャネル
のレイヤ２の信号処理機能、および、１つまたは２つの
Ｂチャネルを呼接続／解放するための呼制御処理機能を
備えたものである。

【００２９】多重化／分離装置２０は、Ｂチャネルを用
いてやりとりする音声、動画、および、汎用データなど
の複数のメディアのデータを多重化し、ＴＴＣ標準ＪＴ
−Ｈ．２２１に規定されているフレームデータを形成し
て回線側に送出するとともに、受信したフレームデータ
に多重化されている複数のメディアのデータを分離する
ものである。この多重化／分離装置２０は、音声データ
を音声ＣＯＤＥＣ９との間でやりとりし、動画データを
ビデオＣＯＤＥＣ１４との間でやりとりし、また、汎用
データをシステム制御部１との間でやりとりしている。

【００３０】これらのシステム制御部１、ＲＯＭ２、Ｒ
ＡＭ３、時計回路４、画像処理部５、磁気ディスク装置
６、液晶表示器７、タッチパネル装置８、音声ＣＯＤＥ
Ｃ１０、音声制御部１１、映像入力部１３、ビデオＣＯ
ＤＥＣ１４、表示制御部１５、ビデオカメラ制御部１
７、Ｄチャネル伝送制御部１９、および、多重化／分離
装置２０は、内部バス２１に接続されており、これらの
各要素間のデータのやりとりは、主として、内部バス２
１を介して行われる。

【００３１】図３は、多地点制御装置ＭＣＵの概略構成
の一例を示している。

【００３２】同図において、ｎ個の通信チャネルユニッ
トＣＵ１〜ＣＵｎは、多地点制御装置ＭＣＵをＩＳＤＮ
に接続して、それぞれ参加端末となるテレビ会議通信端
末装置と呼接続するとともに、おのおののテレビ会議通
信端末装置との間で、所定のメディア多重化通信処理を
行うものであり、音声送受信データ、動画送受信デー
タ、および、汎用データの多重化／分離機能を備えてい
る。また、通信チャネルユニットＣＵ１〜ＣＵｎと音声
データ処理ユニットＡＵとの間で音声入力信号ＡＡＩ１
〜ＡＡＩｎおよび音声出力信号ＡＡＯ１〜ＡＡＯｎがや
りとりされ、通信チャネルユニットＣＵ１〜ＣＵｎと動
画データ処理ユニットＶＵとの間で動画入力信号ＡＶＩ
１〜ＡＶＩｎおよび動画出力信号ＡＶＯ１〜ＡＶＯｎが
やりとりされ、通信チャネルユニットＣＵ１〜ＣＵｎと
汎用データ処理ユニットＤＵとの間で入力汎用データＤ
ＤＩ１〜ＤＤＩｎおよび出力汎用データＤＤＯ１〜ＤＤ
Ｏｎがやりとりされている。

【００３３】音声データ処理ユニットＡＵは、通信チャ
ネルユニットＣＵ１〜ＣＵｎより入力した音声データＤ
ＡＩ１〜ＤＡＩｎに基づき、それぞれの通信チャネルユ
ニットＣＵ１〜ＣＵｎに出力する音声出力信号ＡＡＯ１
〜ＡＡＯｎを形成するものである。このとき、送出する
先の通信チャネルユニットＣＵ１〜ＣＵｎより入力した
音声入力信号ＡＡＩ１〜ＡＡＩｎを除いた他の音声入力
信号ＡＡＩ１〜ＡＡＩｎをミキシングした状態で、それ
ぞれの音声出力信号ＡＡＯ１〜ＡＡＯｎを形成する。

【００３４】動画データ処理ユニットＶＵは、通信チャ
ネルユニットＣＵ１〜ＣＵｎより入力した動画入力信号
ＡＶＩ１〜ＡＶＩｎに基づき、それぞれの通信チャネル
ユニットＣＵ１〜ＣＵｎに出力する動画出力信号ＡＶＯ
１〜ＡＶＯｎを形成するものである。

【００３５】汎用データ処理ユニットＤＵは、通信チャ
ネルユニットＣＵ１〜ＣＵｎより入力した汎用データＤ
ＰＩ１〜ＤＰＩｎに基づき、それぞれの通信チャネルユ
ニットＣＵ１〜ＣＵｎに出力する汎用データＤＰＯ１〜
ＤＰＯｎを形成するものである。

【００３６】システム制御部ＳＣＵは、通信チャネルユ
ニットＣＵ１〜ＣＵｎ、音声データ処理ユニットＡＵ、
動画データ処理ユニットＶＵ、および、汎用データ処理
ユニットＤＵと種々の制御情報をやりとりし、これらの
各要素の動作を制御するものである。また、保守用コン
ソール装置ＣＯＮは、この多地点制御装置ＭＣＵの保守
作業のための種々の操作を行うためのものである。

【００３７】通信チャネルユニットＣＵ（ＣＵ１〜ＣＵ
ｎ）の一例を図４に示す。

【００３８】同図において、ＩＳＤＮインタフェース回
路２５は、この通信チャネルユニットＣＵをＩＳＤＮに
接続するとともに、レイヤ１の信号処理機能、Ｄチャネ
ル（信号チャネル）の信号と２つのＢチャネル（情報チ
ャネル）の信号の統合／分離機能を備えたものであり、
Ｄチャネルの信号をＤチャネル伝送制御部２６との間で
やりとりし、また、２つのＢチャネルの信号を多重化／
分離制御装置２７との間でやりとりしている。

【００３９】Ｄチャネル伝送制御部２６は、信号チャネ
ルで行う呼制御手順機能、および、多重呼制御機能を備
えたものであり、多重化／分離制御装置２７は、ＩＴＵ
−Ｔ勧告Ｈ．２２１に準拠したデータ多重化／分離機
能、および、データのフレーム同期機能を備えたもので
あり、その分離側の接続端には、デジタル音声データ、
デジタル動画データ、および、汎用データが加えられて
おり、また、多重化側の接続端は、ＩＳＤＮインタフェ
ース回路２５に接続されている。

【００４０】音声ＣＯＤＥＣ２８は、音声データ処理ユ
ニットＡＵから入力した音声出力信号ＡＡＯを対応する
デジタル音声データに変換して多重化／分離装置２７に
出力するとともに、多重化／分離装置２７から出力され
る受信デジタル音声データを対応するアナログ音声信号
に変換し、音声入力信号ＡＡＩとして、音声データ処理
ユニットＡＵに出力するものである。

【００４１】動画ＣＯＤＥＣ２９は、動画データ処理ユ
ニットＶＵから入力した動画出力信号ＡＶＯを対応する
デジタル映像データに変換し、そのデジタル映像データ
のデータ形式をＲＧＢ形式からＹＵＶ形式に変換し、そ
の変換後のデジタル映像データを所定のＣＩＦ形式また
はＱＣＩＦ型式のビデオデータに変換し、ＩＴＵ−Ｔ勧
告Ｈ．２６１の符号化方式で符号化圧縮してビデオ情報
を形成し、そのビデオ情報を多重化／分離装置２７に出
力するとともに、多重化／分離装置２７から出力される
受信ビデオ情報を復号化して元のＣＩＦまたはＱＣＩＦ
型式のビデオデータに変換し、そのビデオデータをＹＵ
Ｖ形式からＲＧＢ形式にデータ変換し、そのデータを対
応するアナログ動画信号に変換し、動画入力信号ＡＶＩ
として動画データ処理ユニットＶＵに出力するものであ
る。

【００４２】また、多重化／分離装置２７は、汎用デー
タチャネルの信号を、汎用データ処理ユニットＤＵとの
間で、やりとりする。

【００４３】図５は、音声データ処理ユニットＡＵの構
成の一例を示している。

【００４４】同図において、通信チャネルユニットＣＵ
１から出力される音声入力信号ＡＡＩ１は、音声レベル
判定部ＬＶに加えられるとともに、音声ミキサ回路ＭＸ
２〜ＭＸ（ｎ−１），ＭＸｎに加えられている。

【００４５】また、通信チャネルユニットＣＵ２から出
力される音声入力信号ＡＡＩ２は、音声レベル判定部Ｌ
Ｖに加えられるとともに、音声ミキサ回路ＭＸ１，ＭＸ
３〜ＭＸ（ｎ−１），ＭＸｎに加えられている。

【００４６】また、通信チャネルユニットＣＵ（ｎ−
１）から出力される音声入力信号ＡＡＩ（ｎ−１）は、
音声レベル判定部ＬＶに加えられるとともに、音声ミキ
サ回路ＭＸ１〜ＭＸ（ｎ−２），ＭＸｎに加えられてい
る。

【００４７】また、通信チャネルユニットＣＵｎから出
力される音声入力信号ＡＡＩｎは、音声レベル判定部Ｌ
Ｖに加えられるとともに、音声ミキサ回路ＭＸ１〜ＭＸ
（ｎ−１）に加えられている。

【００４８】音声レベル判定部ＬＶは、話者検出のため
のものであり、音声入力信号ＡＡＩ１〜ＡＡＩｎのうち
最大レベルのものを判定し、その判定結果をシステム制
御部ＳＣＵに通知する。

【００４９】音声ミキサＭＸ１は、音声入力信号ＡＡＩ
２〜ＡＡＩｎを混合した音声信号を形成するものであ
り、その出力信号は、音声出力信号ＡＡＯ１として、通
信チャネルユニットＣＵ１に出力される。

【００５０】また、音声ミキサＭＸ２は、音声入力信号
ＡＡＩ１，ＡＡＩ２２〜ＡＡＩｎを混合した音声信号を
形成するものであり、その出力信号は、音声出力信号Ａ
ＡＯ２として、通信チャネルユニットＣＵ２に出力され
る。

【００５１】また、音声ミキサＭＸ（ｎ−１）は、音声
入力信号ＡＡＩ１〜ＡＡＩ（ｎ−２），ＡＡＩｎを混合
した音声信号を形成するものであり、その出力信号は、
音声出力信号ＡＡＯ（ｎ−１）として、通信チャネルユ
ニットＣＵ（ｎ−１）に出力される。

【００５２】また、音声ミキサＭＸｎは、音声入力信号
ＡＡＩ１〜ＡＡＩ（ｎ−１）を混合した音声信号を形成
するものであり、その出力信号は、音声出力信号ＡＡＯ
ｎとして、通信チャネルユニットＣＵｎに出力される。

【００５３】このようにして、通信チャネルユニットＣ
Ｕ１〜ＣＵｎには、それぞれが音声データ処理ユニット
ＡＵに出力した音声出力信号を除く他の全ての音声出力
信号を混合した音声信号が、音声入力信号ＡＡＩ１〜Ａ
ＡＩｎとして加えられている。

【００５４】この場合の動画データ処理ユニットＶＵの
構成の一例を、図６に示す。

【００５５】同図において、通信チャネルユニットＣＵ
１〜ＣＵｎから入力した動画入力信号ＡＡＩ１〜ＡＡＩ
ｎは、アナログ／デジタル変換器ＡＤＣ１〜ＡＤＣｎに
加えられ、アナログ／デジタル変換器ＡＤＣ１〜ＡＤＣ
ｎによりおのおの対応するデジタル信号に変換され、そ
の変換後のデジタル信号は、デジタル動画信号ＤＡＩ１
〜ＤＡＩｎとして、画像切り出し部ＶＣ１〜ＶＣｎに加
えられる。

【００５６】画像切り出し部ＶＣ１〜ＶＣｎは、システ
ム制御部ＳＣＵより加えられる制御信号ＳＳｃにより、
画面モードとして切り換えモードが指定されている場合
には、入力されるデジタル動画信号ＤＡＩ１〜ＤＡＩｎ
をそのままの状態で動画合成部ＶＭＸに出力し、また、
制御信号ＳＳｃにより、画面モードとして分割モードが
指定されている場合には、１画面を構成するデジタル動
画信号ＤＡＩ１〜ＤＡＩｎから、所定画面領域のものの
みを抽出し、その抽出した部分的なデジタル動画信号Ｄ
ＡＩ１〜ＤＡＩｎを動画合成部ＶＭＸに出力する。

【００５７】画像合成部ＶＭＸは、制御信号ＳＳｃによ
り画面モードとして切り換えモードが指定されている場
合には、そのときに話者端末として指定されている端末
から受信したデジタル動画信号ＤＡＩ１〜ＤＡＩｎを、
送信画面のデジタル動画信号として選択し、その選択し
たデジタル動画信号をデジタル送信動画信号ＤＡＯとし
て出力するとともに、制御信号ＳＳｃにより画面モード
として分割モードが指定されている場合には、そのとき
に入力している部分的なデジタル動画信号に基づいて、
１画面分のデジタル動画信号を合成し、その合成後のデ
ジタル動画信号をデジタル送信動画信号ＤＡＯとして出
力する。また、画像合成部ＶＭＸから出力されるデジタ
ル送信動画信号ＤＡＯは、デジタル／アナログ変換器Ｄ
ＡＣ１〜ＤＡＣｎに加えられている。

【００５８】デジタル／アナログ変換器ＤＡＣ１〜ＤＡ
Ｃｎは、入力されるデジタル送信動画信号ＤＡＯを対応
するアナログ信号に変換するものであり、その変換後の
アナログ信号は、動画出力信号ＡＡＯ１〜ＡＡＯｎとし
て、通信チャネルユニットＣＵ１〜ＣＵｎに加えられて
いる。

【００５９】さて、テレビ会議端末装置Ｔ１〜Ｔｎは、
Ｂチャネルにおいては、ＴＴＣ標準ＪＴ−Ｈ．２２１で
規定されるマルチフレーム形式でデータをやりとりして
おり、したがって、テレビ会議端末装置Ｔ１〜Ｔｎと多
地点制御装置ＭＣＵとの間のデータのやりとりも、この
ＴＴＣ標準ＪＴ−Ｈ．２２１で規定されるマルチフレー
ム形式で行われている。

【００６０】図７に示すように、１つのマルチフレーム
ＭＦＬは、８個のサブマルチフレームＳＭＦ１〜ＳＭＦ
８からなり、おのおののサブマルチフレームＳＭＦ１〜
ＳＭＦ８は、それぞれ２つのフレームから構成されてい
る。すなわち、１つのマルチフレームＭＦＬは、１６個
のフレームＦＬＭ０〜ＦＬＭ１５からなる。

【００６１】それぞれのフレームＦＬＭ０〜ＦＬＭ１５
は、図８に示すように、８０オクテットのデータからな
り、それらのオクテットをビット順に配置したそれぞれ
のビット位置は、サブチャネルＳＣＨ１〜ＳＣＨ８を構
成している。

【００６２】また、第１オクテット〜第８オクテットの
第８ビットは、フレーム同期信号（ＦｒａｍｅＡｌｉ
ｇｎｍｅｎｔＳｉｇｎａｌ）ＦＡＳを構成し、第９オ
クテット〜第１６オクテットの第８ビットは、ビットレ
ート割当信号（ＢｉｔｒａｔｅＡｌｌｏｃａｔｉｏｎ
Ｓｉｇｎａｌ）ＢＡＳを構成する。また、サブチャネ
ルＳＣＨ８の第１７〜第２４オクテットには、データを
暗号化するためのキー情報などをやりとりするための暗
号チャネルのデータがセットされることがある（オプシ
ョン）。

【００６３】このようにして、フレーム同期信号ＦＡＳ
は、１つのフレームＦＬＭ０〜ＦＬＭ１５に８ビット配
置されており、そのビット割り当ては、図９に示すよう
に、マルチフレームＭＦＬを単位として構成されてい
る。

【００６４】すなわち、偶数フレームＦＬＭ０，ＦＬＭ
２，…，ＦＬＭ１４の第２オクテット〜第８オクテット
と、それに続く奇数フレームＦＬＭ１，ＦＬＭ３，…，
ＦＬＭ１５の第２オクテットには、「００１１０１１
１」なる８ビットのデータパターンからなる水平同期信
号が配置され、奇数フレームＦＬＭ１，ＦＬＭ３，…，
ＦＬＭ１１の第１オクテットには、「００１０１１」な
る６ビットのデータパターンからなる垂直同期信号が配
置されている。

【００６５】この水平同期信号と垂直同期信号を検出す
ることにより、１つのマルチフレームＭＦＬの同期を検
出することができる。

【００６６】また、第０フレーム、第２フレーム、第４
フレーム、第６フレームおよび第８フレームの第１オク
テットのビットＮ１，Ｎ２，Ｎ３，Ｎ４，Ｎ５は、マル
チフレーム番号の表示に用いられる。このうち、ビット
Ｎ５は、マルチフレーム番号が使用されているか否かの
表示に用いられる。このように、マルチフレーム番号の
ために使用されるデータが４ビットなので、マルチフレ
ーム番号は０〜１５までの値で降順に変化し、１６マル
チフレーム毎に同じマルチフレーム番号があらわれる。

【００６７】また、第１０フレーム、第１２フレーム、
および、第１３フレームの第１オクテットのビットＬ
１，Ｌ２，Ｌ３は、現在使用されているＢチャネルのう
ち、そのフレームを運んでいるＢチャネルの接続された
順番をあらわすコネクション番号を表示するために用い
られる。また、第１５フレームの第１オクテットのビッ
トＲは、将来の勧告のために確保（予約）されており、
その値には０がセットされる。

【００６８】また、第１４フレームの第１オクテットの
ビットＴＥＡは、データ端末装置の内部的な障害によ
り、データ伝送できない状態であることを表示するため
に用いられる。

【００６９】また、奇数フレームＦＬＭ１，ＦＬＭ３，
…，ＦＬＭ１５の第３オクテットのビットＡは、フレー
ム同期またはマルチフレーム同期が確立しているか、あ
るいは、同期はずれを生じているかを表示するために用
いられる。

【００７０】また、奇数フレームＦＬＭ１，ＦＬＭ３，
…，ＦＬＭ１５の第５オクテット、第６オクテット、第
７オクテット、および、第８オクテットのビットＣ１，
Ｃ２，Ｃ３，Ｃ４は、連続した２つのフレーム（すなわ
ち、サブマルチフレーム）のデータエラー検出（すなわ
ち、伝送路品質検出）のために参照されるＣＲＣ（巡回
冗長検査）符号を表示するためのものであり、この奇数
フレームＦＬＭ１，ＦＬＭ３，…，ＦＭ１５の第４オク
テットのビットＥは、受信側で伝送エラーを検出したこ
とを表示するために用いられる。

【００７１】また、ビットレート割当信号ＢＡＳは、図
１０に示すように、偶数フレームＦＬＭ０，ＦＬＭ２，
…，ＦＬＭ１４では、能力ＢＡＳあるいはＢＡＳコマン
ドをあらわす８ビットデータが配置され、それに続く奇
数フレームＦＬＭ１，ＦＬＭ３，…，ＦＬＭ１５の第２
オクテットには、直前のフレームで送出した能力ＢＡＳ
あるいはＢＡＳコマンドの値を誤り訂正するための二重
誤り訂正符号が配置される。

【００７２】また、マルチフレームＭＦＬのデータの送
信は、フレーム番号順に行なわれ、おのおののフレーム
ＦＬＭ０〜ＦＬＭ１５は、図１１に示すように、第１オ
クテットから第８０オクテットのオクテット順序に送出
され、それぞれのオクテットは、第１ビットが最初に送
出される。

【００７３】すなわち、おのおののフレームＦＬＭ０〜
ＦＬＭ１５においては、第１オクテットの第１ビットが
最初に送出され、第８０オクテットの第８ビットが最後
に送出される。

【００７４】図１２は、テレビ会議通信端末などのオー
ディオビジュアル端末がＢチャネルを用いてデータ伝送
するときに実行する伝送制御手順として適用するＴＴＣ
標準ＪＴ−Ｈ．２４２の一般的な手順例を示している。
また、この手順は、テレビ会議通信端末Ｔ１〜Ｔｎと多
地点制御装置ＭＣＵとの間のデータ伝送についても適用
される。

【００７５】まず、発呼端末（この場合は、テレビ会議
通信端末Ｔ１〜Ｔｎ）が宛先端末（この場合は、多地点
制御装置ＭＣＵ）へ発呼してＤチャネル上で呼設定手順
を行い、１つのＢチャネル（以下、第１チャネルとい
う）を確保し（フェーズＡ）、その設定した第１チャネ
ル上でＰＣＭ音声データ（Ａ則またはμ則、６４Ｋｂｐ
ｓ）をセットしたフレームデータをやりとりしながらフ
レーム同期を行ない（フレームモード）、フレーム同期
が確立すると、相互に能力ＢＡＳデータおよびコマンド
ＢＡＳデータをやりとりし（フェーズＢ１−１）、その
ときに使用する伝送モードを決定して、２つ目のＢチャ
ネルを確保するための付加呼設定要求を開始する（フェ
ーズＢ１−２）。

【００７６】そして、伝送モードをそのときに相互に交
換した内容から、原則として、互いに共通で最も機能の
高いモードを選択し（フェーズＢ１−３）、発呼端末か
らその選択した動作モードで着呼端末に受信機能を動作
させるよう端末の受信機能を指定するＢＡＳコマンドを
送信して、もしこの場合、発呼端末が送信したＢＡＳコ
マンドと異なるモードのＢＡＳコマンドを受信した場合
には、受信したＢＡＳコマンドを再度送信し、送信モー
ドを受信モードに一致させ、発呼端末と着呼端末の装置
機能に共通するパラメータを設定する（フェーズＢ
２）。これにより、第１チャネルでは、そのときに選択
した伝送モードに対応した、例えば、音声データ（１６
Ｋｂｐｓ）のデータ伝送、および、動画像データ（４
６．４Ｋｂｐｓ）のデータ伝送が行われる（フェーズ
Ｃ）。

【００７７】第１チャネルがフレームモードでデータ伝
送を開始すると、２つ目のＢチャネル（以下、第２チャ
ネルという）についてＤチャネル上で呼設定手順を行い
（フェーズＣＡ）、第２チャネルが確立すると、第２チ
ャネルを使ってフレーム同期信号ＦＡＳおよびビット割
当信号ＢＡＳのみを含むフレームデータをやりとりして
フレーム同期およびマルチフレーム同期を確立し（フェ
ーズＣＢ１−１１）、次いで、第１チャネルと第２チャ
ネル間の同期を確立する（フェーズＣＢ１−１２）。

【００７８】２つのＢチャネルの同期が完了すると、発
呼端末側からＢＡＳコマンドを送出して伝送モードを設
定し（フェーズＣＢ１−２）、その設定した内容に伝送
モードを切り換え（フェーズＣＢ１−３）、共通パラメ
ータを設定する（フェーズＣＢ２）。なお、送信したＢ
ＡＳコマンドと異なるモードのＢＡＳコマンドを受信し
た場合には、受信したＢＡＳコマンドを再度送信し、送
信モードを受信モードに一致するよう伝送モードを切り
換え、共通パラメータを設定する。

【００７９】このようにして、第２チャネルの初期化が
終了すると、それ以降は、第１チャネルでやりとりする
フレームデータ、および、第２チャネルでやりとりする
フレームデータが同期された状態で、２つのＢチャネル
を用いて、例えば、音声データ、動画データ、および、
汎用データが、それぞれ５６Ｋｂｐｓ、６２．４Ｋｂｐ
ｓ、および、６．４Ｋｂｐｓの伝送速度が割り当てられ
てデータ伝送される（図１３参照）。

【００８０】このようなデータ伝送を終了するときに
は、まず、第２チャネルから切断する。このとき、第１
チャネルのみで行なう音声データ伝送のために、共通モ
ードを設定するための手順が行われて（フェーズＣＤ
１）、第２チャネルはフレームモードのモード０Ｆへの
モード切換えが行われる（フェーズＣＤ２）。このとき
には、第１チャネルと第２チャネルが非同期であり、か
つ、第２チャネルではフレーム同期信号ＦＡＳとビット
割当信号ＢＡＳのみの伝送状態で呼が保持されている状
態であり、Ｄチャネルの呼切断解放手順により第２チャ
ネルの呼を解放できる状態になっている。

【００８１】また、第１チャネルでは、フェーズＣＤ１
およびフェーズＣＤ２の間、フレームモードで音声デー
タが５６Ｋｂｐｓの伝送速度で伝送されており、動画デ
ータの伝送は停止され、さらに、一方の端末のオペレー
タが通話終了する場合はモード０Ｆに切り換え（フェー
ズＤ２）、この後、Ｄチャネルの呼切断解放手順により
第１チャネルの呼を解放できる状態になっている。

【００８２】これにより、第１チャネルおよび第２チャ
ネルについて、Ｄチャネル上で呼切断解放手順が実行さ
れて（フェーズＥ）、２つの端末間のオーディオビジュ
アル伝送が終了する。

【００８３】このように、テレビ会議通信端末装置など
のオーディオビジュアル端末では、最初に１つのＢチャ
ネル（第１チャネル）を確保してフレームモードを確立
した後に、この第１チャネルで音声データと動画データ
の伝送速度の割り当てを行なって過渡的なモードでデー
タ伝送を行ないつつ、同時に互いに２つ目のＢチャネル
（第２チャネル）の設定が可能ならば、Ｄチャネルの呼
設定手順により第２チャネルを確保する。そして、過渡
的なモードで伝送している第１チャネルと、新たに確保
した第２チャネルをチャネル同期させ、そのチャネル同
期が確立した時点で、音声データと動画データの伝送速
度の割り当てを再設定し、増大したＢチャネルの伝送容
量を活用して、より高品質な音声データおよび動画デー
タのやりとりを行なうようにしている。

【００８４】また、データ伝送を終了するときには、い
ったん、第１チャネルと第２チャネルの両方を同期させ
た状態で伝送路を使用していたモードから、第１チャネ
ルだけを使用するモードへ変更する必要がある。そこ
で、まず、音声データは５６Ｋｂｐｓの伝送速度のまま
保持するとともに、動画データの伝送を停止して第１チ
ャネルのみの伝送モードに変更する一方、第２チャネル
は、第１チャネルとの同期状態を停止するとともに、ユ
ーザデータが空き伝送状態になっているモード０Ｆに移
行し、Ｄチャネルの呼切断解放手順により呼を切断／解
放する。また、第１チャネルは、モード０Ｆへ変更した
後、Ｄチャネルの呼切断解放手順により、呼を切断／解
放する。また、呼切断解放手順で得た課金情報などは、
チャネル毎に管理することができる。

【００８５】また、ＩＴＵ−Ｔ勧告Ｈ．３２０で規定さ
れているテレビ会議通信機能では、ビデオＣＯＤＥＣの
符号化方式として、ＩＴＵ−Ｔ勧告Ｈ．２６１で規定さ
れている動画符号化方式を適用する。このＩＴＵ−Ｔ勧
告Ｈ．２６１の動画符号化方式について、次に説明す
る。ここで、動画情報としては、ＣＩＦとＱＣＩＦの２
種類のフォーマットが定められているが、以下の説明で
は、ＣＩＦについてのみ記述する。

【００８６】ＣＩＦ（ＣｏｍｍｏｎＩｎｔｅｒｍｅｄ
ｉａｔｅＦｏｒｍａｔ；共通中間フォーマット）形式
は、動画情報の基本フォーマットであり、このＣＩＦ
は、１秒間に２９．９７フレームの画面を表示し、輝度
成分（Ｙ）については、１つのフレーム（画像フレー
ム）を２８８ラインで、かつ、１ラインを３６０画素か
ら構成するとともに、色差成分（Ｃｂ，Ｃｒ）について
は、１つのフレームを１４４ラインで、かつ、１ライン
を１８０画素から構成する。

【００８７】そして、そのフレームを、図１４（ａ）に
示すように１２個のＧＯＢ（ＧｒｏｕｐＯｆＢｌｏ
ｃｋ）に分割し、おのおののＧＯＢを、同図（ｂ）に示
すように、１１×３の３３個のマクロブロックに分割す
る。

【００８８】さらに、１つのマクロブロックは、同図
（ｃ）に示すように、輝度成分については、２×２の４
つのブロックに分割するとともに、色差成分については
１×１のブロックに分割する。したがって、輝度成分お
よび色差成分の１つのブロックは、同図（ｄ）に示すよ
うに、それぞれ８画素×８ラインから構成される。

【００８９】この動画情報は、上述したようなフレーム
／ＧＯＢ／マクロブロック／ブロックの階層構造に対応
しており、その一例を図１５（ａ）〜（ｄ）に示す。な
お、以下の説明は、ＩＴＵ−Ｔ勧告Ｈ．２６１に対応し
た国内標準であるＴＴＣ標準ＪＴ−Ｈ２６１に基づいて
いる。

【００９０】まず、１フレームの動画情報は、同図
（ａ）に示すように、フレームの開始をあらわす所定ビ
ットパターンの２０ビットデータからなるフレーム開始
符号ＰＳＣ、フレームの順序番号をあらわすフレーム番
号ＴＲ、１フレーム全体に関する情報をあらわすタイプ
情報ＰＴＹＰＥ、拡張用データ挿入情報ＰＥＩ、予備情
報ＰＳＰＡＲＥ、および、ＧＯＢデータからなる。ここ
で、拡張用データ挿入情報ＰＥＩは少なくとも１つが含
まれ、予備情報ＰＳＰＡＲＥは含まれないことがある。
また、フレーム開始符号ＰＳＣ、フレーム番号ＴＲ、タ
イプ情報ＰＴＹＰＥ、拡張用データ挿入情報ＰＥＩ、お
よび、予備情報ＰＳＰＡＲＥは、フレームヘッダと呼ば
れる。

【００９１】ＧＯＢデータは、各ＧＯＢについて、それ
ぞれ１つが配置される。したがって、１フレームの動画
情報には、１２個のＧＯＢデータが含まれる。１つのＧ
ＯＢデータは、同図（ｂ）に示すように、ＧＯＢデータ
の開始をあらわすＧＯＢ開始符号ＧＢＳＣ、ＧＯＢの位
置を示すＧＯＢ番号ＧＮ、量子化特性の情報を示す量子
化特性情報ＧＱＵＡＮＴ、拡張用データ領域（予備情
報）の有無を示す拡張用データ挿入情報ＧＥＩ、予備情
報ＧＳＰＡＲＥ、および、マクロブロックデータからな
る。ここで、拡張用データ挿入情報ＧＥＩは少なくとも
１つが含まれ、予備情報ＧＳＰＡＲＥは含まれないこと
がある。また、ＧＯＢ開始符号ＧＢＳＣ、ＧＯＢ番号Ｇ
Ｎ、量子化特性情報ＧＱＵＡＮＴ、拡張用データ挿入情
報ＧＥＩ、および、予備情報ＧＳＰＡＲＥは、ＧＯＢヘ
ッダと呼ばれる。このように、ＧＯＢデータは、それ１
つで独立した符号データを構成する。

【００９２】マクロブロックデータは、各マクロブロッ
クについて、それぞれ１つが配置される。ただし、フレ
ームのその部分に情報がない場合には、伝送されない。

【００９３】１つのマクロブロックデータは、同図
（ｃ）に示すように、マクロブロックの位置をあらわす
ためのマクロブロックアドレスＭＢＡ、マクロブロック
の種別およびどのデータ要素があらわれるのかを表示す
るためのタイプ情報ＭＴＹＰＥ、量子化特性をあらわす
量子化特性情報ＭＱＵＡＮＴ、動きベクトル情報ＭＶ
Ｄ、少なくとも１つの変換係数が伝送されるマクロブロ
ックであることをあらわす有意ブロックパターンＣＢ
Ｐ、および、ブロックデータからなる。ここで、量子化
特性ＭＱＵＡＮＴ、動きベクトル情報ＭＶＤおよび有意
ブロックパターンＣＢＰは、タイプ情報ＭＴＹＰＥで指
示されたときにあらわれる。また、マクロブロックアド
レスＭＢＡ、タイプ情報ＭＴＹＰＥ、量子化特性情報Ｍ
ＱＵＡＮＴ、動きベクトル情報ＭＶＤ、および、有意ブ
ロックパターンＣＢＰは、マクロブロックヘッダと呼ば
れる。

【００９４】ブロックデータは、同図（ｄ）に示すよう
に、例えば、そのブロックの画像データをＤＣＴ（離散
コサイン変換）処理して得られた変換係数データをあら
わす変換係数ＴＣＯＥＦＦ、および、ブロックの終了を
あらわすブロック終了符号ＥＯＢからなる。

【００９５】さて、上述したように、ＩＴＵ−Ｔ勧告
Ｈ．２６１の動画符号化方式では、１画面を構成するＧ
ＯＢごとに独立した符号データが形成され、したがっ
て、１つのＧＯＢデータを復号化すると、対応するＧＯ
Ｂの動画信号を形成することができる。

【００９６】すなわち、符号化された状態の動画データ
は、ＧＯＢ毎に切り分けることができ、その切り分けた
後のＧＯＢデータを適宜に並び替えて、１つの画面の内
容を再構成することができる。

【００９７】そこで、本実施例では、多地点制御装置Ｍ
ＣＵにおいて、それぞれのテレビ会議通信端末Ｔ１〜Ｔ
ｎより受信した動画情報をそのＧＯＢ毎に切り分けて合
成することで、符号化された動画情報を直接取り扱うよ
うにしている。

【００９８】例えば、４つのテレビ会議通信端末Ｔ１〜
Ｔ４から受信した動画情報を合成する場合を考えると、
おのおののテレビ会議通信端末Ｔ１〜Ｔ４より受信した
画面は、それぞれ図１６（ａ）〜（ｄ）に示すように、
１２個のＧＯＢに分割することができる。

【００９９】すなわち、テレビ会議通信端末Ｔ１より受
信した画面ＲＡは、ＲＡ１〜ＲＡ１２の１２個のＧＯＢ
に分割でき、テレビ会議通信端末Ｔ２より受信した画面
ＲＢは、ＲＢ１〜ＲＢ１２の１２個のＧＯＢに分割で
き、テレビ会議通信端末Ｔ３より受信した画面ＲＣは、
ＲＣ１〜ＲＣ１２の１２個のＧＯＢに分割でき、テレビ
会議通信端末Ｔ４より受信した画面ＲＤは、ＲＤ１〜Ｒ
Ｄ１２の１２個のＧＯＢに分割できる。

【０１００】そして、これらのテレビ会議通信端末Ｔ１
〜Ｔ４より受信した画面の、それぞれ１，３，５番目の
ＧＯＢのデータを抽出して、同図（ｅ）に示すような１
画面の送信画面ＴＸを合成する。

【０１０１】すなわち、送信画面ＴＸのＧＯＢ１には、
テレビ会議通信端末Ｔ１より受信した画面ＲＡのＧＯＢ
（ＲＡ１）のデータを配置し、送信画面ＴＸのＧＯＢ２
には、テレビ会議通信端末Ｔ２より受信した画面ＲＢの
ＧＯＢ（ＲＢ１）のデータを配置し、送信画面ＴＸのＧ
ＯＢ３には、テレビ会議通信端末Ｔ１より受信した画面
ＲＡのＧＯＢ（ＲＡ３）のデータを配置し、送信画面Ｔ
ＸのＧＯＢ４には、テレビ会議通信端末Ｔ２より受信し
た画面ＲＢのＧＯＢ（ＲＢ３）のデータを配置し、送信
画面ＴＸのＧＯＢ５には、テレビ会議通信端末Ｔ１より
受信した画面ＲＡのＧＯＢ（ＲＡ５）のデータを配置
し、送信画面ＴＸのＧＯＢ６には、テレビ会議通信端末
Ｔ２より受信した画面ＲＢのＧＯＢ（ＲＢ５）のデータ
を配置し、送信画面ＴＸのＧＯＢ７には、テレビ会議通
信端末Ｔ３より受信した画面ＲＣのＧＯＢ（ＲＣ１）の
データを配置し、送信画面ＴＸのＧＯＢ８には、テレビ
会議通信端末Ｔ４より受信した画面ＲＤのＧＯＢ（ＲＤ
１）のデータを配置し、送信画面ＴＸのＧＯＢ９には、
テレビ会議通信端末Ｔ３より受信した画面ＲＣのＧＯＢ
（ＲＣ３）のデータを配置し、送信画面ＴＸのＧＯＢ１
０には、テレビ会議通信端末Ｔ４より受信した画面ＲＤ
のＧＯＢ（ＲＤ３）のデータを配置し、送信画面ＴＸの
ＧＯＢ１１には、テレビ会議通信端末Ｔ３より受信した
画面ＲＣのＧＯＢ（ＲＣ５）のデータを配置し、送信画
面ＴＸのＧＯＢ１２には、テレビ会議通信端末Ｔ４より
受信した画面ＲＤのＧＯＢ（ＲＤ５）のデータを配置す
ることで、送信画面ＴＸの１画面分のデータを合成す
る。

【０１０２】また、このような動画信号のＧＯＢ毎の切
り出し処理は、多地点制御装置ＭＣＵの動画データ処理
ユニットＶＵの画像切り出し部ＶＣ１〜ＶＣｎによりな
され、また、切り出されたＧＯＢの合成処理は、多地点
制御装置ＭＣＵの動画データ処理ユニットＶＵの動画合
成部ＶＭＸによりなされる。

【０１０３】このようにして、本実施例では、多地点制
御装置ＭＣＵの画面モードが分割モードの場合、画面を
分割して合成する処理を、符号化された状態の動画情報
に基づいて行うので、その処理対象となるデータ量が小
さくて済み、装置構成を小規模に抑えることができ、装
置コストを低減することができる。

【０１０４】ところで、このように１画面を構成するＧ
ＯＢを部分的に切り出すと、合成した画面の内容が、意
図する内容にならない場合がある。

【０１０５】例えば、おのおののテレビ会議通信端末Ｔ
１〜Ｔ４より受信した画面の内容が、それぞれ図１７
（ａ）〜（ｄ）のように、話者を画面の中心に据えたカ
メラアングルであった場合、その画面の左上側の１／４
の画像部分が切り取られて、１画面に合成されるので、
その合成後の画面の内容は、同図（ｅ）に示すように、
おのおのの話者の顔の一部が欠けた状態になることが考
えられる。

【０１０６】かかる事態を解消するためには、多地点制
御装置ＭＣＵが送信する画面が分割モードの画面である
場合、おのおののテレビ会議通信端末Ｔ１〜Ｔ４では、
図１８（ａ）〜（ｄ）に示したように、画面の左上側の
１／４の部分に話者が収まるような態様にカメラアング
ルを切換えるようにするとよい。この場合、合成後の画
面の内容は、同図（ｅ）に示すように、各テレビ会議通
信端末Ｔ１〜Ｔ４の話者の上半身がそれぞれ収まるよう
な態様となり、問題なく会議を行うことができる。

【０１０７】図１９は、多地点制御装置ＭＣＵにおい
て、画面モード切り換えに関する処理の一例を示してい
る。

【０１０８】まず、通信モードの変更が指令されること
を監視しており（判断１０１）、通信モードの変更が指
令されて、判断１０１の結果がＹＥＳになるときには、
その変更が画面モードの変更であったかどうかを調べる
（判断１０２）。

【０１０９】変更が画面モードの変更の場合で判断１０
２の結果がＹＥＳになるときには、切り換えモードから
分割モードに変更になったのかどうかを調べる（判断１
０３）。

【０１１０】画面モードが切り換えモードから分割モー
ドに変更になった場合で、判断１０３の結果がＹＥＳに
なるときには、画面モードを分割モードに変更する旨を
あらわす所定のＢＡＳコマンドを各テレビ会議通信端末
Ｔ１〜Ｔｎに送出するとともに（処理１０４）、動画デ
ータ処理ユニットＶＵに出力する制御信号ＳＳｃによ
り、分割モードを指定する（処理１０５）。

【０１１１】また、画面モードが分割モードから切り換
えモードに変更になった場合で、判断１０３の結果がＮ
Ｏになるときには、画面モードを切り換えモードに変更
する旨をあらわす所定のＢＡＳコマンドを各テレビ会議
通信端末Ｔ１〜Ｔｎに送出するとともに（処理１０
６）、動画データ処理ユニットＶＵに出力する制御信号
ＳＳｃにより、切り換えモードを指定する（処理１０
７）。また、この場合には、それ以降、話者検出された
端末をあらわす情報を、制御信号ＳＳｃに設定して、出
力する。

【０１１２】以上の処理を終了すると、その時点で通信
中であるかどうかを調べ（判断１０８）、判断１０８の
結果がＹＥＳになるときには、判断１０１に戻り、同様
の処理を継続して行う。

【０１１３】また、指定された通信モードの変更が画面
モード以外の場合であり、判断１０２の結果がＮＯにな
るときには、そのときに指定されたモード変更を通知す
るための所定のＢＡＳコマンドを各テレビ会議通信端末
Ｔ１〜Ｔｎに送出するととも、変更後の通信モードを内
部的に設定し（処理１０９）、判断１０８に進む。

【０１１４】また、この場合のテレビ会議通信端末Ｔ１
〜Ｔｎの画面モード切り換えに関する処理の一例を図２
０に示す。

【０１１５】ＢＡＳコマンドを受信すると（判断２０１
の結果がＹＥＳ）、その受信したＢＡＳコマンドの内容
が画面モードの変更であるかどうかを調べる（判断２０
２）。判断２０２の結果がＹＥＳになるときには、その
ときの画面モードの変更が切り換えモードから分割モー
ドへの変更であるかどうかを調べ（判断２０３）、判断
２０３の結果がＹＥＳになるときには、ビデオカメラ装
置１２のカメラアングルを、あらかじめ設定されている
画面分割モード用のカメラアングルに切り換え（処理２
０４）、また、判断２０３の結果がＮＯになるときに
は、ビデオカメラ装置１２のカメラアングルを、分割モ
ードに変更する前の所定の画面切り換えモードの状態に
戻す（処理２０５）。

【０１１６】以上の処理を終了すると、その時点で通信
中であるかどうかを調べ（判断２０６）、判断２０６の
結果がＹＥＳになるときには、判断２０１に戻り、同様
の処理を継続して行う。

【０１１７】また、判断２０２の結果がＮＯになるとき
には、そのときに受信したＢＡＳコマンドの内容に対応
した処理を実行し（処理２０７）、判断２０６に進む。

【０１１８】ところで、上述した実施例では、画面分割
する際にＧＯＢ単位に符号化された状態の動画情報を切
り出すようにしているが、この切り出し単位をマクロブ
ロック単位にすることもできる。ただし、その場合、１
つのマクロブロックには、復号化する際に必要な情報、
例えば、量子化ステップ、動きベクトルデータなどを含
まない場合があるので、切り出す際にそれらの不足して
いる情報を追加形成してマクロブロックデータに追加す
る必要がある。

【０１１９】また、上述した実施例では、４つのテレビ
会議通信端末より受信した動画情報を合成する場合につ
いて説明したが、それ以外の数の動画情報を合成する場
合についても、本発明を同様にして適用することができ
る。ただし、合成する画像の切り出しについては、マク
ロブロック単位にした場合の方が、ＧＯＢ単位にする場
合に比べて自由度が高い。

【０１２０】なお、上述した実施例では、動画情報の符
号化方式として、ＩＴＵ−Ｔ勧告Ｈ．２６１を適用した
場合について説明したが、それ以外の動画符号化方式を
用いる場合でも、本発明を同様にして適用することがで
きる。

【０１２１】また、本発明は、テレビ会議通信端末機能
を備えた他の装置、例えば、パーソナルコンピュータ等
についても同様に適用することができる。

【０１２２】

【発明の効果】以上説明したように、本発明によれば、
多地点制御装置の画面モードが分割モードの場合、画面
を分割して合成する処理を符号化された状態の動画情報
に基づいて行うので、その処理対象となるデータ量が小
さくて済み、装置構成を小規模に抑えることができ、装
置コストを低減することができるという効果を得る。

【０１２３】また、分割モードの場合に、テレビ会議通
信端末側のカメラアングルを切り換えているので、合成
後の画面の内容を適切なものとすることができ、円滑な
会議通信を実現することができるという効果も得る。

【図面の簡単な説明】

【図１】本発明の一実施例にかかる多地点通信システム
の一例を示したブロック図。

【図２】本発明の一実施例にかかるテレビ会議通信装置
を示したブロック図。

【図３】本発明の一実施例にかかる多地点制御装置の一
例を示したブロック図。

【図４】通信チャネルユニットの一例を示したブロック
図

【図５】音声データ処理ユニットの一例を示したブロッ
ク図。

【図６】動画データ処理ユニットの一例を示したブロッ
ク図。

【図７】マルチフレームのフレーム構成の一例を示す概
略図。

【図８】１つのフレームの信号構成の一例を示す概略
図。

【図９】フレーム調整信号の一例を示す概略図。

【図１０】ビットレート割当信号の一例を示す概略図。

【図１１】信号の送出順序を説明するための概略図。

【図１２】ＩＴＵ−Ｔ勧告Ｈ．２４２の一般的な手順例
を示したタイムチャート。

【図１３】２つの情報チャネルを確保して、フレームモ
ードのデータ転送を実行しているときに、音声データ、
汎用データ、および、動画データの伝送速度の割り当て
の一例を示した概略図。

【図１４】動画情報の信号形式の一例を示した概略図。

【図１５】動画情報のデータ形式の一例を示した概略
図。

【図１６】１画面からのＧＯＢの抽出と合成画面を説明
するための概略図。

【図１７】合成画面の一例を説明するための概略図。

【図１８】修正した合成画面について説明するための概
略図。

【図１９】多地点制御装置において、画面モード切り換
えに関する処理の一例を示したフローチャート。

【図２０】テレビ会議通信端末の画面モード切り換えに
関する処理の一例を示したフローチャート。

【符号の説明】

ＶＣ１〜ＶＣｎ画像切り出し部ＶＭＸ画像合成部

Claims

【特許請求の範囲】

【請求項１】複数のテレビ会議通信端末装置との間に
呼を確立し、それらの複数のテレビ会議通信端末装置の
間で多地点通信セッションを行う多地点制御装置におい
て、おのおののテレビ会議通信端末装置よりそれぞれ受信し
た動画情報の所定の符号化単位毎に、１画面の動画情報
を切り出す複数の動画情報切り出し手段と、上記複数の動画情報切り出し手段が切り出した部分動画
情報を合成して１画面分の動画情報を形成する動画情報
合成手段を備え、上記動画情報合成手段により形成した動画情報を複数の
テレビ会議通信端末装置に送出することを特徴とする多
地点制御装置。
【請求項２】前記動画情報がＩＴＵ−Ｔ標準Ｈ．２６
１準拠の動画情報であり、前記動画情報の所定の符号化
単位がＧＯＢであることを特徴とする請求項１記載の多
地点制御装置。
【請求項３】前記動画情報がＩＴＵ−Ｔ標準Ｈ．２６
１準拠の動画情報であり、前記動画情報の所定の符号化
単位がマクロブロックであることを特徴とする請求項１
記載の多地点制御装置。
【請求項４】前記複数の動画情報切り出し手段が切り
出す動画情報の所定の符号化単位の切り出し位置は、１
画面に合成する動画情報の数に応じて設定されることを
特徴とする請求項１記載の多地点制御装置。
【請求項５】ＩＳＤＮを伝送路として用い、少なくと
も動画情報、音声情報および汎用データを多重化した状
態で通信するテレビ会議通信機能を備えたテレビ会議通
信端末装置、および、複数のテレビ会議通信端末装置と
の間に呼を確立し、それらの複数のテレビ会議通信端末
装置の間で多地点通信セッションを行う多地点制御装置
において、多地点制御装置は、おのおののテレビ会議通信端末装置
よりそれぞれ受信した動画情報の所定の符号化単位毎
に、１画面の動画情報を切り出す複数の動画情報切り出
し手段と、上記複数の動画情報切り出し手段が切り出し
た部分動画情報を合成して１画面分の動画情報を形成す
る動画情報合成手段を備え、上記動画情報合成手段によ
り形成した動画情報を複数のテレビ会議通信端末装置に
送出する一方、テレビ会議通信端末装置は、上記動画情報切り出し手段
が切り出す部分的動画画面に、撮影対象がほぼ収まるよ
うに撮影手段の撮影画面を制御することを特徴とするテ
レビ会議通信端末装置および多地点制御装置。