JPH07298231A

JPH07298231A - 多地点動画像通信システム、その制御装置及び動画像通信端末

Info

Publication number: JPH07298231A
Application number: JP6089306A
Authority: JP
Inventors: Hiroki Horikoshi; 宏樹堀越
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1994-04-27
Filing date: 1994-04-27
Publication date: 1995-11-10

Abstract

(57)【要約】【目的】新規参加端末が参加直後から受信画像を正し
く復元できるようにする。【構成】多地点接続制御装置に途中参加端末検出装置
１４２を設ける。画像選択合成回路１３０は、参加端末
からの画像情報を回路１３２〜１３６により復号化、合
成及び符号化し、又はその１つを選択回路１３８で選択
し、選択回路１４０が回路１３６，１３８の出力を選択
する。選択回路１４０の出力は多重化回路１２６と回線
インターフェース１１０〜１１６を介して参加端末に送
信される。途中参加が検出されると、制御装置１４４
は、特定の端末の送出画像を他の端末に送信している場
合にはその特定の端末に画面更新要求信号を送出し、全
端末の送出画像の合成画像を参加端末に送信している場
合には、画面更新要求信号を符号化回路１３６に印加
し、フレーム内符号化方式で合成画像を符号化させる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、３以上の多地点間で動
画像通信する多地点動画像通信システムと、その制御装
置及び動画像通信端末に関する。

【０００２】

【従来の技術】近年、画像圧縮符号化技術の発達とディ
ジタル通信回線の普及はめざましく、テレビ電話又はテ
レビ会議のための、音響映像サービス用のサービス規定
やプロトコル規定並びにマルチメディア多重化フレーム
構成規定などが勧告などとして整備され、これに伴い、
ＴＶ電話装置、ＴＶ会議システム及び遠隔監視システム
などをはじめとする様々な音響映像端末装置又は通信シ
ステムが提案されている。なかでも、３以上の多地点の
端末を接続してＴＶ会議又はビデオ会議を行なう多地点
ＴＶ会議システムが注目を浴びている。

【０００３】多地点ＴＶ会議システムとしては、多地点
制御装置に複数（地点）のＴＶ会議端末を接続する構成
と、複数のＴＶ会議端末をリング状に接続して各端末が
画像情報と音声情報を含む種々の情報を周回させる構成
が知られている。

【０００４】周知の通り、ＴＶ画像情報を直接ディジタ
ル伝送するには、数百Ｍｂｐｓの伝送速度が必要となる
ので、通常は、圧縮符号化して伝送する。そのための様
々な圧縮符号化方式が提案されている。

【０００５】代表的な動画像圧縮符号化方式として、参
照フレーム（予測値）との差分を符号化するフレーム間
符号化方式と、差分をとらず画素値をそのまま符号化す
るフレーム内符号化方式とがあり、これらをを選択的に
切り換えて用いるのが効果的である。動きや変化の少な
い画像は、現フレームと前フレームが非常に似ているの
で、前フレームとの差分を符号化するフレーム間符号化
方式を用いることにより、その時間的冗長度を削減でき
る。動きが著しく大きい画像やシーンチェンジの際など
は、フレーム間の相関が小さいので、フレーム内符号化
の方が効果的である。

【０００６】フレーム間符号化方式では、前フレームに
基づく予測情報との差分情報（予測誤差情報）を符号化
しており、復号化側は、前フレームの復号化データを記
憶しておき、受信した予測誤差情報に対して対応する予
測情報を加算することにより画像情報を復元する。

【０００７】また、上述したような多地点ＴＶ会議シス
テムには、発言者などのいる単一地点の画像を他の端末
に伝送する方式や、複数地点の画像を相互に伝送する方
式がある。また、各ＴＶ会議端末の接続形態としては、
各端末を多地点制御装置に接続する形態や、多地点制御
装置を用いずに、通信回線を介して各端末をリング状又
は鎖状に接続する形態がある。

【０００８】

【発明が解決しようとする課題】このような多地点ＴＶ
会議でも、通常の会議と同様に、途中退席（回線切断）
又は途中参加（回線接続）があり、これらに支障無く対
応できることが必要である。

【０００９】フレーム間符号化方式とフレーム内符号化
方式を選択的に用いる画像符号化方式では、画像を送信
する側の都合でフレーム内符号化又はフレーム間符号化
の選択が決められるので、例えば、途中参加する端末が
最初に受信する画面がフレーム間符号化画面のとき、そ
の途中参加端末は、次にフレーム内符号化画面を受信す
るまでの間、きれいな画像を再生表示できないという問
題点がある。フレーム間符号化画面を再生するには、前
の画面の画像データが必要であるが、それが欠落するの
で、正しく復号化（伸長）できないからである。

【００１０】本発明は、途中参加の際にも、受信画像が
迅速に再生表示されるようにした多地点動画像通信シス
テムと、その制御装置及び動画像通信端末を提示するこ
とを目的とする。

【００１１】

【課題を解決するための手段】本発明では、新規端末検
出手段が、新規に参加する動画像通信端末の接続を検出
し、画面更新要求発生手段が、新規端末検出手段の検出
出力に従い、少なくとも当該新規に参加する動画像通信
端末が受信すべき画像の画面更新を要求する画面更新要
求信号を発生する。そして、画面更新処理手段が、当該
画面更新要求信号に応じて、少なくとも当該新規に参加
する動画像通信端末に送信される画像を所定画面数だけ
画面更新する。即ち、画面内の画素データのみで画像を
復元できる圧縮方式で画像を圧縮する。

【００１２】好ましくは、上記複数の動画像通信端末間
の動画像通信を制御する制御装置を具備し、この制御装
置に、新規端末検出手段及び画面更新要求発生手段を設
け、更に、画面更新要求信号を送出する画面更新要求送
出手段を設ける。上記画面更新処理手段を複数の動画像
通信端末のそれぞれに設ける。

【００１３】又は、制御装置に、新規端末検出手段、画
面更新要求発生手段及び画面更新処理手段を設ける。

【００１４】

【作用】上記手段により、通信中に新規端末が加わった
場合に、その新規端末に送信されるべき画像は、画面更
新されて送信される、即ち、画面内の画素データのみで
復元できる符号化方式で符号化されて、少なくともその
新規端末に送信される。従って、新規端末は、参加直後
から、受信画像を正しく復元できる。

【００１５】

【実施例】以下、図面を参照して本発明の一実施例を詳
細に説明する。

【００１６】図１は、本発明の一実施例である多地点Ｔ
Ｖ会議システムのシステム構成の概略ブロック図を示
す。ここでは、端末（地点）数を４とする場合を示す。
図１において、それぞれ同じ構成のＴＶ会議端末１０
０，１０２，１０４，１０６が、多地点制御装置１０８
とＩＳＤＮなどに代表されるディジタル通信網を介して
接続する。多地点制御装置１０８は、詳細は後述する
が、各端末１００〜１０６の回線接続等を制御するだけ
でなく、各端末１００〜１０６の出力する音声画像情報
を必要に応じて選択及び合成して、各端末１００〜１０
６に供給する。

【００１７】ＴＶ会議端末１００〜１０６の概略構成ブ
ロック図を図２に示す。図２において、１０は会議参加
者を撮影するカメラ、１２は図面などの会議資料を撮影
する書画カメラ、１４はカメラ１０，１２の出力を選択
し、所定の内部形式に変換する画像入力インターフェー
ス、１６は画像表示するモニタ、１８はモニタ１６に画
像信号を供給する画像出力インターフェースである。

【００１８】モニタ１６としては、単独の画像表示装置
でも複数の画像表示装置でもよく、更には、単独の画像
表示装置でもウインドウ表示システムにより複数の画像
を別々のウインドウに表示できるものであってもよい。

【００１９】２０はカメラ１０，１２による入力画像及
び受信画像を選択及び合成して画像出力インターフェー
ス１８に供給する選択合成回路、２２は、送信すべき画
像信号を符号化する画像符号化回路２２ａと、受信した
符号化画像信号を復号化する画像復号化回路２２ｂから
なる画像符号化復号化回路である。

【００２０】２４はマイク及びスピーカからなるハンド
セット、２６はマイク、２８はスピーカ、３０はハンド
セット２４、マイク２６及びスピーカ２８に対する音声
入出力インターフェースである。音声入出力インターフ
ェース３０は、ハンドセット２４、マイク２６及びスピ
ーカ２８の音声入出力を切り換えるだけでなく、エコー
・キャンセル処理、並びに、ダイヤルトーン、呼出音、
ビジー・トーン及び着信音などのトーンの生成処理を行
なう。３２は、送信すべき音声信号を符号化する音声符
号化回路３２ａと、受信した符号化音声信号を復号化す
る音声復号化回路３２ｂからなる音声符号化復号化回路
である。

【００２１】３４は通信回線（例えば、ＩＳＤＮ回線）
の回線インターフェース、３６は、画像符号化回路２２
ａ及び音声符号化回路３２ａからの送信すべき符号化情
報を多重化して回線インターフェース３４に供給すると
共に、回線インターフェース３４から供給される受信情
報から符号化画像情報と符号化音声情報を分離し、それ
ぞれ画像復号化回路２２ｂ及び音声復号化回路３２ｂに
供給する分離多重化回路である。

【００２２】３８は全体、特に画像入力インターフェー
ス１４、画像出力インターフェース１８、選択合成回路
２０、画像符号化復号化回路２２、音声入出力インター
フェース３０、音声符号化復号化回路３２及び分離多重
化回路３６を制御するシステム制御回路、３９はシステ
ム制御回路３８に使用者が所定の指示を入力するための
操作装置（例えば、テン・キーやキーボード等）であ
る。

【００２３】図２における画像信号及び音声信号の流れ
を簡単に説明する。カメラ１０及び書画カメラ１２によ
る入力画像は画像入力インターフェース１４により選択
され、その一方が選択合成回路２０に入力する。選択合
成回路２０は通常、カメラ１０，１２による入力画像を
そのまま画像符号化復号回路２２の符号化回路２２ａに
出力する。画像符号化回路２２ａは、詳細は後述する
が、システム制御回路３８からの制御信号及び内部決定
に従う符号化モードで入力画像信号を符号化し、分離多
重化回路３６に出力する。

【００２４】他方、ハンドセット２４のマイク又はマイ
ク２６による入力音声信号は音声入出力インターフェー
ス３０を介して音声符号化復号化回路３２の音声符号化
回路３２ａに入力し、符号化されて分離多重化回路３６
に印加される。

【００２５】分離多重化回路３６は、符号化回路２２
ａ，３２ａからの符号化信号を多重化し、回線インター
フェース３４に出力する。回線インターフェース３４は
分離多重化回路３６からの信号を、接続する通信回線に
出力する。

【００２６】通信回線から受信した信号は回線インター
フェース３４から分離多重化回路３６に供給される。分
離多重化回路３６は、受信信号から符号化画像信号と符
号化音声信号を分離し、それぞれ画像復号化回路２２ｂ
及び音声復号化回路３２ｂに印加する。画像復号化回路
２２ｂは、分離多重化回路３６からの符号化画像信号を
復号し、選択合成回路２０に印加する。

【００２７】選択合成回路２０はシステム制御回路３８
からの制御信号に従い、画像入力インターフェース１４
からの入力画像と、画像復号化回路２２ｂからの受信画
像を選択合成し、画像出力インターフェース１８に出力
する。選択合成回路２０は、合成処理として例えば、ピ
クチャー・イン・ピクチャーやウインドウ表示システム
における対応ウインドウへのはめ込みなどを行なう。画
像モニタ１６は画像出力インターフェース１８からの画
像信号を画像表示する。これにより、入力画像及び／又
は受信画像がモニタ１６の画面に表示される。

【００２８】音声符号化回路３２ｂにより復号された受
信音声信号は音声入出力インターフェース３０を介して
ハンドセット２４のスピーカ及び／又はスピーカ２８に
印加される。これにより、通信相手からの音声を聞くこ
とができる。

【００２９】なお、画像及び音声以外のコマンドなどで
通信相手に送信するものは、システム制御回路３８から
分離多重化回路３６に直接供給され、多地点制御装置１
０８を介した他の端末からのコマンド、又は多地点制御
装置１０８からのコマンドは分離多重化回路３６からシ
ステム制御回路３８に直接供給される。

【００３０】画像符号化回路２２ａの概略構成ブロック
図を図３に示す。図３において、４０は選択合成回路２
０からの画素データが入力する入力端子、４２は、入力
端子４０からの画素値と当該画素値の予測誤差との間の
エネルギー比較結果及び外部制御信号に従い、フレーム
内符号化（ＩＮＴＲＡ）モード又はフレーム間符号化
（ＩＮＴＥＲ）モードを選択する符号化モード選択回路
である。符号化モード選択回路４２は、ＩＮＴＲＡモー
ドでは入力端子４０からの画素値をそのまま出力し、Ｉ
ＮＴＥＲモードでは、マクロブロック単位で予測値（前
フレーム）との差分（予測誤差）を出力する。

【００３１】４４は、符号化モード選択回路４２の出力
を離散コサイン変換し、そのＤＣＴ係数データを、指定
された量子化ステップ・サイズで量子化し、更に、可変
長符号化する符号化回路、４６は符号化回路４４から出
力される可変長符号化出力を伝送路の伝送速度に応じて
レート調節する送信バッファ、４８は送信バッファ４６
の出力を分離多重化回路３６に接続する出力端子であ
る。

【００３２】５０は符号化回路４４の量子化出力を逆量
子化し、逆離散コサイン変換する復号化回路、５２は、
ＩＮＴＥＲモードでは復号化回路５０の出力に予測値を
加算して出力し、ＩＮＴＲＡモードでは復号化回路５０
の出力をそのまま出力する加算器である。５４は、フレ
ーム間予測のためのフレーム・メモリであり、加算器５
２の出力（局部復号値）を１フレーム期間、記憶する。
５６は、入力端子４０からの画素データから、フレーム
・メモリ５４からの画素データ（予測値）を減算する減
算器であり、その出力が予測誤差として符号化モード選
択回路４２に印加される。なお、フレーム・メモリ５４
の出力は、予測値として加算器５２にも印加される。

【００３３】５８は、システム制御回路３８からの符号
化に関する制御信号、及び送信バッファ４６からのバッ
ファ蓄積量信号に従い、符号化モード選択回路４２及び
符号化回路４４を制御して、図３に示す回路での、符号
化全般を制御する。

【００３４】図３の動作を説明する。入力端子４０には
選択合成回路２０（図１）から、例えばＩＴＵ−Ｔ勧告
Ｈ．２６１に従う共通フォーマットであるＣＩＦ（Ｃｏ
ｍｍｏｎＩｎｔｅｒｆａｃｅＦｏｒｍａｔ）フォー
マット又はＱＣＩＦ（ＱｕａｒｔｅｒＣＩＦ）フォー
マットで画像データが入力する。入力端子４０に入力す
る画像データは符号化モード選択回路４２及び減算器５
６に印加される。

【００３５】減算器５６は、入力端子４０からの画素デ
ータと、フレーム・メモリ５４からの予測値との差分
（予測誤差）を算出し、符号化モード選択回路４２に印
加する。符号化モード選択回路４２は、入力端子４０か
らの画素値と、減算器５６からの予測誤差とをエネルギ
ー比較し、その比較結果、並びに画像符号化制御回路５
８からの制御信号に従い、符号化モードを選択する。符
号化モード選択回路４２は、ＩＮＴＲＡモードの選択時
には、入力端子４０からの入力画素値をそのまま符号化
回路４４に出力し、ＩＮＴＥＲモードの選択時には、減
算器６８からの予測誤差を符号化回路４４に出力する。

【００３６】符号化回路４４は、符号化モード選択回路
４２からのデータをブロック単位で離散コサイン（ＤＣ
Ｔ）変換し、そのＤＣＴ係数データを画像符号化制御回
路５８からの量子化特性制御信号により指定される量子
化ステップ・サイズで量子化する。符号化回路４４は更
に、量子化ＤＣＴ係数データをＩＴＵ−Ｔ勧告Ｈ．２６
１に従って可変長符号化して送信バッファ４６に出力す
る。符号化回路４４は量子化データを復号化回路５０に
出力する。

【００３７】送信バッファ４６は、符号化回路４４の可
変長符号化データ出力をバッファリングして出力端子４
８を介して分離多重化回路３６に出力すると共に、バッ
ファ蓄積量を画像符号化制御回路５８に伝達する。

【００３８】復号化回路５０は、符号化回路４４からの
量子化ＤＣＴ係数データを符号化回路４４におけるのと
同じ量子化ステップ・サイズで、逆量子化し、更に、逆
離散コサイン変換する。加算器５２は、ＩＮＴＥＲモー
ドでは、復号化回路５０の出力に予測値（フレーム・メ
モリ５４の出力）を加算し、ＩＮＴＲＡモードでは復号
化回路５０の出力をそのまま出力する。加算器５２の出
力は、フレーム・メモリ５４に一時記憶され、１フレー
ム期間、遅延される。

【００３９】フレーム・メモリ５４は、前フレームの画
素データ、即ち、前フレームの予測値を減算器５６及び
加算器５２に供給する。

【００４０】画像符号化制御回路５８は、システム制御
回路３４からの制御信号（利用者設定の画質制御信号及
び書画カメラ１２の選択信号など）、及び送信バッファ
４６のデータ蓄積量に応じて、画像符号化の全般を制御
する。具体的には、送信バッファ４６がオーバーフロー
しないように、送信バッファ４６のデータ蓄積量を基
に、入力画像の変化、シーン・チェンジ及び通信者の画
質設定に応じて適応的に、符号化回路４４における量子
化ステップ・サイズや符号化モード選択回路４２におけ
るモード選択などを制御する。

【００４１】なお、動きや変化の少ない画像は、現フレ
ームと前フレームが非常に似ているので、前フレームと
の差分を符号化するＩＮＴＥＲモードを用いることで、
その時間冗長度を削減できる。動き補償を加味すること
で、動きのある画像も効率的に圧縮できる。他方、動き
が大きい画像やシーン・チェンジの際にはフレーム間相
関が小さいので、同一フレーム内で符号化するＩＮＴＲ
Ａモードを用いる。

【００４２】量子化特性に関しては、量子化ステップ・
サイズを小さくする程、画質は向上するが、有意データ
が増加するので、伝送ビット数の増加につながる。他
方、量子化ステップ・サイズを多くすると、伝送データ
量は減少するが、画質が劣化する。ＩＴＵ−Ｔ勧告Ｈ．
２６１によれば、１フレーム当たりに発生するビット数
には上限があり、画質の高精細化のための量子化特性の
向上にも限界がある。画質の高精細化は伝送ビット数の
増加を意味し、そのままフレーム・レートの減少につな
がる。即ち、画質（空間解像度）と動きに対する追従性
（時間解像度）とは相反するものであり、高画質を追求
すると、必然的に動きに対する追従性が劣化する。そこ
で、送信バッファ４６のデータ蓄積量を常時監視し、適
宜に効率的に量子化ステップ・サイズを設定する。ま
た、発生する符号化ビット数に応じて駒落とし（フレー
ム・スキップ）処理を行ない、フレーム・レートを調節
する。

【００４３】図４は、多地点制御装置１０８の概略構成
ブロック図を示す。なお、図４では、画像情報、音声情
報及び制御情報以外の情報に関する機能ブロックは省略
してある。

【００４４】図４において、１１０，１１２，１１４，
１１６はＩＳＤＮユーザ網インタフェースにしたがって
回線の接続を制御する回線インタフェース、１１８，１
２０，１２２，１２４は受信フレームを画像情報、音声
情報及び制御情報に分離する分離回路である。１２６
は、各部からの画像情報、音声情報及び制御情報を送信
フレーム単位に多重化する多重化回路である。１２８
は、分離回路１１８〜１２４により分離された音声情報
を合成する音声合成回路、１３０は、分離回路１１８〜
１２４により分離された画像情報を選択又は合成処理す
る画像選択合成回路である。

【００４５】画像選択合成回路１３０は、分離回路１１
８〜１２４からの各画像情報を復号化する復号化回路１
３２、復号化回路１３２から出力される４つの復元画像
情報を合成する合成回路１３４、合成回路１３４から出
力される合成画像を符号化する符号化回路１３６、分離
回路１１８〜１２４から出力される４つの画像情報から
１つを選択する選択回路１３８、及び、符号化回路１３
６の出力又は選択回路１３８の出力を選択するモード選
択回路１４０からなる。モード選択回路１４０の出力が
即ち、画像選択合成回路１３０の出力であり、多重化回
路１２６に供給される。

【００４６】１４２は、回線インターフェース１１０〜
１１６の挙動を常時監視して、途中参加要求を検出する
途中参加端末検出装置である。１４４は、ＣＰＵ、ＲＯ
Ｍ、ＲＡＭ及び補助記憶装置等を備え、接続端末の状態
を含む各部の状態を監視し、装置全体の制御、多地点間
通信制御、接続端末制御及び会議進行制御などを実行す
る制御装置である。１４６，１４８，１５０，１５２
は、それぞれ、ＴＶ会議端末１００，１０２，１０４，
１０６に接続する通信回線である。

【００４７】図４の動作を説明する。各端末１００〜１
０６の送信データが通信回線１４６〜１５２を介して回
線インタフェース１１０〜１１６に入力し、分離回路１
１８〜１２４により、画像データ、音声データ及び制御
データに分離される。分離された画像データは画像選択
合成回路１３０に供給されて、選択合成され、分離され
た音声データは音声合成回路１２８に供給されて合成さ
れ、分離された制御データは制御装置１４４に供給され
て、各部の制御に利用される。

【００４８】多重化回路１２６は、画像選択合成回路１
３０からの画像データ、音声合成回路１２８からの音声
データ及び制御装置１４４からの制御データを多重化
し、回線インターフェース１１０〜１１６に出力する。
回線インターフェース１１０〜１１６は、多重化回路１
２６からの多重化データをそれぞれの通信回線１４６〜
１５２に出力する。

【００４９】画像選択合成回路１３０の動作を説明す
る。分離回路１１８〜１２４により分離された画像デー
タは復号化回路１３２と選択回路１３８に印加される。
復号化回路１３２は、入力された複数の画像データを各
々復号化し、合成回路１３４に出力する。合成回路１３
４は、復号化回路１３２の４つの出力を１画面に画像合
成し、符号化回路１３６は合成回路１３４からの合成画
像を制御装置１４４からの指示に従って圧縮符号化し、
モード選択回路１４０に出力する。、選択回路１３８
は、制御装置１４４の指示に基づき入力画像のうち一つ
を選択してモード選択回路１４０に出力する。

【００５０】制御装置１４４は、会議の形態若しくは進
行状況、又は通信回線の伝送能力などに応じて、適応的
にモード選択回路１４０を制御し、選択回路１３８の出
力又は符号化回路１３６の出力を選択する。以下では、
選択回路１３８の出力を選択する場合を画像選択モー
ド、符号化回路１３４の出力を選択する場合を画像合成
モードと呼ぶ。

【００５１】次に、３以上の多地点間で画像通信する際
の特有の機能および動作を説明する。

【００５２】会議参加している端末１００、１０２，１
０４又は１０６は多地点制御装置１０８に接続されてお
り、回線接続等をはじめとする通信制御やＴＶ会議全体
の制御は、基本的に多地点制御装置１０８により実行さ
れる。多地点制御装置１０８は、会議に参加している各
端末１００、１０２，１０４又は１０６に送信情報種別
及び伝送レート等を指示し、各会議参加端末１００、１
０２，１０４又は１０６は、これに従い画像情報及び音
声情報の圧縮符号化処理などを実行し、多地点制御装置
１０８に対して圧縮符号化された画像情報及び音声情
報、並びに文書情報などを送出する。多地点制御装置３
０５は、各会議参加端末１００、１０２，１０４又は１
０６から受信した情報を選択又は合成処理し、各会議参
加端末１００、１０２，１０４又は１０６へと送信す
る。また、会議進行中の途中参加や途中退席なども可能
である。

【００５３】次に、ＴＶ会議進行中において新規端末が
参加する場合の動作を説明する。ここでは、ＴＶ会議端
末１００、ＴＶ会議端末１０２及びＴＶ会議端末１０４
が既にＴＶ会議に参加しており、そのＴＶ会議に新たに
ＴＶ会議端末１０６が参加する場合を例に説明する。

【００５４】会議開始段階では、ＴＶ会議端末１００，
１０２，１０４はそれぞれ独自に、多地点制御装置１０
８に発呼して、回線接続する。この状態で、各端末１０
０，１０２，１０４の送信画像情報は、先に述べたとお
り、多地点制御装置１０８において選択又は合成され、
各端末１００，１０２，１０４に送出される。各端末１
００，１０２，１０４からの音声情報は、多地点制御装
置１０８により合成処理され、合成音声情報として各端
末１００，１０２，１０４に送出される。また各端末１
００，１０２，１０４からの制御情報は、多地点制御装
置１０８で必要なものは多地点制御装置１０８で処理さ
れ、他の端末１００，１０２，１０４で必要なものは選
択合成されて、各端末１００，１０２，１０４に送出さ
れる。

【００５５】ＴＶ会議端末１０６が会議に途中参加する
場合、ＴＶ会議端末１０６は、多地点制御装置１０８に
発呼し、会議参加要求を送出する。多地点制御装置１０
８は、ＴＶ会議端末１０６からの会議参加要求を受信す
ると、途中参加端末検出装置１４２がこれを検出して、
制御装置１４４に新規端末からの会議参加要求が受信さ
れた旨を通知する。この通知に応じて、制御装置１４４
は、ＴＶ会議端末１０６の会議参加に伴う諸処理を実行
すると共に、伝送画面更新要求信号を発生して、各端末
１００〜１０６に送信される画像の１又は数フレームを
フレーム内符号化画像に強制する。

【００５６】画面更新要求の伝達と実際の画面更新動作
を説明する。図５は、その動作フローチャートを示す。

【００５７】制御装置１４４はまず、途中参加端末検出
装置１４２の検出出力に応じて画面更新要求信号を生成
する（Ｓ１）。画像選択合成回路１３０が選択モードで
動作しているとき（Ｓ２）、その時点選択されている画
像情報を出力している端末（送信元端末）に対して、画
面更新要求信号を送出する（Ｓ３）。この画面更新要求
信号を受信した端末は、自端末内の画像符号化制御回路
５８（図３）に指示して、少なくとも１フレームの期
間、符号化モード選択回路４２にフレーム内符号化処理
を選択させる（Ｓ４）。これにより、ＴＶ会議端末１０
６は、通信開始時（ＴＶ会議新規参加時）に多地点制御
装置１０８から送られる符号化画像情報を正しく復元で
きる。

【００５８】他方、多地点制御装置１０８の画像選択合
成回路１３０が複数地点（端末）の画像情報を合成して
伝送する合成モードで動作している場合（Ｓ２）、制御
装置１４４は、画像選択合成回路１３０の符号化回路１
３６に画面更新要求信号を出力する。符号化回路１３６
はこの画面更新要求信号に応じて、合成回路１３６の合
成画像出力を少なくとも１フレーム期間、フレーム内符
号化する。これにより、ＴＶ会議端末１０６は、通信開
始時（ＴＶ会議新規参加時）に直ちに、多地点制御装置
１０８から送られる符号化画像情報を正しく復元でき
る。

【００５９】このような制御により、ＴＶ会議端末１０
０，１０２，１０４によるＴＶ会議の進行中にＴＶ会議
端末１０６が途中参加する場合に、ＴＶ会議端末１０６
は、少なくとも１フレーム、フレーム内符号化された画
像を受信するので、完全な復号化を開始でき、迅速に正
常なＴＶ会議画像を得ることができる。これにより、新
規端末が会議に途中参加した場合でも、進行中の会議を
中断することなく、新規参加端末が即座に必要な画像情
報を得ることができる。

【００６０】なお、上記実施例では、各ＴＶ会議端末を
多地点制御装置に接続することにより多地点ＴＶ会議シ
ステムを構築しているが、多地点制御装置を用いずに各
ＴＶ会議端末をディジタル通信回線を介してリング状
（図６参照）あるいは鎖状（図７参照）に接続し、各情
報を周回させることにより多地点ＴＶ会議を実現する構
成でも、一つの又は全ての端末が新規端末の接続の検知
に応じて画面更新要求を発生する機能を設け、画面更新
要求信号を周回させることによって、同様の作用効果を
得ることができる。

【００６１】上記実施例では、多地点制御装置１０８が
全ての端末に同じ画像を送信しているので、新規端末が
途中参加する際にも、全ての端末への送信画像を画面更
新しているが、端末毎に異なる画像情報を伝送すること
が可能なシステムでは、新規参加端末に送信する画像の
みを画面更新してもよいことは明らかである。

【００６２】上記実施例では、４地点（端末）によるＴ
Ｖ会議を説明したが、本発明がこれに限定されず、２地
点、３地点又は５地点以上の場合にも適用できることは
言うまでもない。

【００６３】画像圧縮符号化方式としては、フレーム内
符号化方式とフレーム間符号化方式を選択的に用いる符
号化方式で説明したが、本発明は、画面更新処理を必要
とするあらゆる符号化方式を使用するシステムに利用で
きることもまた明らかである。

【００６４】

【発明の効果】以上の説明から容易に理解できるよう
に、本発明によれば、動画像通信の進行中に新たな動画
像通信端末が加わった場合において、少なくとも新規参
加端末に送信すべき画像を画面更新して送信するので、
動画像通信を中断することなく、新規参加端末は迅速に
正常な画面の画像を復元でき、動画像通信に円滑に参加
できる。

【図面の簡単な説明】

【図１】本実施例のシステム構成の概略ブロック図で
ある。

【図２】本実施例のＴＶ会議端末１００〜１０６の概
略構成ブロック図である。

【図３】図２の画像符号化回路２２ａの概略構成ブロ
ック図である。

【図４】多地点制御装置１０８の概略構成ブロック図
である。

【図５】途中参加に対する画面更新処理の動作フロー
チャートである。

【図６】動画像通信端末のリング状接続を示す概略図
である。

【図７】動画像通信端末の鎖状接続を示す概略図であ
る。

【符号の説明】

１０：カメラ１２：書画カメラ１４：画像入力イン
ターフェース１６：モニタ１８：画像出力インター
フェース２０：選択合成回路２２：画像符号化復号
化回路２２ａ：画像符号化回路２２ｂ：画像復号化
回路２４：ハンドセット２６：マイク２８：スピ
ーカ３０：音声入出力インターフェース３２：音声符号化復号化回路３２ａ：音声符号化回路
３２ｂ：音声復号化回路３４：回線インターフェー
ス３６：分離多重化回路３８：システム制御回路
３９：操作装置４０：入力端子４２：符号化モード選択回路４４：
符号化回路４６：送信バッファ４８：出力端子５
０：復号化回路５２：加算器５４：フレーム・メモ
リ５６：減算器５８：画像符号化制御回路１００，１０２，１０４，１０６：ＴＶ会議端末１０
８：多地点制御装置１１０，１１２，１１４，１１６：回線インタフェース
１１８，１２０，１２２，１２４：分離回路１２
６：多重化回路１２８：音声合成回路１３０：画像
選択合成回路１３２：復号化回路１３４：合成回路
１３６：符号化回路１３８：選択回路１４０：モ
ード選択回路１４２：途中参加端末検出装置１４
４：制御装置１４６，１４８，１５０，１５２：通信
回線

Claims

【特許請求の範囲】

【請求項１】複数の動画像通信端末が通信回線を介し
て相互に動画像を通信する多地点間動画像通信システム
であって、新規に参加する動画像通信端末の接続を検出
する新規端末検出手段と、当該新規端末検出手段の検出
出力に従い、少なくとも当該新規に参加する動画像通信
端末が受信すべき画像の画面更新を要求する画面更新要
求信号を発生する画面更新要求発生手段と、当該画面更
新要求信号に応じて、少なくとも当該新規に参加する動
画像通信端末に送信される画像を所定画面数だけ画面更
新する画面更新処理手段とを設けたことを特徴とする多
地点動画像通信システム。
【請求項２】上記複数の動画像通信端末間の動画像通
信を制御する制御装置を具備する請求項１に記載の多地
点動画像通信システム。
【請求項３】上記制御装置が、上記新規端末検出手段
及び上記画面更新要求発生手段を具備すると共に、上記
画面更新要求信号を送出する画面更新要求送出手段を具
備し、当該複数の動画像通信端末のそれぞれが、上記画
面更新処理手段を具備する請求項２に記載の多地点動画
像通信システム。
【請求項４】上記制御装置が、上記新規端末検出手
段、上記画面更新要求発生手段及び上記画面更新処理手
段を具備する請求項２又は３に記載の多地点動画像通信
システム。
【請求項５】上記制御装置が、上記複数の動画像通信
端末からの符号化動画像情報を受信する符号化画像受信
手段と、当該符号化画像受信手段から出力される複数の
受信符号化動画像情報のそれぞれを復号化する復号化手
段と、当該復号化手段から出力される複数の復号化画像
を選択合成して一画面の画像を出力する画面選択合成手
段と、当該画面選択合成手段から出力される選択合成画
像を圧縮符号化する選択合成画像符号化手段と、上記画
面更新要求信号に応じて当該選択合成画像符号化手段に
更新画面の符号化を指示する符号化制御手段と、当該選
択合成画像符号化手段の出力を当該複数の動画像通信端
末装置に送信する送信手段とを備えることを特徴とする
請求項２、３又は４に記載の多地点動画像通信システ
ム。
【請求項６】上記制御装置が、当該複数の動画像通信
端末からの符号化動画像情報を受信する符号化画像受信
手段と、当該符号化画像受信手段から出力される複数の
受信符号化動画像情報のそれぞれを復号化する復号化手
段と、当該符号化画像受信手段から出力される複数の受
信符号化動画像情報から１つの受信符号化動画像情報を
選択する第１の選択手段と、当該復号化手段から出力さ
れる複当該復号化手段から出力される複数の復号化画像
を合成して一画面の画像を出力する合成手段と、当該合
成手段から出力される合成画像を圧縮符号化する合成画
像符号化手段と、当該合成画像符号化手段の出力及び当
該第１の選択手段の出力の何れか一方を選択する第２の
選択手段と、当該合成手段による合成画像を、新規に参
加する動画像端末装置に送信している場合に、当該画面
更新要求信号に応じて当該合成画像符号化手段に画面更
新の符号化を指示する符号化制御手段と、当該第２の選
択手段の出力を当該複数の動画像通信端末装置に送信す
る送信手段とを具備し、当該第２の選択手段で当該第１
の選択手段の出力を選択している場合に、当該画面更新
要求信号を、当該第１の選択手段で選択した受信符号化
動画像情報を送信する動画像端末装置に向けて送出する
ことを特徴とする請求項２、３又は４に記載の多地点動
画像通信システム。
【請求項７】上記制御装置が上記動画像通信端末でも
ある請求項１乃至６の何れか１項に記載の多地点動画像
通信システム。
【請求項８】上記複数の動画像通信端末の１つ以上
が、上記新規端末検出手段、上記画面更新要求発生手段
及び上記画面更新処理手段を具備する請求項１に記載の
多地点動画像通信システム。
【請求項９】上記複数の動画像通信端末は、上記通信
回線にリング状に接続される請求項８に記載の多地点動
画像通信システム。
【請求項１０】上記通信回線が構成するループを上記
動画像通信端末の上記新規端末検出手段の検出出力が周
回する請求項９に記載の多地点動画像通信システム。
【請求項１１】上記複数の動画像通信端末は、上記通
信回線に鎖状に接続する請求項８に記載の多地点動画像
通信システム。
【請求項１２】上記通信回線が構成する鎖上を上記動
画像通信端末の上記新規端末検出手段の検出出力が周回
する請求項１１に記載の多地点動画像通信システム。
【請求項１３】複数の動画像通信端末が通信回線を介
して相互に動画像を通信する多地点間動画像通信システ
ムにおける動画像通信を制御する制御装置であって、新
規に参加する動画像通信端末の接続を検出する新規端末
検出手段と、当該新規端末検出手段の検出出力に従い、
少なくとも当該新規に参加する動画像通信端末が受信す
べき画像の画面更新を要求する画面更新要求信号を発生
する画面更新要求発生手段と、当該画面更新要求信号に
応じて、少なくとも当該新規に参加する動画像通信端末
に送信される画像を所定画面数だけ画面更新する画面更
新処理手段とを具備することを特徴とする制御装置。
【請求項１４】更に、上記複数の動画像通信端末装置
からの符号化動画像情報を受信する符号化画像受信手段
と、当該符号化画像受信手段から出力される複数の受信
符号化動画像情報のそれぞれを復号化する復号化手段
と、当該復号化手段から出力される複数の復号化画像を
選択合成して一画面の画像を上記画面更新処理手段に出
力する画面選択合成手段と、当該画面更新処理手段の出
力を当該複数の動画像通信端末装置に送信する送信手段
を具備し、当該画面更新処理手段が、当該画面選択合成
手段から出力される選択合成画像を圧縮符号化する選択
合成画像符号化手段と、上記画面更新要求信号に応じて
当該選択合成画像符号化手段に画面更新の符号化を指示
する符号化制御手段とを具備する請求項１３に記載の制
御装置。
【請求項１５】更に、上記複数の動画像通信端末装置
からの符号化動画像情報を受信する符号化画像受信手段
と、当該符号化画像受信手段から出力される複数の受信
符号化動画像情報のそれぞれを復号化する復号化手段
と、当該符号化画像受信手段から出力される複数の受信
符号化動画像情報から１つの受信符号化動画像情報を選
択する第１の選択手段と、当該復号化手段から出力され
る複当該復号化手段から出力される複数の復号化画像を
合成して一画面の画像を上記画面更新処理手段に出力す
る合成手段と、当該画面更新処理手段の出力及び当該第
１の選択手段の出力の何れか一方を選択する第２の選択
手段と、当該第２の選択手段の出力を当該複数の動画像
通信端末に送信する送信手段とを具備し、当該画面更新
処理手段が、当該合成手段から出力される合成画像を圧
縮符号化する合成画像符号化手段と、当該合成手段によ
る合成画像を、新規に参加する動画像端末装置に送信し
ている場合に、当該画面更新要求信号に応じて当該合成
画像符号化手段に画面更新の符号化を指示する符号化制
御手段とからなる請求項１３に記載の制御装置。
【請求項１６】複数の動画像通信端末が通信回線を介
して相互に動画像を通信する多地点間動画像通信システ
ムにおける動画像通信を制御する制御装置であって、新
規に参加する動画像通信端末の接続を検出する新規端末
検出手段と、当該新規端末検出手段の検出出力に従い、
少なくとも当該新規に参加する動画像通信端末が受信す
べき画像の画面更新を要求する画面更新要求信号を発生
する画面更新要求発生手段と、少なくとも当該新規に参
加する動画像通信端末に送信される画像を送出する動画
像通信端末に、当該画面更新要求信号を送出する画面更
新要求送出手段とを具備することを特徴とする制御装
置。
【請求項１７】通信回線を介して多地点間で相互に動
画像を通信する多地点間動画像通信システムの動画像通
信端末であって、画面更新要求信号に従い、送信すべき
画像を、所定画面数だけ画面内の画素情報で画像を復元
できる符号化方式で符号化する符号化手段と、当該符号
化手段の出力を通信回線に送出する送出手段とを具備す
ることを特徴とする動画像通信端末。