JPH1066070A - 多地点通信を考慮したテレビ会議システム - Google Patents

Abstract

(57)【要約】 （修正有） 【課題】 複数の画像信号を多重化して伝送可能な多地
点制御装置を複数台接続して多地点制御システムを容易
に実現する画像符号化方式を提供する。 【解決手段】 画像符号化部１１は画像信号のフレーム
を間引きＮ個のマルチフレーム長間にＮ個のサブフレー
ムを構成し，順次符号化して画像符号信号を作成し，必
要に応じ画像信号の仮符号化を行い，画像符号信号の量
を計測する。また，画像復号部３１は画像符号信号を順
次復号してサブフレームを得，補間して画像信号を再生
する。このテレビ会議端末１０は，他の端末から画像符
号信号を受信し，復号して画像信号を再生し端末からの
要求に応じて各端末に送出すべき画像信号を選択した
後，間引処理で得たサブフレームを順次符号化して端末
に送出する。ここで，１フレームは特定の局の画像であ
り，これがランダムに並んでいる。また，複数のＭＣＵ
の各々は自分のグループ内の局の画像を送出する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は，多地点に配置され
たテレビ会議端末とこれらを結ぶ多地点制御装置とを備
えた多地点通信を考慮したテレビ会議システムに関す
る。

【０００２】

【従来の技術】一般に，多地点通信を考慮したテレビ会
議端末は，音声・画像・デ一タ（会議資料等のグラフィ
ックス情報）のメディアを用いて構成されるマルチメデ
ィアテレビ会議システムにおいて，多地点制御装置と通
信回線で接続し，多地点で同時にテレビ会議を実現する
ためのテレビ会議端末である。この多地点制御装置は，
テレビ会議端末がスター状に接続されたネットワークの
中心に設置され，端末間の回線の接続／切断制御，音声
信号の加算（ミキシング）処理，画像信号の切り替え／
合成処理，デ一夕信号の交換等を行う。このテレビ会議
端末において，画像信号の処理は，自動切替モードと手
動切替モードとがあり，前者は話者の音声レベルに基づ
き画像の送信元を決定しこれを自動的に切り替えるモー
ドであり，後者は端末からの指示により切り替え状態を
指定できるモードで，これには受信選択機能，自室送信
機能，議長局が一括して会議中の同報画像を決定指示す
る議長制御機能等がある。

【０００３】また，多地点制御装置には，単一地点の画
像信号を切り替えるものと，複数地点の画像信号の合成
処理するもの，あるいはその双方の機能を併せ持つもの
が存在する。

【０００４】図９は従来の多地点テレビ会議システムを
示すブロック図である。図９では，複数のテレビ会議端
末１１１〜１１０＋Ｎ（ここで，１１０＋Ｎを１１Ｎで
示す，但し，Ｎは自然数）が通話路を介して多地点制御
装置（ＭＣＵ）１０１に接続されたシステムが示されて
いる。この多地点制御装置（ＭＣＵ）１０１は，各テレ
ビ会議端末１１１〜１１Ｎから送られてくる画像を任意
に選択，あるいは合成して各テレビ端末１１１〜１１Ｎ
に送り返している。ここで，合成された画像は，図１１
に示すように，１画面を４分割し，それぞれに各テレビ
会議端末から送られてきた画像を割り当てて構成されて
いる。

【０００５】ここで，２地点間で複数の利用者が画像の
やり取りをする形態では，図１０に示すように各地点に
多地点制御装置（ＭＣＵ）１０１，１０２を設置し，お
互いを通信路１１０で接続した構成で実現することを考
える。多地点制御装置（ＭＣＵ）１０１，１０２には，
それぞれテレビ会議端末１１１，１１２および１２１〜
１２３が接続される。

【０００６】また，特開平３−６１９０号公報（以下，
従来技術１と呼ぶ）に示される多地点テレビ会議システ
ムにおける画像交換方式において，圧縮画像データの伝
送フレーム構成を，画像に１画面をｍ分割し，１画面単
位のフレームヘッダとｍ分割された画面領域である第１
／ｍ画面，第２／ｍ画面，第３／ｍ画面，・・・，第ｍ
／ｍ画面毎にサブフレームヘッダを挿入する構成とし，
画像圧縮処理もサブフレーム単位に完結させる方式とす
ることで，画像圧縮復号処理を行わずに画質劣化もなく
画面合成による圧縮画像データの交換を行うことができ
る。

【０００７】この従来の画像交換方式は，圧縮画像デー
タの伝送フレームを画像の１画面をｍ分割し，１画面単
位のフレームヘッダとｍ分割された画面領域である第１
／ｍ画面，第２／ｍ画面，第３／ｍ画面，・・・，第ｍ
／ｍ画面毎にサブフレームヘッダを挿入する構成とし，
画像圧縮処理もサブフレーム単位で完結させ送信側で予
め入力画像を１／ｍ画面に空間的間引き処理を行って第
１／ｍ画面の圧縮画像データとして送信されたｎ（ｎ＞
１なる整数）地点からの圧縮画像データを入力して指定
されたｍ（ｍはｎ≧ｍ≧１なる整数）地点のデータを選
択する選択回路と，ｍ地点からの圧縮画像データのフレ
ーム同期検出を行い予め定められた場所に挿入された圧
縮画像データを遅延制御及びサプフレームヘッダの付け
替えを行って第１／ｍ画面，第２／ｍ画面，第３／ｍ画
面，・・・，第ｍ／ｍ画面にそれぞれ多重する多重回路
とを備えることで圧縮画像データの交換を行う。

【０００８】

【発明が解決しようとする課題】従来技術１においてテ
レビ会議端末は，画像符号信号を多地点制御装置（ＭＣ
Ｕ）に送り，そこでは，サブフレーム単位に切り替える
動作しかしないので，多地点制御装置（ＭＣＵ）１０
１，１０２で扱うサブフレームの作成単位は，互いに同
じでなければならない。必然的に，多地点制御装置（Ｍ
ＣＵ）１０１，１０２に接続された端末１１１，１１２
および１２１〜１２３で作成するサブフレームの作成単
位も同じになる。このため，多地点制御装置（ＭＣＵ）
１０１と１０２で会議に参加するテレビ会議端末の総数
をＳとすると，すべてのテレビ会議端末は（Ｓ−１）分
割画面が適用されることになり，図１０では，テレビ会
議端末の総数は５であるので，図１１に示される４分割
画面が適用されることになる。

【０００９】したがって，従来技術では，以下に示す問
題点があった。

【００１０】従来技術１に示される多地点テレビ会議方
式における画像交換装置では，圧縮画像データの伝送フ
レーム構成を，符号化量に関わらず，画像の１画面をｍ
分割し処理している，たとえば，Ａ，Ｂ，Ｃ，Ｄの４地
点で会議を行う場合，Ａ，Ｂ，Ｃの３地点では符号化量
の小さい画像信号，Ｄ地点では符号化量の大きい画像信
号を送ろうとした時，Ａ，Ｂ，Ｃ，Ｄ地点の画像信号に
等分して情報量を与えるために，Ａ，Ｂ，Ｃ地点に比べ
て符号化量の大きいＤ地点の画像の解像度は大幅に劣化
し非常に見ずらくなってしまう。

【００１１】また，図９に示されるテレビ会議端末にお
いて，端末で再生される画像信号は，多地点制御装置
（ＭＣＵ）１０１と１０２で会議に参加する端末の総数
が小さい場合は許容できるが，参加総数が増す毎に端末
で再生される分割画面は小さくなり，また，拡大される
画像の解像度は大幅に劣化し，非常に見づらくなる。

【００１２】また，テレビ会議端末同士を接続した場
合，１画面だけを送受信するように出来ていて複数の画
像を送受信する事が出来なかった。

【００１３】また，多地点制御装置（ＭＣＵ）１０１，
１０２とテレビ会議端末１１１〜１２３を接続する場
合，多地点制御装置（ＭＣＵ）１０１，１０２は，テレ
ビ会議端末から送られてくる画像を任意に選択，あるい
合成して各テレビ会議端末に送り返している。合成され
た画像は，たとえば１画面を４分割し，それぞれに各テ
レビ会議端末から送られてきた画像を割り当てて構成さ
れていた。

【００１４】さらに，多地点制御装置（ＭＣＵ）１０
１，１０２間の回線数を１回線に限定せず多地点制御装
置（ＭＣＵ）１０１，１０２間に複数の通信路を設ける
ことで，端末すべての画像を任意に切り替えられる構成
とすることは可能だが，通信費が端末数に比例して増大
してしまう。

【００１５】そこで，本発明の第１の技術的課題は，複
数の画像信号を多重化して，伝送可能な多地点制御装置
を複数台接続して多地点制御システムを構築する応用例
を容易に実現可能とする画像符号化／複合化方式を提供
することにある。

【００１６】また，本発明の第２の技術的課題は，前記
画像符号化／複合化方式を用いたテレビ会議端末を提供
することにある。

【００１７】また，本発明の第３の技術的課題は，前記
テレビ会議端末同士を接続する多地点制御装置を提供す
ることにある。

【００１８】さらに，本発明の第４の技術的課題は，前
記テレビ会議端末とこれらに接続された前記多地点制御
装置とを備えた多地点通信を考慮したテレビ会議システ
ムとを提供することにある。

【００１９】

【課題を解決するための手段】従来技術では，圧縮デ一
夕の伝送フレームを画像の１画面をｍ分割した画像デ一
夕毎に，空間的間引きをして１／ｍ画面の圧縮デ一夕と
する方法を用いているに対して，本発明では，単位時間
に入力される画像信号のフレーム数をＮフレームにつき
１フレームずつ間引いてサブフレームを構成する方式と
した。

【００２０】また，従来技術において，テレビ会議端末
から画像信号を多地点制御装置では，サブフレーム単位
に切り替える動作しか行わなかったが，本発明では端末
から画像符号信号を受信した後，これを復号して画像信
号を再生し，端末からの要求に応じて各端末に送出すべ
き画像信号を選択した後，単位時間（例えば１秒間））
に入力されるこの画像信号のフレーム数をＮフレームつ
き１フレームずつ間引いて，動き情報が１／Ｎに相当す
るサブフレームをＮ個構成し，この各サブフレームを順
次符号化して得た画像符号信号を端末に送出するように
した。

【００２１】また，本発明では，多地点制御装置の送信
側において，入力される画像信号を正式に符号化する前
に仮の符号化を実行し，発生する画像符号信号の量を計
測して動きの情報量を得，この結果を参照して画像信号
の間引き率を可変し，この間引処理により得られたサブ
フレームを順次サブフレーム単位に符号化するようにし
た。

【００２２】さらに，本発明では，従来技術に示される
方法で実現されるように画像信号の動きを重視して画像
信号のサブフレームを構成する方式ではなく，画像の解
像度を重視して画像信号のサブフレームを構成する方式
を採用した。

【００２３】また，本発明では，動きの少ない画像信号
に等分して情報量を与えることは無駄であるので，上記
３の機能により符号化量の小さい画像信号には間引きの
比率を大きく，符号化量の大きい画像信号には間引きの
比率を小さくできるようにした。

【００２４】即ち，本発明によれば，送信側において，
予め定められた単位時間に入力される画像信号のフレー
ム数をＮフレーム（但し，Ｎは２以上の整数）につき１
フレームずつ間引いてＮ個のサブフレームを構成し，こ
のサブフレームを順次符号化して画像符号信号を作成
し，この画像符号信号を順次送信し，受信側において，
この送信された画像符号信号を順次受信し，この画像符
号信号を順次復号してＮ個のサブフレームを得，このＮ
個のサブフレームを補間して画像信号を再生することを
特徴とする画像符号化／復号化方式が得られる。

【００２５】ここで，本発明の前記画像符号化／復号化
方式において，前記単位時間は１秒であることが好まし
い。

【００２６】また，本発明によれば，多地点制御装置を
介して複数の端末間で会議を行う多地点通信を考慮した
テレビ会議システムにおいて，前記各端末は，予め定め
られた単位時間に入力される画像信号のフレーム数をＮ
フレームにつき１フレームずつ間引いて，動き情報が１
／Ｎに相当するサブフレームをＮ個構成した後，各サブ
フレームを順次符号化して得た画像符号信号を前記多地
点制御装置に送出し，前記多地点制御装置は，前記各端
末から送出された前記画像符号信号をサブフレーム単位
に切り替えて前記各端末に送出し，前記各端末は，前記
多地点制御装置がサブフレーム単位に切り替えて送出し
た画像符号信号を，順次復号化して得たＮ個のサブフレ
ームを補間して１フレームの画像信号として再生するこ
とを特徴とする多地点通信を考慮したテレビ会議システ
ムが得られる。

【００２７】ここで，本発明の前記多地点通信を考慮し
たテレビ会議システムにおいて，前記単位時間は１秒で
あることが好ましい。

【００２８】また，本発明によれば，送信側において，
入力される画像信号を正式に符号化する前に仮の符号化
を実行し，発生する画像符号信号の量を計測することで
動きの情報量を得，この結果を参照して画像信号の間引
き率を可変し，この間引処理により得られたサブフレー
ムを順次サブフレーム単位に符号化することを特徴とす
るテレビ会議端末が得られる。

【００２９】また，本発明によれば，画像信号のフレー
ムを間引いてＮ個のマルチフレーム長間にＮ個のサブフ
レームを構成するサブフレーム多重化器と，前記サブフ
レームを順次符号化して画像符号信号を作成する画像符
号化器とを備えた画像符号化部と，前記画像符号信号を
順次復号してサブフレームを得る画像復号器と，前記サ
ブフレームを補間して画像信号を再生するサブフレーム
分離部とから成る画像復号部と，端末から画像符号信号
を受信した後，これを復号して画像信号を再生し端末か
らの要求に応じて各端末に送出すべき画像信号を選択し
た後，間引処理により得られたサブフレームを順次符号
化して端末に送出する機能を有することを特徴とするテ
レビ会議端末が得られる。

【００３０】ここで，本発明の前記テレビ会議端末にお
いて，前記画像符号化部は，更に，画像信号の仮符号化
を行う画像仮符号化器と，画像符号信号の量を計測する
画像情報量計数器とを備えていることが好ましい。

【００３１】また，本発明においては，前記テレビ会議
端末において，前記画像信号の１フレームは特定の局の
画像であり，これがランダムに並んで構成されているこ
とが好ましい。

【００３２】また，本発明によれば，テレビ会議端末間
に接続される多地点制御装置において，画像信号のフレ
ームを間引いてＮ個のマルチフレーム長間にＮ個のサブ
フレームを構成するサブフレーム多重化器とを備えた画
像符号化部と，前記画像符号信号を順次復号してサブフ
レームを得る画像復号器と，前記サブフレームを補間し
て画像信号を再生するサブフレーム分離部とから成る画
像復号部と，端末から画像符号信号を受信した後，これ
を復号して画像信号を再生し端末からの要求に応じて各
端末に送出すべき画像信号を選択した後，間引処理によ
り得られたサブフレームを順次符号化して端末に送出す
る機能を有することを特徴とする多地点制御装置が得ら
れる。

【００３３】ここで，本発明の前記多地点制御装置にお
いて，前記画像符号化部は，さらに，画像信号の仮符号
化を行う画像仮符号化器と，画像符号信号の量を計測す
る画像情報量計数器とを備えていることが好ましい。

【００３４】さらに，本発明によれば，前記したいずれ
かの多地点制御装置を複数備えた多地点テレビ会議シス
テムであって，前記複数の多地点制御装置の内の夫々の
多地点制御装置は，夫々が接続されるテレビ会議端末の
局の画像を送出することを特徴とする多地点通信を考慮
したテレビ会議システムが得られる。

【００３５】

【発明の実施の形態】以下，本発明の実施の形態につい
て図面を参照しながら詳細に説明する。

【００３６】図１は本発明の第１の実施の形態における
テレビ会議端末の構成を示すブロック図である。図１に
示すように，テレビ会議端末１０は，カメラ１−１〜１
−４と，モニタ２−１〜２−ｎと，コーデック３と，通
信インタフェース部４とを備えている。また，コーディ
ック３は，画像処理部７と，画像切替／合成部５と，画
像切替／合成制御部６とを備えている。

【００３７】画像処理部７は，画像復号化部１１と，画
像フレーム分離化部２１と，画像符号化部３１と，画像
フレーム多重化部４１とを備えている。この画像復号化
部３１は，通信インタフェース部４を経由して受信した
画像データからフレーム開始符号を検出し多重化された
制御情報を分離した後，これを画像フレーム分離化部２
１へ出力する。

【００３８】画像復号化部３１と画像フレーム分離化部
２１は，それぞれ画像復号化部３１で分離された制御情
報の内，後に詳しく説明する画像番号を元にして画像デ
ータを復号し，フレーム単位で多重化された複数の画像
を分離する。

【００３９】画像切替／合成部５は，画像切替／合成制
御部６からの制御によって，画像を任意に切替え，ある
いは，複数の画像の中から必要に応じた画像を合成した
ものを選択し，モニタヘ出力する。

【００４０】画像フレーム多重化部４１は，画像符号化
部３１からの制御でカメラから送られてきた複数の画像
をフレーム単位で切り替えることにより多重化し，画像
符号化部３１は，これを符号化すると共に後に詳しく説
明する画像番号を含む制御情報を多重化した後，通信イ
ンタフェース部４を介して出力する。

【００４１】図示しない多地点制御装置（ＭＣＵ）で
は，テレビ会議端末１０から送られてきた複数の画像デ
ータを再合成してテレビ会議端末１０へ送り返す動作を
行う。

【００４２】図２及び図３は，本発明の第１の実施の形
態による画像符号化方式のテレビ会議端末の動作の説明
に供せられる図である。これらの図において，画像符号
化部３１は，サブフレーム多重化器３２と画像符号器３
３で構成されており，ここでは，単位時間（例えば，１
秒間）に入力される画像信号のフレームを４フレームに
つき１フレームずつ間引いて４個のサブフレームを構成
しこれらを符号化することを想定している。そして，図
２は単一の原画像信号Ａを扱う場合を示し，サブフレー
ムＡ１，Ａ２，Ａ３，及びＡ４は，それぞれ原画像信号
Ａを４フレーム毎に間引いている。一方，図３は別々の
４つの原画像信号Ｂ，Ｃ，Ｄ，Ｅを扱う場合を示し，サ
ブフレームＢ１，Ｃ１，Ｄ１，Ｅ１は，原画像信号Ｂ，
Ｃ，Ｄ，及びＥをそれぞれ４フレーム毎に間引いてい
る。それぞれのサブフレームは，原画像信号に対して動
き情報が１／４に相当する。

【００４３】画像符号化器３３は，このサブフレームを
順次サブフレーム単位に符号化しサブフレーム識別信号
を付加して出力する。画像符号信号は，画像符号化器３
３から図２においてＡ１´，Ａ２´，Ａ３´，Ａ４´の
シリアル信号のフォーマットで，また，図３においてＢ
１´，Ｃ１´，Ｄ１´，Ｅ１´のシリアル信号のフォー
マットで出力される。

【００４４】図４及び図５は本発明の第１の実施の形態
の画像復号方式のテレビ会議端末の動作の説明に供せら
れるブロック図である。図４及び図５に示すように，画
像復号化部１１は，画像復号器１２とサブフレーム分離
器１３で構成される。図４は，前述した図２のＡ１´，
Ａ２´，Ａ３´，Ａ４´のシリアル信号のフォーマット
で入力される画像符号信号を復号し単一の画像信号Ａを
再生する揚合を示している。また，図５は，前述した図
３のＢ１´，Ｃ１´，Ｄ１´，Ｅ１´のシリアル信号の
フォーマットで入力される画像符号信号を復号し４つの
画像信号Ｂ，Ｃ，Ｄ，Ｅを再生する場合を示している。

【００４５】サブフレーム分離器１３は，サブフレーム
識別信号を参照して，画像符号信号が単一の原画像信号
のもの，例えば，図４に示すように，Ａ１´，Ａ２´，
Ａ３´，Ａ４´の場合は，復号されたサブフレームを補
間してーつの画像信号Ａを再生する。一方，画像符号信
号が別の原画像信号のもの，例えば，図５に示すよう
に，Ｂ１´，Ｃ１´，Ｄ１´，Ｅ１´の場合は，これら
を復号すると単位時間の画像信号のフレーム数が原画像信号
に対し１／４になるので，画像符号化部側で伝送しなか
ったサブフレームの数（ここでは３回）だけ再生したサ
ブフレームを繰り返す等の処理により画像信号Ｂ，Ｃ，
Ｄ，及びＥを別々に再生する。

【００４６】図６は，本発明の実施の形態によるテレビ
会議端末を用いた多地点制御装置の画像処理部８の構成
例を示すブロック図である。図６に示すように，多地点
制御装置の画像処理部８は，本発明のテレビ会議端末の
画像符号化方式の機能を有する。画像処理部８は，第
１，第２，第３の画像復号化部１４−１，１４−２，１
４−３（任意の場合，符号１４で示す）と，第１，第
２，第３の画像符号化部３４−１，３４−２，３４−３
（任意の場合，符号３４で示す）と，第１，第２，第３
の画像切替部１５−１，１５−２，１５−３（任意の場
合，符号１５で示す）と，画像切替制御部１６とを備え
て構成される。画像復号化部１４は，画像復号器１２及
びサブフレーム分離器１３からなる。また，画像符号化
部３４は，サブフレーム多重化器３３及び画像符号化器
３２からなる。

【００４７】画像復号化部１４は，通信インタフェース
部４を経由して受信した画像符号信号を画像復号器１２
でサブフレーム単位に復号し，サブフレーム分離器１３
でサブフレーム識別信号を参照して，単一の原画像信号
のものの場合は，一つの画像信号に，別の原画像信号の
ものの場合は別々の画像信号に再生し，これを画像切替
部１５へ出力する。

【００４８】また，画像切替部１５は，画像切替制御部
１６からの制御信号により画像復号化部１４で再生され
た画像信号を切り替えて画像符号化部３４へ出力する。

【００４９】画像復合化部１４は，画像切替部１５から
の画像信号を受信し，これを符号化して通信インターフ
ェース部４へ出力する。

【００５０】サブフレーム多重化器３２では，単一の画
像信号を符号化する場合は，原画像信号から作成された
４つのサブフレームを順次切り替え，複数の画像信号を
符号化する場合は複数の原画像信号から作成されたサブ
フレームを順次切り替える。画像符号化器１２は，これ
らをサブフレーム単位に符号化し，サブフレーム識別信
号を付加して出力する。

【００５１】画像切替制御部１６は，前述したように画
像切替部１５の各々を制御すると共に，画像符号化部３
４で単一の画像を符号化するか，あるいは複数の画像信
号を符号化するかを指示する。

【００５２】この制御は，例えば多地点制御装置が自動
切替モードで動作する場合は，話者の音声レベルに基づ
き話者端末の単一画像を送信するように，また，手動切
替モードで動作する場合は，受信選択機能，自室送信機
能，議長制御機能等に応じ，端末からの指示により，切
替状態を画像切替制御部から画像切替部と画像符号化部
に指示することにより行われる。

【００５３】ここで，２地点間で複数の利用者が画像情
報の授受を行う形態を，図７に示すように各地点に多地
点制御装置５１，５２を設置し，お互いを通信路５３で
接続した構成で考える。多地点制御装置５１，５２に
は，それぞれテレビ会議端末１０−１，１０−２および
テレビ会議端末２０−１〜２０−３が接続されている。

【００５４】図７に加えて図６を再び参照して，この構
成における多地点制御装置５１の画像処理部の動作を説
明する。第１の画像復号化部１４−１と第１の画像符号
化部３４−１とは，通信インタフェース部４を経由して
テレビ会議端末１０−１（図７参照）と画像信号を送受
する。また，第２の画像復号化部１４−２と第２の画像
符号化部３４−２は，通信インタフェース部４を経由し
てテレビ会議端末１０−２（図７参照）と画像信号を送
受し，第３の画像復号部１４−３と第３の画像符号化部
３４−３は，通信インタフェース部４を経由して多地点
制御装置５２と画像信号を送受している。

【００５５】テレビ会議端末１０−１とテレビ会議端末
１０−２および，多地点制御装置５２から送出される画
像符号信号は第１乃至第３の画像復号化部１４−１〜１
４−３でそれぞれ復号され画像信号Ａ，Ｂおよび，Ｃ，
Ｄ，Ｅとして第１乃至第３の画像切替部１５−１〜１５
−３へ供給される。画像信号Ａ，Ｂは単一画像から復号
された画像信号なので動きの情報量は，ほぼ原画像のま
まで，画像信号Ｃ，Ｄ，Ｅの動き情報量は，約１／３に
なる。ただし，何れの画像も解像度は原画像のままであ
る。

【００５６】テレビ会議端末１０−１，１０−２，およ
び，多地点制御装置５２へ送出する画像信号は，画像切
替部１５−１〜１５−３で選択された後，第１乃至第３
の画像符号化部３４−１〜３４−３で符号化される。

【００５７】画像切替部１５−１〜１５−３へは，全て
のテレビ会議端末の画像信号が入力されるため，テレビ
会議端末１０−１，１０−２と多地点制御装置５２へは
任意の画像信号を選択可能で，また単一画像，複数の画
像の何れも送出可能である。

【００５８】テレビ会議端末１０では，多地点制御装置
から複数の画像を受信した場合，復号した複数の画像信
号のーつを選択して表示するか，あるいは，任意に合成
して表示する。

【００５９】以上説明したように，本発明の実施の形態
による画像符号化方式，画像復号化方式を多地点制御装
置に応用した場合，多地点制御装置５１と５２の総数参
加総数が増す毎に端末で再生される画像信号の動き情報
量は小さくなるが，解像度は原画像のままであるという
特長がある。

【００６０】さらに，テレビ会議端末１０の画像復号化
部１１と画像符号化部３１は，対向する多地点制御装置
５１，５２の画像符号化部３４と画像復号化部１４に１
対１で対応する構成となっているため，高能率符号化を
適用する場合も画像更新要求の制御が簡単に行え，多地
点制御装置５１，５２を複数台接続して多地点制御シス
テムを構築する応用例には適した方式である。

【００６１】図８は，本発明の第２の実施の形態による
画像符号化方式のテレビ会議端末を示すブロック図であ
る。図８に示す画像符号化方式は，図２又は図３に示し
た画像符号化部３１に，画像仮符号化器３５と符号情報
量計数器３６を追加した構成になっており，図２及び３
のテレビ会議端末の画像符号化方式と置き換えて画像処
理部７を構成することができる。以下にこの動作を説明
する。

【００６２】画像仮符号化器３５は入力される複数の画
像信号を正式に符号化する前に仮に符号化を行い，画像
符号信号を出力する。発生した画像符号信号の量は，符
号情報量計数器３６で計測され，これにより画像符号化
器３３は，動きの情報量を得る。画像符号化器３３は，
この結果を参照してサブフレーム多重化器３２に各画像
信号の間引きの比率を指示すると共に，可変周期で入力
されるサブフレームをサブフレーム単位に符号化する。

【００６３】例えば，画像信号Ｂ，Ｃ，Ｄ，Ｅに対し，
符号情報量計数器３５が出力する符号量の比率が単位時
間当たり２：２：１：１であるとすると，サブフレーム
多重化器３２は，単位時間の各画像信号Ｂ，Ｃ，Ｄ，Ｅ
のフレームから２／６，２／６，１／６，１／６フレームの
割合でサブフレームを作製し，画像符号化器はこのサブ
フレーム単位で順次符号化する。

【００６４】以上の動作により，本発明の実施の形態で
は，動きの少ない画像信号に等分して情報量を与えるこ
とを避け，画像符号量の少ない画像信号入力に対して
は，間引き率を大きくし，符号化するサブフレームの数
を少なく割り当て，逆に画像符号化量の大きい画像信号
には間引きの比率を小さくし，符号化するサブフレーム
の数を多く割り当てるという動作により，回線を効率よ
く使用できるようにした。

【００６５】即ち，本発明の実施の形態では，画像をフ
レーム単位で多重化，分離化することで複数の画像を送
受信することができ，また画像切替／合成部，画像切替
／合成制御部を設けることで，利用者毎に，他の利用者
に影響を与えずに１つの任意の画像を選択するか，複数
の画像の中から必要に応じた画面を合成した物を選択す
ることが可能になる。

【００６６】

【発明の効果】以上説明したように，本発明では，複数
の画像信号を多重化して，伝送可能な多地点制御装置を
複数台接続して多地点制御システムを構築する応用例を
容易に実現可能とする画像符号化方式を用いた多地点通
信用テレビ会議端末を提供することができる。

【００６７】また，本発明のテレビ会議端末を用いれ
ば，画像フレームを多重化する事により，従来画像の数
だけ必要だった回線が，１回線で複数の画像を送受信す
る事が可能となり回線の通信コストを削減することが出
来る。

【００６８】具体的には，総数参加総数が増しても，端
末再生される画像信号の解像度は原画像のままである。
また，高能率符号化を適用する場合も画像更新要求の制
御が簡単に行える。さらに，動きの少ない画像信号に対
しては，間引き率を大きくするという動作により，回線
を効率よく使用できるという効果を有する。

【図面の簡単な説明】

【図１】本発明の第１の実施の形態によるテレビ会議端
末の構成の説明図である。

【図２】本発明の第１の実施の形態による画像符号化方
式の一例の説明図である。

【図３】本発明の第１の実施の形態による画像符号化方
式の他の例の説明図である。

【図４】本発明の第１の実施の形態による画像復号方式
の一例の説明図である。

【図５】本発明の第１の実施の形態による画像復号方式
の他の例の説明図である。

【図６】本発明の第１の実施の形態による多地点制御装
置の画像信号処理部の構成を示すブロック図である。

【図７】本発明の第１の実施の形態による多地点制御装
置の使用形態の説明図である。

【図８】本発明の第２の実施の形態による画像符号化方
式の説明図である。

【図９】従来のテレビ会議端末の構成の一例を示す説明
図である。

【図１０】従来の多地点制御装置の使用形態の説明図で
ある。

【図１１】従来の多地点制御装置の合成画面の一例を示
す図である。

【符号の説明】

１−１，１−４ カメラ１，４ ２−１，２−ｎ モニタ ３ コーデック ４ 通信インターフェース部 ５ 画像切替／合成部 ６ 画像切替／合成制御部 ７ 画像処理部 １０，１０−１，１０−２ テレビ会議端末 １１ 画像復合化部 １２ 画像復合器 １３ サブフレーム分離器 １４−１，１４−２，１４−３ 第１，第２，及び第
３の画像復合化部 １５−１，１５−２，１５−３ 第１，第２，及び第
３の画像切替部 １６ 画像切替制御部 ２０−１，２０−２，２０−３ テレビ会議端末 ２１ 画像フレーム分離化部 ３１ 画像符号化部 ３２ サブフレーム多重化器 ３３ 画像符号化器 ３４−１，３４−２，３４−３ 第１，第２及び第３
の画像符号化部 ３５ 画像仮符号化器 ３６ 符号情報量計数器 ４１ 画像フレーム多重化部 ５１，５２ 多地点制御装置（ＭＣＵ） １１１，１１２，１１Ｎ テレビ会議端末 １０１，１０２ 多地点制御装置（ＭＣＵ） １２１，１２２，１２３ テレビ会議端末

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁶ 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｈ０４Ｎ 7/15 9744−5Ｋ Ｈ０４Ｌ 11/18

Claims (11)

【特許請求の範囲】
1. 【請求項１】 送信側において，予め定められた単位時
   間に入力される画像信号のフレーム数をＮフレーム（但
   し，Ｎは２以上の整数）につき１フレームずつ間引いて
   Ｎ個のサブフレームを構成し，このサブフレームを順次
   符号化して画像符号信号を作成し，この画像符号信号を
   順次送信し，受信側において，この送信された画像符号
   信号を順次受信し，この画像符号信号を順次復号してＮ
   個のサブフレームを得，このＮ個のサブフレームを補間
   して画像信号を再生することを特徴とする画像符号化／
   復号化方式。
2. 【請求項２】 請求項１記載の画像符号化／復号化方式
   において，前記単位時間は１秒であることを特徴とする
   画像符号化／復号化方式。
3. 【請求項３】 多地点制御装置を介して複数の端末間で
   会議を行う多地点通信を考慮したテレビ会議システムに
   おいて，前記各端末は，予め定められた単位時間に入力
   される画像信号のフレーム数をＮフレームにつき１フレ
   ームずつ間引いて，動き情報が１／Ｎに相当するサブフ
   レームをＮ個構成した後，各サブフレームを順次符号化
   して得た画像符号信号を前記多地点制御装置に送出し，
   前記多地点制御装置は，前記各端末から送出された前記
   画像符号信号をサブフレーム単位に切り替えて前記各端
   末に送出し，前記各端末は，前記多地点制御装置がサブ
   フレーム単位に切り替えて送出した画像符号信号を，順
   次復号化して得たＮ個のサブフレームを補間して１フレ
   ームの画像信号として再生することを特徴とする多地点
   通信を考慮したテレビ会議システム。
4. 【請求項４】 請求項３記載の多地点通信を考慮したテ
   レビ会議システムにおいて，前記単位時間は１秒である
   ことを特徴とする多地点通信を考慮したテレビ会議シス
   テム。
5. 【請求項５】 送信側において，入力される画像信号を
   正式に符号化する前に仮の符号化を実行し，発生する画
   像符号信号の量を計測することで動きの情報量を得，こ
   の結果を参照して画像信号の間引き率を可変し，この間
   引処理により得られたサブフレームを順次サブフレーム
   単位に符号化することを特徴とするテレビ会議端末。
6. 【請求項６】 画像信号のフレームを間引いてＮ個のマ
   ルチフレーム長間にＮ個のサブフレームを構成するサブ
   フレーム多重化器と，前記サブフレームを順次符号化し
   て画像符号信号を作成する画像符号化器とを備えた画像
   符号化部と，前記画像符号信号を順次復号してサブフレ
   ームを得る画像復号器と，前記サブフレームを補間して
   画像信号を再生するサブフレーム分離部とから成る画像
   復号部と，端末から画像符号信号を受信した後，これを
   復号して画像信号を再生し端末からの要求に応じて各端
   末に送出すべき画像信号を選択した後，間引処理により
   得られたサブフレームを順次符号化して端末に送出する
   機能を有することを特徴とするテレビ会議端末。
7. 【請求項７】 請求項６記載のテレビ会議端末におい
   て，前記画像符号化部は，更に，画像信号の仮符号化を
   行う画像仮符号化器と，画像符号信号の量を計測する画
   像情報量計数器とを備えていることを特徴とするテレビ
   会議端末。
8. 【請求項８】 請求項６又は７記載のテレビ会議端末に
   おいて，前記画像信号の１フレームは特定の局の画像で
   あり，これがランダムに並んで構成されていることを特
   徴とするテレビ会議端末。
9. 【請求項９】 テレビ会議端末間に接続される多地点制
   御装置において，画像信号のフレームを間引いてＮ個の
   マルチフレーム長間にＮ個のサブフレームを構成するサ
   ブフレーム多重化器とを備えた画像符号化部と，前記画
   像符号信号を順次復号してサブフレームを得る画像復号
   器と，前記サブフレームを補間して画像信号を再生する
   サブフレーム分離部とから成る画像復号部と，端末から
   画像符号信号を受信した後，これを復号して画像信号を
   再生し端末からの要求に応じて各端末に送出すべき画像
   信号を選択した後，間引処理により得られたサブフレー
   ムを順次符号化して端末に送出する機能を有することを
   特徴とする多地点制御装置。
10. 【請求項１０】 請求項９記載の多地点制御装置におい
    て，前記画像符号化部は，さらに，画像信号の仮符号化
    を行う画像仮符号化器と，画像符号信号の量を計測する
    画像情報量計数器とを備えていることを特徴とする多地
    点制御装置。
11. 【請求項１１】 請求項９又は１０記載の多地点制御装
    置を複数備えた多地点テレビ会議システムであって，前
    記複数の多地点制御装置の内の夫々の多地点制御装置
    は，夫々が接続されるテレビ会議端末の局の画像を送出
    することを特徴とする多地点通信を考慮したテレビ会議
    システム。