JPH07115627A

JPH07115627A - 画像通信端末装置

Info

Publication number: JPH07115627A
Application number: JP5259769A
Authority: JP
Inventors: Makoto Senda; 誠千田
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1993-10-18
Filing date: 1993-10-18
Publication date: 1995-05-02

Abstract

(57)【要約】【目的】小型化し、安価にする。【構成】各端末から受信した各ＱＣＩＦ画像符号化デ
ータは、ＢＣＨ復号化回路６０−１〜６０−４により並
列にＢＣＨ復号化されて受信バッファ６２−１〜６２−
４に格納される。復号化制御回路１１２は、各受信バッ
ファ６２−１〜６２−４の記憶状況を調べ、１フレーム
分以上記憶する１つの受信バッファ６２を時分割で選択
し、記憶されている画像符号化データを読み出す。回路
６６〜８０により復号化される。フレームメモリ９２及
び同９４の全メモリ空間は、接続回線数に応じた数のメ
モリ空間に区分され、各端末に割り振られている。復元
された画像データは、フレームメモリ９２又は同９４
の、送信端末に該当するメモリ空間に格納される。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、画像通信端末装置に関
し、より具体的には、テレビ電話やテレビ会議などに使
用する画像通信端末装置に関する。

【０００２】

【従来の技術】ディジタル公衆通信回線網（所謂、ＩＳ
ＤＮ）の普及により、画像、音声及びデータの同時的な
通信な可能になり、テレビ電話及びテレビ会議システム
が現実的になってきた。ディジタル回線を用いた音声映
像サービス用のサービス規定、プロトコル規定及びマル
チメディア多重化フレーム構成規定が、ＩＴＵ−Ｔ（旧
ＣＣＩＴＴ）勧告Ｈ．３２０、Ｈ．２４２及びＨ．２２
１等として発表されている。

【０００３】Ｈ．３２０は、音声映像サービスの全般の
システム・アスペクトを規定する。Ｈ．２２１は、６４
Ｋｂｐｓ〜１，９２０Ｋｂｐｓチャネル上での音声映像
伝送における、フレーム構造並びに端末能力の交換及び
通信モードの指定等に使用されるＦＡＳ（Ｆｒａｍｅ
ＡｌｉｇｎｍｅｎｔＳｉｇｎａｌ）及びＢＡＳ（Ｂｉ
ｔ−ｒａｔｅＡｌｌｏｃａｔｉｏｎＳｉｇｎａｌ）
の符号化割り当てを規定する。Ｈ．２４２はＢＡＳによ
る端末間の能力交換及び通信モード切換えのプロトコル
を規定する。

【０００４】上記勧告ではまた、エンド・ツー・エンド
の物理コネクションの設定、並びに、インチャネルでの
ＦＡＳによる同期確立後、インチャネルでＢＡＳによる
端末能力の交換シーケンス及び通信モードの指定による
モード切換えシーケンス等の手順により端末間で画像、
音声及びデータ等の複合情報通信を行なう方法が規定さ
れている。

【０００５】なお、各端末は、自己の端末能力を状況に
応じて所定範囲で変更又は選択できるようになってお
り、交換された能力の範囲内でどの通信モードを用いる
かは、規定の範囲外である。

【０００６】画像、音声及びデータを同時的に伝送する
場合の各情報の伝送速度については、音声は音声符号の
符号化方式により決定され、データは指定値に設定さ
れ、画像には、通信回線の伝送速度の中の残りの伝送能
力が割り当てられる。

【０００７】画像情報の圧縮方式としては、圧縮率を高
めると共に、伝送エラーの伝搬を少なく抑えられるよう
に、フレーム内符号化（ＩＮＴＲＡ）と動き補償フレー
ム間符号化（ＩＮＴＥＲ）を混在させる符号化方式が提
案されている。

【０００８】ディジタル公衆網は、ＩＳＤＮとして既に
実用化されている。ユーザに提供されているインターフ
ェースは、基本インターフェース（２Ｂ（６４Ｋｂｐ
ｓ）＋Ｄ（１６Ｋｂｐｓ））と一次群インターフェース
（Ｈ０（３８４Ｋｂｐｓ）、Ｈ１（１．５Ｍｂｐｓ）及
び２３Ｂ＋Ｄ）である。基本インターフェースは、現在
のアナログ公衆網に代わるものである。相手端末との呼
接続にはアウトバンド・チャネルであるＤチャネルを使
用し、音声、画像及びデータなどの情報データの伝送に
はＢチャネルを使用する。Ｂチャネルは２つあるので、
この２チャネル間の同期をとることにより、最高で１２
８Ｋｂｐｓのデータ転送（バルク転送）が可能になる。
ＴＶ電話などでは大量のデータ伝送容量が必要になるの
で、バルク転送は非常に有効である。

【０００９】

【発明が解決しようとする課題】ＴＶ会議又はＴＶ電話
で、多地点間との相互通信を考えた場合には、回線部は
当然複数持つ必要がある。画像及び音声に関しても、符
号化復号化回路を回線数だけもつ必要がある。

【００１０】音声の場合、画像に比べればデータ量が少
ないので、符号化復号化回路を複数持つことはさほど問
題にはならないが、画像の場合には、アルゴリズムも複
雑で且つデータ量も多いので、符号化復号化回路が非常
に大型で、しかも、高速な演算処理のものでなければな
らない。また、使用する記憶容量もたいへん大きい。従
って、画像符号化復号化回路を複数持つのは、非常に難
しい。

【００１１】また、各復号化部で復号化した画像データ
を他の画像データ（他の端末からの受信画像、入力画像
など）と合成するのにも、膨大なメモリ容量が必要にな
るという問題があった。

【００１２】本発明は、このような問題点を解決する画
像通信端末装置を提示することを目的とする。

【００１３】

【課題を解決するための手段】本発明に係る画像通信端
末装置は、Ｎ個の端末と同時接続自在な画像通信端末装
置であって、受信画像を記憶する画像メモリ手段と、当
該画像メモリ手段の記憶領域を、接続するＭ個の（≦
Ｎ）端末に応じたＭ個の領域に区分し、各端末に割り付
けるメモリ割付け手段と、接続する当該Ｍ個の端末から
の、それぞれフルサイズの１／Ｍ倍の受信画像を当該画
像メモリ手段に書き込む書込み手段と、当該メモリ割付
け手段により割り付けられた当該画像メモリ手段の個別
領域を利用して、接続するＭ個の端末のそれぞれから受
信した符号化画像データを復号処理する復号化手段と、
同時通信中のＭ個の端末との通信を制御する通信制御手
段とからなることを特徴とする。

【００１４】

【作用】上記手段により、単一の画像復号化手段で、接
続するＭ個の端末から受信した符号化画像データを復号
することができる。この結果、複数の端末と同時通信で
きる端末装置として、装置を小型化でき、安価にでき
る。

【００１５】

【実施例】以下、図面を参照して本発明の実施例を説明
する。

【００１６】図１は、本発明の一実施例における端末装
置の概略構成ブロック図を示す。本実施例は、４本の回
線に接続でき、同時に４つの端末と通信できる。

【００１７】図１において、１０は会議参加者を撮影す
るカメラ、１４は図面などの会議資料を撮影する書画カ
メラ、１６はＣＲＴや液晶表示装置などからなる画像表
示装置、１８は、カメラ１０，１４の出力画像を送信用
に選択し、カメラ１０，１４の出力画像及び受信画像を
選択合成して画像表示装置１６に供給する画像入出力回
路である。

【００１８】２２は、送信すべき画像信号を符号化する
画像符号化回路、２４は、受信した符号化画像信号を復
号化する画像復号化回路である。ここでは、画像符号化
回路２２は、離散コサイン変換（ＤＣＴ）、ベクトル量
子化及び動き補償を使用するフレーム内及び間符号化、
並びに駒落としにより、画像データを帯域圧縮する。Ｉ
ＳＤＮ回線の基本インターフェースの６４Ｋｂｐｓで伝
送可能な符号化方式として、ＩＴＵ−Ｔ勧告Ｈ．２６１
がある。

【００１９】２６はマイク及びスピーカからなるハンド
セット、２８はマイク、３０はスピーカ、３２はハンド
セット２６、マイク２８及びスピーカ３０に対する音声
入出力インターフェースである。音声入出力インターフ
ェース３２は、ハンドセット２６、マイク２８及びスピ
ーカ３０の音声入出力を切り換えるだけでなく、エコー
・キャンセル処理、並びに、ダイヤルトーン、呼出音、
ビジー・トーン及び着信音などのトーンの生成処理を行
なう。

【００２０】３４は、音声入出力インターフェース３２
からの送信すべき音声信号を符号化する音声符号化回
路、３６は、受信した符号化音声信号を復号化して音声
入出力インターフェース３２に出力する音声復号化回路
である。音声復号化回路３６は回線数に応じた４個の音
声復号化ユニットからなる。３７は音声復号化回路３６
で復号化された最大４つの音声を合成する音声合成回路
である。伝送速度及び符号化方法には、６４Ｋｂｐｓの
ＰＣＭ（Ａ−ｌａｗ）、６４ＫｂｐｓのＰＣＭ（μ−ｌ
ａｗ）、７ＫＨｚオーディオ（ＳＢ−ＡＤＰＣＭ）、３
２ＫｂｐｓのＡＤＰＣＭ、１６Ｋｂｐｓ（例えば、ＬＤ
−ＣＥＬＰ）及び８Ｋｂｐｓなどがある。

【００２１】３８は全体を制御するシステム制御回路で
あり、内部に記憶回路４０を具備する。４２はシステム
制御回路３８に種々の指示を入力する操作装置であり、
例えば、キーボード、タッチ・パネル、ディジタイザ及
びマウスなどのポインティング装置からなる。

【００２２】４４は４つの通信回線（例えば、ＩＳＤＮ
回線）に対応する回線インターフェース、４６は、画像
符号化回路２２及び音声符号化回路３４からの送信すべ
き情報並びにシステム制御回路３８からの制御情報を
Ｈ．２２１フォーマットに多重化して回線インターフェ
ース４４に供給すると共に、回線インターフェース４４
から供給される受信情報から画像、音声、データ及び制
御信号を分離し、画像情報を画像復号化回路２４に、音
声情報を音声復号化回路３６にデータ及び制御信号をシ
ステム制御回路４２に供給する分離多重化回路である。
分離多重化回路４６も、回線数に応じて４つの同じ機能
の分離多重化ユニットからなる。

【００２３】本実施例では、４回線に対応する回線イン
ターフェース４４及び分離多重化回路４６により、最大
４つの端末との間で同時に通信できる。音声に関して
は、音声復号化回路３６が、最大４つの端末から受信し
た符号化音声データを内部の４つのユニットで並列に復
号化し、画像合成回路３７が復号化した音声を合成して
音声インターフェース３１に供給する。画像に関して
は、画像復号化回路２４は、最大４つの端末から受信し
た符号化画像データを時分割により復号化する。これに
より、１つの画像復号化回路２４で済むようにしてい
る。

【００２４】図１に示す実施例における画像信号及び音
声信号の流れを簡単に説明する。カメラ１０及び書画カ
メラ１４による入力画像は画像入出力回路１８により選
択されて画像符号化回路２２に印加される。画像符号化
回路２２は、システム制御回路３８からの制御信号及び
内部決定に従う符号化モードで入力画像信号を符号化
し、４回線分のデータを分離多重化回路４６に出力す
る。

【００２５】他方、ハンドセット２６のマイク又はマイ
ク２８による入力音声信号は音声入出力インターフェー
ス３２を介して音声符号化回路３４に入力し、ここで符
号化される。音声符号化回路３４は、４回線分の音声符
号化データを分離多重化回路４６に出力する。

【００２６】分離多重化回路４６は、画像符号化回路２
２及び音声符号化回路３４からの符号化信号、並びにシ
ステム制御回路３８からのデータ及び制御コマンドを多
重化し、４回線分、回線インターフェース４６に出力す
る。回線インターフェース４４は、分離多重化回路４６
からの信号を、４回線のうち、接続する通信回線に所定
フォーマットで出力する。

【００２７】４つの通信回線から受信した信号は、回線
インターフェース４４から分離多重化回路４６に供給さ
れる。分離多重化回路４６は、各回線の受信信号から符
号化画像信号、符号化音声信号、データ及び制御コマン
ドを分離し、画像情報を画像復号化回路２４に、音声情
報を音声復号化回路３６に、データ及び制御信号をシス
テム制御回路３８に印加する。

【００２８】画像復号化回路２４は、分離多重化回路４
６から供給される各端末の符号化画像信号を時分割で復
号し、画像入出力回路１８に印加する。画像入出力回路
１８は、画像復号化回路２４からの画像を画像像表示装
置１６に印加する。

【００２９】音声符号化回路３６により復号された受信
音声信号はオン整合性回路３７により合成された後、音
声入出力インターフェース３２を介してハンドセット２
６のスピーカ及び／又はスピーカ３０に印加される。こ
れにより、通信相手からの音声を聞くことができる。

【００３０】図２は、画像復号化回路２４の内部回路を
示し、図３は、画像入出力回路１８の画像出力部の内部
回路を示す。これらを説明する説明する前に、画像デー
タの符号化について簡単に説明する。

【００３１】Ｈ．２６１勧告では、ＮＴＳＣ方式、ＰＡ
Ｌ方式及びディジタル・テレビジョン信号などの複数の
規格間での通信を可能にするため、共通のビデオ・フォ
ーマットが規定されている。ＣＩＦフォーマットとＱＣ
ＩＦフォーマットであり、その構成を図４に示す。ＣＩ
Ｆフォーマットは、標本数が輝度信号Ｙで３５２画素×
２８８ライン、色差信号Ｃｒ，Ｃｂで１７６画素×１４
４ラインである。標本点については、色差（Ｃｒ，Ｃ
ｂ）は輝度の４点（Ｙ１，Ｙ２，Ｙ３，Ｙ４）の等距離
にある点と定められている。ＱＣＩＦフォーマットはＣ
ＩＦフォーマットの１／４の情報量であり、標本数が輝
度信号Ｙで１７６画素×１４４ライン、色差信号Ｃｒ，
Ｃｂで８８画素×７２ラインである。

【００３２】ＣＩＦフォーマットは１２個のＧＯＢ（グ
ループ・オブ・ブロックス）からなり、１つのＧＯＢは
３３個のＭＢ（マクロブロック）からなり、１つのＭＢ
は、８画素×８ラインからなる４個の輝度ブロックＹ
１，Ｙ２，Ｙ３，Ｙ４と、８画素×８ラインからなる２
個の色差ブロックＣｒ，Ｃｂからなる。

【００３３】上記階層構造により、符号化をＭＢ単位で
実行できる。

【００３４】ＧＯＢは、標本数が輝度Ｙで１７６画素×
４８ライン、色差Ｃｒ，Ｃｂで８８画素×２４ラインと
なり、ＣＩＦの１／１２、ＱＣＩＦの１／３に相当す
る。ＧＯＢの番号は、ＣＩＦではＧＯＢ１〜ＧＯＢ１
２、ＱＣＩＦではＧＯＢ１，ＧＯＢ３，ＧＯＢ５と決め
られている。

【００３５】画像圧縮又は画像符号化の要素技術として
は、フレーム内の画像を８画素×８画素のブロックに区
分し、そのブロックに対して二次元離散コサイン変換
（ＤＣＴ変換）するフレーム内符号化、前フレームと現
フレームの同位置のブロックに対してフレーム間の差分
をとり二次元ＤＣＴ変換するフレーム間符号化、フレー
ム間の画像の動きを補償することで発生符号量を減らす
動き補償、ＤＣＴ変換係数で高周波領域では一般にゼロ
値が続くことを利用したゼロ・ランレングス符号化、デ
ータの発生量に応じて量子化ステップ・サイズを変更す
る量子化、発生頻度の高いデータ・パターンに短い符号
値を、発生頻度の低いデータ・パターンに長い符号値を
割り当てる可変長符号化、及び、フレームをスキップす
る駒落としが採用されて、これらの組み合わせで高い圧
縮率を達成し、低レートの通信路での動画伝送を可能に
している。

【００３６】図３は、符号化画像データのフレーム構造
を示す。多重化フレーム構造になっている。説明の都合
上、フレーム・ヘッダ（ＦＨ）を付加した状態で図示し
てある。図３（ａ）はＧＯＢブロックの構成を示す。こ
のように１画面を１２個（ＣＩＦの場合で、ＱＣＩＦの
場合には後述するように３個）のＧＯＢに分割し、フレ
ーム・ヘッダＦＨの後に各ＧＯＢのデータを順次送信す
る。ＧＯＢの分割方法は、図２に示した通りである。

【００３７】図３（ｂ）は、フレーム・ヘッダＦＨと、
これに続くＧＯＢ１の先頭部分の詳細な構造を示す。フ
レーム・ヘッダＦＨは、２０ビットのフレーム開始符号
ＰＳＣ、５ビットのフレーム番号ＴＲ及び６ビットのタ
イプ情報ＰＴＹＰＥからなる。フレーム開始符号ＰＳＣ
は、”０００００００００００００００１００
００”である。ＴＲは”１”から”３０”までの値をと
る。ＰＴＹＰＥは、スプリット・スクリーン指示情報、
書画カメラ指示情報、画面凍結解除及び情報源フォーマ
ット指示情報（ＣＩＦ又はＱＣＩＦを示す情報）からな
る。

【００３８】ＧＯＢ領域にはＧＯＢヘッダがあり、次
に、ＭＢヘッダと係数データが対で必要数続く。１つの
ＧＯＢは３３個のマクロブロック（ＭＢ）からなり、１
つのマクロブロック（ＭＢ）は、８画素×８ラインの６
つのブロック（輝度信号Ｙが４個、色差信号Ｃｒが１
個、色差信号Ｃｂが１個）からなる。輝度信号のブロッ
クには１〜４の番号が付けられ、色差信号Ｃｂには５、
色差信号Ｃｒには６の番号が付けられる。

【００３９】ＧＯＢヘッダは、１６ビットのＧＯＢ開始
符号（ＧＢＳＣ）、４ビットのＧＯＢ番号（ＧＮ）及び
５ビットの量子化特性情報（ＧＱＵＡＮＴ）からなる。
ＧＢＳＣは、”０００００００００００００００
１”である。ＧＮは”１”から”１２”までの値をと
る。ＧＮを仮りに”０”とすると、ＦＨのＰＳＣとＧＯ
ＢのＧＢＳＣ＋ＧＮが共に２０ビットで、連続する同じ
ビット列になってしまうので、ＧＮには”０”を割り当
てない。ＧＱＵＡＮＴは量子化ステップ・サイズの情報
である。

【００４０】ＭＢヘッダは、マクロブロック（ＭＢ）の
位置を表わすマクロブロック・アドレス（ＭＢＡ）、マ
クロブロックのタイプ情報（ＭＴＹＰＥ）、量子化特性
情報（ＭＱＵＡＮＴ）、動きベクトル情報（ＭＶＤ）及
び有意ブロックパターンの情報（ＣＢＰ）からなる。

【００４１】ＭＢＡは先頭のマクロブロックに対しては
絶対値で、以降のマクロブロックに対しては相対値（差
分）であり、可変長になっている。ＭＴＹＰＡは、フレ
ーム内符号化（ＩＮＴＲＡ）、フレーム間差分符号化
（ＩＮＴＥＲ）、動き補償付きフレーム間差分符号化
（ＭＣ）及びフィルタ処理（ＦＩＬ）などの、マクロブ
ロックに施した処理のタイプを示す。ＭＱＵＡＮＴはＧ
ＱＵＡＮＴと同じである。ＣＢＰは、マクロブロックの
４つの輝度信号Ｙのブロックと色差信号Ｃｒ，Ｃｂのブ
ロックの内の有効なブロックの番号を情報として持つ。

【００４２】ＭＢヘッダの後には、圧縮符号化した画像
データが、上述したように、４つの輝度信号のブロック
と、色差信号Ｃｒ，Ｃｂのブロックの内、有意となった
ブロックについて順番に続いている。

【００４３】フレーム・ヘッダＦＨのＰＳＣと、ＧＯＢ
のＧＢＳＣ及びＧＮは、復調の際にフレーム・ヘッダ及
びＧＯＢヘッダを検出できるように、唯一のデータ・パ
ターンになるように選定されている。

【００４４】伝送回線上では、通常、ＢＣＨ符号による
誤り訂正フレーム構造になる。図４にその構造を示す。
１フレームは１ビットの誤り訂正フレーム・ビット、１
ビットのファイル識別子、４９２ビットの画像データ及
び１８ビットの誤り訂正パリティからなり、合計で５１
２ビットである。このフレームを８つまとめて、１つの
マルチフレームを構成する。

【００４５】これらの圧縮方法及びフレーム構造は、勧
告Ｈ．２６１として勧告されており、この勧告に準拠す
る端末間で相互に画像通信できる。

【００４６】図５は、画像復号化回路２４の内部回路を
示す。６０（６０−１，６０−２，６０−３，６０−
４）はＢＣＨフレームを分解し、画像データ多重フレー
ムを抽出するＢＣＨ復号化回路、６２（６２−１，６２
−２，６２−３，６２−４）は、ＢＣＨ復号化回路６０
の出力を一時記憶する受信バッファである。ＢＣＨ復号
化回路６０及び受信バッファ６２は回線数４だけ並列に
設けられている。

【００４７】６４は、受信バッファ６２−１，６２−
２，６２−３，６２−４から出力される画像符号化デー
タのうち、復号化する画像符号化データを選択する選択
回路、６６は画像データ多重化フレームからフレームヘ
ッダとＧＯＢヘッダを外す画像フレーム分離回路、６８
は符号化画像データを可変長復号化する可変長復号化回
路、７０は各マクロブロックの係数データを逆量子化す
る逆量子化器、７２は逆量子化器７０から出力される係
数データを逆ＤＣＴする逆ＤＣＴ回路である。

【００４８】７４はフレームヘッダの内容を解読するＦ
Ｈ解読回路、７６はＧＯＢヘッダの内容を解読するＧＯ
ＢＨ解読回路、７８はマクロブロックの内容を解読する
ＭＢＨ解読回路、８０はＧＯＢヘッダ及びＭＢヘッダの
ヘッダ情報から量子化ステップサイズを設定する量子化
ステップサイズ設定回路、８２，８４は、ＩＮＴＥＲモ
ードとＩＮＴＲＡモードで連動して切り換えられるスイ
ッチ、８６，８８はフイルタ処理するか否かを選択する
スイッチ、９０は動き補債モード時に前フレームにフィ
ルタ処理をするフィルタである。

【００４９】９２，９４はフレーム・メモリ、９６はス
イッチ８４の出力を選択的にフレーム・メモリ９２又は
同９４に供給するスイッチ、９８は、復号化時に、前フ
レームの画像データを記憶しているフレーム・メモリ９
２又は同９４の読出しアドレスを出力するフレーム・メ
モリ制御回路、１００は復号化時に、復号化処理を施し
た画像データを書き込むフレーム・メモリ９２又は同９
４に書込みアドレスを出力するフレーム・メモリ制御回
路、１０２は、フレーム・メモリ９２又は同９４に記憶
される画像データを画像入出力回路１８へ転送するため
の読出しアドレスを出力するフレーム・メモリ制御回
路、１０４は、フレーム・メモリ制御回路９８，１０
０，１０２の出力するアドレスを選択してフレーム・メ
モリ９２に印加するスイッチ、１０６は、フレーム・メ
モリ制御回路９８，１００，１０２の出力するアドレス
を選択してフレーム・メモリ９４に印加するスイッチで
ある。

【００５０】１０８は、フレーム・メモリ９２又は同９
４の出力を選択してスイッチ８８に印加するスイッチで
ある。スイッチ１０８は、ＩＮＴＥＲモード時に参照す
る前フレームを記憶するフレーム・メモリ９２又は同９
４を選択する。

【００５１】１１０はフレーム・メモリ９２，９４から
読み出された画像データを選択して画像入出力回路１８
に供給するスイッチである。

【００５２】１１２は、図５に示す画像復号化回路２４
の全体を制御する復号化制御回路であり、内部に、管理
テーブル等を記憶する記億回路１１４を具備する。

【００５３】上記の構成により、複数端末からの画像デ
ータを時分割で処理し、あたかも同時に処理しているか
のように見せることが可能となる。

【００５４】図６は、画像入出力回路１８の画像出力部
の内部構成を示す。１２０は画像復号化回路２４からの
画像データを画素密度変換する画素密度変換回路、１２
２は各端末からの画像データをそれぞれ別の記憶領域に
記憶する画像メモリ、１２４は、画像メモリ１２２へ
の、画像データの書込み及び読出しを制御するメモリ制
御回路であり、内部には、各端末からの画像データを記
憶するメモリ空間領域を登録する記憶回路１２６を具備
する。

【００５５】１２８はカラー・ルックアップ・テーブ
ル、１３０はグラフィック画像データのある特定のデー
タの時に画像データに切り換え制御するＳＷ制御回路、
１３２はグラフィック画像データと受信画像データとを
切換えるスイッチ、１３４はビデオ同期信号発生回路、
１３６はＡ／Ｄ変換器である。

【００５６】図６に示す構成により、カラー・ルックア
ップ・テーブル１２８からのグラフィック・データを画
面全面に表示し、その画面上に複数の受信画像データを
ウィンドウ表示させることができる。また、受信画像デ
ータ上にスーパーインポーズ表示のようにカラー・ルッ
クアップ・テーブル１２８からのグラフィック・データ
を表示させることがが可能である。

【００５７】更には、複数の受信画像データが重なり合
った時に、その重なり部分に、どちらの受信画像を表示
するかを選択できる。

【００５８】画像符号化に関してＨ．２６１に準拠して
いるとして、本実施例の特徴的動作を説明する。Ｈ．２
６１の場合、前述したようにＣＩＦとＱＣＩＦの画像フ
ォーマットがある。ＣＩＦはＱＣＩＦの４倍の画素数に
相当するので、ＣＩＦを処理できる能力をもつ画像復号
化回路であれば、４つのＱＣＩＦを処理する処理時間
は、ひとつのＣＩＦを処理する処理時間とほぼ同しで済
む。

【００５９】従って、本実施例では、複数端末（最大４
端末）からの画像データを同時に復号化する場合は、受
信能力をＱＣＩＦとして各端末に伝え、各端末からＱＣ
ＩＦの画像データを送信してもらう。

【００６０】まず、各端末から受信した各ＱＣＩＦ画像
符号化データは、ＢＣＨ復号化回路６０−１，６０−
２，６０−３，６０−４により並列にＢＣＨ復号化され
て受信バッファ６２−１，６２−２，６２−３，６２−
４に格納される。なお、本実施例では、回線数に相当す
る数のＢＣＨ復号化回路６０−１，６０−２，６０−
３，６０−４を設けているが、１つのＢＣＨ復号化回路
を使い時分割処理してもよい。

【００６１】復号化制御回路１１２は、各受信バッファ
６２−１，６２−２，６２−３，６２−４の記憶状況を
調べ、１フレーム分以上記憶する１つの受信バッファ６
２を選択回路６４で選択し、記憶されている画像符号化
データを読み出す。１フレーム分以上記憶されているか
否かは、フレームヘッダを検知したり、あるいは、受信
バッファの記憶データ量（Ｈ．２６１では、ＱＣＩＦで
は１フレーム当り最大６４Ｋｂｉｔ、ＣＩＦでは１フレ
ーム当り最大２５６Ｋｂｉｔと定められている。）を算
出することにより知ることができる。

【００６２】受信バッファ６２から読み出された符号化
データは、フレーム分離回路６６でフレームヘッダ及び
ＧＯＢヘッダを分離された後、回路６８，７０，７２に
より可変長復号化、逆量子化及び逆ＤＣＴされ、元の画
像データに復元される。

【００６３】なお、ＩＮＴＥＲモードのときには、復号
化制御回路１１２は次のように各部を制御する。即ち、
選択された受信バッファ６２の画像データの前画面の画
像データを蓄積しているフレーム・メモリ９２又は同９
４のメモリ領域を、記憶回路１１４に登録されているフ
レーム・メモリ管理テーブルから検索する。フレーム・
メモリ制御回路９８及びスイッチ１０４，１０６により
該当するフレーム・メモリ９２又は同９４のメモリ領域
から画像データを読み出し、スイッ１０８を介してスイ
ッチ８８に転送する。フィルタ処理が必要であればスイ
ッチ８６，８８によりフィルタ９０を選択する。スイッ
チ８２，８４により加算器を選択し、スイッチ８６の出
力（前画面の画像データ）と、現在復号化した画像デー
タとを加算し、空いているフレーム・メモリ９２又は同
９４の当該端末に対応する所定メモリ領域に書き込む。
フレーム・メモリ制御回路１００がその書込みアドレス
を発生する。

【００６４】また、ＩＮＴＲＡモードの時には、復号化
された画像データ（逆ＤＣＴ回路７２の出力）をスイッ
チ８２，８４で加算器を選択せずに、そのまま、スイッ
チ９６で選択するフレーム・メモリ９２又は同９４に書
き込む。フレーム・メモリ９２，９４のどのメモリ領域
に書き込むかは、記憶回路１１４に管理テーブルとして
登録されている。

【００６５】フレーム・メモリ９２，９４に記憶される
復元された画像データを画像入出力回路１８に転送する
際には、復号化制御回路１１２は、スイッチ１１０によ
り、画像データを読み出すフレーム・メモリ９２，９４
を選択し、フレーム・メモリ制御回路１０２から適切な
読出しアドレスを発生させる。なお、このとき、画像復
号化回路２４から画像入出力回路１８には、どの受信バ
ッファ６２、即ちどの端末からの画像であるかを示す識
別情報も転送する。

【００６６】図７は、受信画像（又は接続する端末）に
対するフレーム・メモリの割当を示す。フレーム・メモ
リ９２と同９４で同一の割当になるので、片側のフレー
ム・メモリのみを示す。図７（ａ）はＣＩＦフォーマッ
トであり、１：１通信の場合を示す。図７（ｂ）は、Ｑ
ＣＩＦフォーマットで１：１通信した場合を示す。つま
り、ＱＣＩＦで通信している場合にはメモリの未使用領
域が多く、かなりの空きが生じる。

【００６７】図７（ｃ）は、４端末と同時に通信する場
合を示す。各端末からはＱＣＩＦフォーマットで画像情
報が送信され、４つの端末Ａ，Ｂ，Ｃ，Ｄに対してフレ
ーム・メモリのメモリ領域を４分割してＱＣＩＦ
（Ａ），ＱＣＩＦ（Ｂ），ＱＣＩＦ（１Ｃ），ＱＣＩＦ
（Ｄ）に割当てられている。

【００６８】本実施例では、各端末からの画像データの
復号化は、このように割り当てられたメモリ領域を使用
して行なわれる。画像人出力回路１８への画像データの
転送も、各端末に割り当てられたメモリ領域ごとに実行
される。

【００６９】図８は、フレーム・メモリ制御のタイミン
グを示す。画像データは、現在復号化されている画像デ
ータを示している。フレームの処理周期に対して１フレ
ームの画像データの復号化処理時間が短くなるように、
フレーム周期が設定されている。ブロックの大きさは処
理時間を示している。ブロック内の数字はフレーム識別
番号であり、受信バッファとフレーム番号の組合せであ
る。例えば、Ａ１は、受信バッファＡ（例えば、６２−
１）のフレーム番号１番目である。書込みＦＭには、上
記の画像データが書き込まれるＦＭ番号を示してある。
読出しＦＭには、上記画像データと加算されるべき前画
面の画像データが読み出されるＦＭ番号を示してある。
ＦＭ１は例えばフレーム・メモリ９２、ＦＭ２はフレー
ム・メモリ９４である。

【００７０】画像データがＡ２で書込みＦＭがＦＭ２
（Ａ）で読出しＦＭがＦＭ１（Ａ）の場合、受信バッフ
ァＡから読み出された画像符号化データを復号化した画
像データを、ＩＮＴＥＲモード時はＦＭ１（Ａ）に蓄積
されている前回の受信バッファＡの画像データＡ１と加
算してＦＭ２（Ａ）に書き込み、ＩＮＴＲＡモード時は
そのままＦＭ２（Ａ）に書込むことを現わしている。

【００７１】また、受信バッファに復号化すべき画像符
号化データが１フレーム分蓄積されていない場合、その
フレーム処理周期には何もしない。画像符号化データを
復号化している途中でエラーが発生した場合、直ちに復
号化処理を中断し、データ書込み実行中のフレーム・メ
モリは、引き続き空として登録される。データ読出し実
行中のフレーム・メモリも、同様に更新されず、次回の
復号化処理まで引き続きデータを保持する。

【００７２】フレーム処理周期ごとのフレーム・メモリ
の使用状況を管理するフレーム・メモリ管理テーブルが
記憶回路１１４に記憶される。図９は、フレーム・メモ
リ管理テーブルの内容の一例を示す。フレーム周期ごと
に画像データの書込みの最初に空きフレーム・メモリを
見付け、データ書込みが終了すると、加算のためにデー
タ読出しされる。データ読出し後では、記憶されている
画像データは不要になるので、このフレーム・メモリは
空として登録される。データ書込みされたフレーム・メ
モリが、次の読出し用に登録される。

【００７３】図９は、図７の矢印の位置での登録状況を
示す。ＦＭ１（Ｂ）から画像データＢ１を読み出して画
像データＢ２に加算し、ＦＭ２（Ｂ）へ書き込んだ後な
ので、ＦＭ１（Ｂ）が空き、ＦＭ２（Ｂ）がＢ２となっ
ている。

【００７４】復号化された画像データをフレーム・メモ
リ９２，９４から読み出して画像入出力回路１８の出力
部部へ転送するとき、フレーム処理周期の１周期前に復
号化処理された画像データを次のフレーム処理周期に読
み出すのが、制御が容易になる。ただし、復号化のため
に書込み処理中のフレーム・メモリ以外であればどのフ
レーム・メモリから画像データを読み出しても良い。

【００７５】その読み出された画像データと一緒に、フ
レーム識別番号も、画像入出力回路１８の出力部（図６
参照）へ転送される。転送された画像データは画索密度
変換されて、画像メモリ１２２へ記憶される。その際
に、画像メモリ制御回路１２４は、記憶回路１２６に記
憶されている各相手端末用のメモリ空間指定を参照し
て、当該フレーム識別番号に応じて、対応する画像メモ
リ空間へ画像データを書き込む。書き込まれた画像デー
タを表示する場合は、そのメモリ空間の画像データが読
み出され、スイッチ１３２及びＡ／Ｄ変換器１３６を介
して画像表示装置１６に印加される。

【００７６】図１０は、ＦＭ１とＦＭ２をフルに活用し
た場合の例である。ＦＭ１とＦＭ２をＱＣＩＦフォーマ
ットで８つに分割し、最大７台の端末と同時通信するこ
とが可能となる。この場合には、各ＱＣＩＦのメモリ領
域は端末ごとに固定されない。即ち、ＩＮＴＲＡの場
合、図１１のフレーム・メモリ管理テーブルから空いて
いる若番のメモリ領域を検出し、検出したメモリ領域に
各端末の復号化された画像データが書き込まれる。ＩＮ
ＴＥＲの場合、加算の対象となる前画像データのメモリ
領域を図１１に示すフレーム・メモリ管理テーブルから
検出し、検出したメモリ領域の画像データを読み出し、
復号化された画像データと加算して同じメモリ領域に書
き込む。

【００７７】このように、複数の端末からの複数の画像
データを時分割処理で復号化することにより、画像復号
化手段は１つで良くなる。また、画像復号化手段のフレ
ーム・メモリは、同時に通信する可能性のある端末台数
に１を加算した数に相当する数だけ用意すればよいの
で、複数の端末と同時に通信する場合でも経済的に画像
復号化手段を構築できる。

【００７８】このように、大容量の画像メモリを最大限
利用し、無駄のない多地点問通信を可能とすることで、
コストパフォーマンスの良い端末装置を提供できる。

【００７９】

【発明の効果】以上の説明から容易に理解できるよう
に、本発明によれば、単一の画像復号化手段で複数端末
からの受信画像を復号化処理できるので、安価に多地点
間通信用端末を提供できる。また、回路も小型のままで
よくなるので、装置を小型化でき、安価になる。

【００８０】また、同時通信可能な端末数は、画像復号
化手段の性能が許す範囲で、ＢＣＨフレーム復号化手段
を増やすことで更に増やすことが可能となる。これによ
り、更にコストパフォーマンスが向上する。換言する
と、容易に同時通信可能な端末数を増やすことができ
る。

【００８１】

【図面の簡単な説明】

【図１】本発明の一実施例の概略構成ブロック図であ
る。

【図２】ＣＩＦフォーマット及びＱＣＩｆフォーマッ
トの構造図である。

【図３】画像データ多重化フレームの構造図である。

【図４】ＢＣＨ誤り訂正フレームの構造図である。

【図５】画像復号化回路２４の内部回路図である。

【図６】画像入出力回路１８の画像出力部の回路図で
ある。

【図７】受信画像のフレーム・メモリ割当ての説明図
である。

【図８】フレーム制御タイミングを示す図である。

【図９】フレーム・メモリ管理テーブルの一例であ
る。

【図１０】受信画像のフレーム・メモリ割当ての別の
例の説明図である。

【図１１】図１０に対するフレーム・メモリ管理テー
ブルの一例である。

【符号の説明】

１０：カメラ１４：書画カメラ１６：画像表示装置
１８：画像入出力回路２２：画像符号化回路２４：画像復号化回路２６：
ハンドセット２８：マイク３０：スピーカ３２：
音声入出力インターフェース３４：音声符号化回路
３６：音声復号化回路３７：音声合成回路３８：シ
ステム制御回路４０：記憶回路４２：操作装置４４：回線インター
フェース４６：分離多重化回路６０（６０−１，６
０−２，６０−３，６０−４）：ＢＣＨ復号化回路６
２（６２−１，６２−２，６２−３，６２−４）：受信
バッファ６４：選択回路６６：画像フレーム分離回
路６８：可変長復号化回路７０：逆量子化回路７
２：逆ＤＣＴ回路７４：ＦＨ解読回路７６：ＧＯＢ
Ｈ解読回路７８：ＭＢＨ解読回路８０：量子化ステ
ップサイズ設定回路８２，８４，８６，８８：スイッ
チ９０：フィルタ９２，９４：フレーム・メモリ
９６：スイッチ９８，１００，１０２：フレーム・メ
モリ制御回路１０４，１０６：スイッチ１０８，１
１０：スイッチ１１２：復号化制御回路１１４：記
憶回路

Claims

【特許請求の範囲】

【請求項１】Ｎ個の端末と同時接続自在な画像通信端
末装置であって、受信画像を記憶する画像メモリ手段
と、当該画像メモリ手段の記憶領域を、接続するＭ個の
（≦Ｎ）端末に応じたＭ個の領域に区分し、各端末に割
り付けるメモリ割付け手段と、接続する当該Ｍ個の端末
からの、それぞれフルサイズの１／Ｍ倍の受信画像を当
該画像メモリ手段に書き込む書込み手段と、当該メモリ
割付け手段により割り付けられた当該画像メモリ手段の
個別領域を利用して、接続するＭ個の端末のそれぞれか
ら受信した符号化画像データを復号化する復号化手段
と、同時通信中のＭ個の端末との通信を制御する通信制
御手段とからなることを特徴とする画像通信端末装置。
【請求項２】Ｍが４である請求項１に記載の画像通信
端末装置。