JP3002619B2

JP3002619B2 - 画像処理制御装置

Info

Publication number: JP3002619B2
Application number: JP5226213A
Authority: JP
Inventors: 麻理草川
Original assignee: Fujitsu Ltd
Current assignee: Fujitsu Ltd
Priority date: 1992-09-11
Filing date: 1993-09-10
Publication date: 2000-01-24
Anticipated expiration: 2015-01-24
Also published as: JPH06225162A

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は画像処理制御装置に関
し、より詳細には、画像処理をその装置の負荷に応じて
変化させるようにした画像処理制御装置に関する。

【０００２】近年において、多くのシステムで画像デー
タが使用されるようになり、これに伴って、画像処理の
高速化と画質の向上とが求められている。しかしなが
ら、画質の向上によってデータ量が増加し処理時間も長
くなるので、画質の向上と画像処理の高速化とを両立さ
せることは一般的に困難である。

【０００３】

【従来の技術】上記問題を解消することを意図した画像
処理制御装置が提案されている。この提案されている装
置によれば、表示される画像の画質と画像処理の速度と
を画像表示の目的に応じて決定する。

【０００４】例えば、登録画像のように高画質であるこ
とが求められている場合には、画質を決定するパラメー
タの値を圧縮比が減少するように変化させる。これによ
りデータ量は増大し、これを処理するのに要する処理時
間は長くなる。以下、画質を決定するパラメータの値を
画質制御パラメータと称する。他の場合には、画質制御
パレメータの値を判読可能な範囲で圧縮比が増大するよ
うに変化させる。これによりデータ量は減少し、これを
処理するのに要する処理時間は短くなる。上記状況は伸
張の場合にも当てはまる。

【０００５】

【発明が解決しようとする課題】従来の画像処理制御装
置では、上述のように、画質と画像処理速度とは固定的
に定められている。すなわち、画質制御パラメータの値
を決定した後は、装置の動作中は固定されている。従っ
て、従来の画像処理制御装置はその状態の変化に応じて
画質制御パラメータを動的に変化させるものではない。
例えば、高画質画像を得るように画質制御パラメータの
値を決定したときは、たとえ画像処理制御装置の処理す
べき画像データが膨大になっても決定したパラメータ値
で依然として画像処理を行う。また、高速処理となるよ
うに画質制御パラメータの値を決定したときは、たとえ
画像処理制御装置の処理すべき画像データが少なくなっ
ても決定したパラメータ値で依然として画像処理を行の
で、装置がより多くの画像データを処理できる状態にあ
るにもかかわらず画質の悪い画像を提供することになっ
てしまう。

【０００６】従って、本発明は上記従来の問題点を解決
し、画像処理制御装置の処理速度と画質の性能をできる
限り活用することができる画像処理制御装置を提供する
ことを目的とする。

【０００７】

【課題を解決するための手段】本発明の画像処理制御装
置は、圧縮すべき画像データを格納するメモリ手段と、
該メモリ手段に記憶されている画像データを圧縮処理す
る画像処理手段と、該画像処理手段の負荷の度合に応じ
て、圧縮された画像データから形成される画像の画質が
変化するように前記圧縮処理を制御する制御手段とを有
する。

【０００８】また、本発明の画像処理制御装置は、画像
データを伸張処理する画像処理手段と、該画像処理手段
の負荷の度合に応じて、伸張された画像データから形成
される画像の画質が変化するように前記伸張処理を制御
する制御手段と、伸張された画像を格納するメモリ手段
と、該画像処理手段の負荷の度合に応じて、圧縮された
画像データから形成される画像の画質が変化するように
前記画像処理を制御する制御手段とを有する。

【０００９】更に、本発明の画像処理制御装置は、圧縮
すべき画像データを格納するメモリ手段と、該メモリ手
段に記憶されている画像データを圧縮処理する第１の画
像処理手段と、画像データを伸張処理する第２の画像処
理手段と、該画像処理手段の負荷の度合に応じて、圧縮
された又は伸張された画像データから形成される画像の
画質が変化するように前記圧縮及び伸張処理を制御する
制御手段と、前記第１の画像処理手段で生成された圧縮
画像データを他の端末に送信し、他の端末から受信した
伸張される画像データを前記第２の画像処理手段に送出
する通信手段とを有する。

【００１０】

【作用】本発明によれば、制御手段は、画像処理手段の
負荷の度合に応じて、圧縮された画像データから形成さ
れる画像の画質が変化するように前記圧縮処理を制御す
るので、従来技術の問題点は解消できる。

【００１１】また、本発明によれば、制御手段は、画像
処理手段の負荷の度合に応じて、圧縮された画像データ
から形成される画像の画質が変化するように前記画像処
理を制御するので、従来技術の問題点は解消できる。

【００１２】更に、本発明によれば、上記制御手段に加
え更に通信手段を有しているので、複数の画像処理制御
装置を用いたシステムを容易に構築できる。

【００１３】

【実施例】始めに、図１を参照して、本発明の画像処理
制御装置の原理を説明する。

【００１４】図１に示す画像処理制御装置は、画像メモ
リ２を具備した画像処理部１を有する。圧縮される画像
データは画像メモリ２に格納されている。画像処理部１
は画像メモリ２から画像データを読み出して圧縮する機
能を有する。圧縮された画像データは、例えば外部の装
置（図１には図示なし）に出力される。また、画像処理
部１は、圧縮された場像データを外部装置から受け取
り、伸張する機能を有する。伸張された画像データは、
例えば画像メモリ２に書き込まれる。

【００１５】図１に示す画像処理制御装置の画像処理部
１は、画像処理部１の負荷、例えば、これに与えられる
処理要求の発生の頻度に応じて圧縮されたデータから再
生された画像の画質が変化するように、画像を圧縮す
る。

【００１６】より詳細には、画像処理部１は画質制御パ
ラメータ設定レジスタ３１、圧縮用データレジスタ３
２、圧縮テーブル３６を有する圧縮処理部３５、伸張用
データレジスタ３３及び伸張テーブル３８を有する伸張
処理部３７とを具備する。

【００１７】図２は、画像処理部１の画像データ圧縮処
理を示すフローチャートである。ステップＳ１で、画像
処理部１はソフトウエア処理により、画像処理部１の現
在の負荷の度合に応じた画質制御パラメータの値を画質
制御パラメータ設定レジスタ３１に書き込む。画像処理
部１の現在の負荷の度合とは、例えば画像メモリ２に格
納されている画像処理要求の数である。画像処理要求は
図２に示すように、キューイングされている。図３にお
いて、画像処理１、２、．．．、ｎ（ｎは整数）は鎖状
に結合するように、キューイングされている。画質制御
パラメータの値は、圧縮処理部３５の圧縮用テーブル３
６に書き込まれる。ステップＳ１を最初に行う場合は画
質制御パラメータの所定の標準値が設定される。

【００１８】ステップＳ２において、上記画質制御パラ
メータの標準値に対応する画像処理キューの画像処理要
求件数の標準値を決定する。以下、この画像処理要求件
数の標準値を指定値という。ステップＳ３で、現在の画
像処理要求件数と指定値との関係を調べる。両者の件数
が一致すれば、ステップＳ１で決定した画質制御パラメ
ータの値を用いて、ステップＳ６で画像処理１、
２、．．．、Ｎ（この場合、これらの画像処理はすべて
圧縮処理を要求しているものとする）を順番に処理す
る。

【００１９】ステップＳ３で、画像処理キューの処理要
求件数が指定値よりも少ないときには、圧縮された画像
データを再生して得られる画像の画質が向上し、画像デ
ータの圧縮処理速度が低下するように、画質制御パラメ
ータの値を変化させる。この新たな画質制御パラメータ
の値は圧縮用テーブル３６に書き込まれ、その記憶内容
は更新される。この場合のステップＳ６は、圧縮用テー
ブル３６に書き込まれた新たな画質制御パラメータの値
を用いて行われる。ステップＳ３で、画像処理キューの
処理要求件数が指定値よりも多いときには、圧縮された
画像データを再生して得られる画像の画質が低下するが
圧縮処理速度が向上するように、画質制御パラメータの
値を変化させる。この新たな画質制御パラメータの値は
圧縮用テーブル３６に書き込まれ、その記憶内容は更新
される。この場合のステップＳ６は、圧縮用テーブル３
６に書き込まれた新たな画質制御パラメータの値を用い
て行われる。

【００２０】図２に示す処理は例えば所定間隔ごとに、
又は画像処理要求を受け取るごとに行う。また、これ以
外の基準で図２に示す処理を行ってもよい。

【００２１】画質制御パラメータの値を示す情報は、圧
縮された画像データとともに外部装置に転送できる。圧
縮された画像データを、圧縮用の画質制御パラメータ値
に対応する値を用いて伸張できる。例えば、圧縮用画質
制御パラメータの値の逆数を、圧縮された画像データの
伸張のために用いることができる。

【００２２】図４は、図１に示す画像処理制御装置の画
像データ伸張処理を示すフローチャートである。図４の
画像データ伸張処理は圧縮された画像データを階層的に
伸張する。この階層的伸張について図５を参照して以下
に説明する。

【００２３】図５において、画像データはｋ個の画像要
素（ｋは整数）を有し、各画像要素はｍ個のステージ
（ｍは整数）を有する。例えば、画像データはＲ（レッ
ド）、Ｇ（グリーン）、及びＢ（ブルー）の信号からな
り、これらのＲＧＢ信号が画像要素である。各ステージ
は１つ以上の画素を有する。データ圧縮処理では、図２
に示すステップＳ１、Ｓ４、Ｓ５で設定された画質制御
パラメータの値を用いて、画像データはｋ個の画像要素
毎にｍステージずつ圧縮される。

【００２４】階層的な伸張処理では、画像処理部１の負
荷の度合に応じて、第１ステージから始めていくつの連
続するステージを伸張のために用いるかが決定される。
圧縮された画像データから再生された画像の画質は、伸
張すべきステージ数が減るに従い劣化する。

【００２５】より詳細には、図４のステップＳ１１で、
伸張のために用いられるステージ数が決定される。ステ
ップＳ１１で決定されるステージ数は前述のｍ以下であ
る。ステップＳ１２で、図３に示す画像処理キューの画
像処理要求件数の標準値を決定する。前述のように、こ
の標準値を指定数と呼ぶ。ステップＳ１３で、画像処理
キューの処理要求件数と指定数との関係を調べる。両方
の数が一致した場合には、ステップＳ１１で決定したス
テージ数を用いてステップＳ１６で画像処理１、
２、．．．、ｎ（この場合には画像データの伸張要求）
を順番に処理する。

【００２６】例えば、図１のデータ伸張用レジスタ３３
に、１ステージずつ画像データを書き込み、データ伸張
処理部３７にデータ伸張処理を要求する。この動作をス
テップＳ１１で決定したステージ数だけ繰り返す。残り
のステージの画像データは破棄する。ステップ１６で
は、各ステージ毎の画像データに付加されている画質制
御パラメータを抽出し、伸張用の画質制御パラメータの
値を伸張用テーブル３８に書き込む。圧縮されている画
像データは、このパラメータ値に従い伸張される。

【００２７】ステップＳ１３で、画像処理キューの処理
要求件数が指定値よりも少ない場合には、伸張された画
像データから得られる画像の画質が向上し、半面伸張処
理速度が低下するように、伸張されるステージの数を変
化（増加）させる。ステップＳ１６では、この新たなス
テージ数分だけデータ伸張用レジスタ３３にデータを書
き込み、伸張処理を行う。ステップＳ１３、で画像処理
キューの処理要求件数が指定値よりも多い場合には、伸
張された画像データから得られる画像の画質が劣化する
ものの、伸張処理速度が向上するように、伸張されるス
テージの数を変化（減少）させる。ステップＳ１６で
は、この新たなステージ数分だけデータ伸張用レジスタ
３３にデータを書き込み、伸張処理を行う。

【００２８】図４に示す処理は例えば所定間隔ごとに、
又は画像処理要求を受け取るごとに行う。また、これ以
外の基準で図４に示す処理を行ってもよい。

【００２９】もし、ステップＳ１１で圧縮されている画
像データを伸張するためのステージ数が画像画素２の２
ステージであったとすると、図５に示すハッチングされ
たブロックとして示されているステージの画像データの
みを用い、残りのステージ（画像要素２の３ないしｍス
テージ）の画像データを破棄する。

【００３０】図６は、図１に示す原理に基づく画像処理
制御装置のブロック図である。図６に示す画像処理制御
装置は、カメラからの画像データを圧縮処理して他の端
末に送出する機能と、他の端末からの画像データを処理
して表示する機能とを有する。

【００３１】より詳細に説明すると、図６に示す画像処
理制御装置は、全体を制御するＣＰＵ（中央処理装置）
１１を有する。ＣＰＵ１１はバス１２ａを介して各構成
要素に接続されている。プログラムメモリ１３はＣＰＵ
１１が使用するプログラムを格納するもので、入力制御
部１４を介してバス１２ａに接続されている。キーボー
ドなどの入力装置１５は命令やデータを入力するために
用いられ、入力制御部１６を介してバス１２ａに接続さ
れている。

【００３２】画像メモリ１８を有する画像処理部１７は
画像データの圧縮及び伸張処理を行う。画像制御部１９
は、画像メモリ１８と表示装置２０との間に接続され、
画像処理部１７で処理された画像データを可視的表示を
行うための制御を行う。入力制御部２１はカメラなどの
画像入力装置２２からのデータを入力し、画像処理制御
装置、より特定すれば、画像メモリ１８に出力する。

【００３３】メモリ２３は圧縮されるべき画像データを
格納するもので、入出力制御部２４を介してバス１２ａ
及び１２ｂに接続されている。画像データはメモリ２３
から読み出され、てバス１２ｂを介して画像処理部１７
に転送される。更に、メモリ２３は、バス１２ｂ及び入
出力制御部２４を介して転送された圧縮された画像デー
タを一時的に格納する。通信装置２６は通信制御部２５
を介してバス１２ａ及び１２ｂに接続されている。画像
データは、網などの通信媒体を介して通信装置２６と他
の端末との間で転送可能である。

【００３４】図７は、図６に示す画像処理部１７のブロ
ック図である。図７において、先に説明した図に示す構
成要素と同一のものには同一の参照番号を付してある。
図７に示すように、画像処理部１７はレジスタ３１、３
２及び３３を有するレジスタ群３４と、圧縮用テーブル
３６を有する圧縮処理部３５と、伸張用テーブル３８を
有する伸張処理部３７とを含む。圧縮処理部３５と伸張
処理部３７は、画像バス２７を介して画像メモリ１８に
接続されている。制御部２８は、画像メモリ１８、画像
バス２７及び圧縮処理部３５や伸張処理部３７などの他
の構成部分を制御する。参照番号２９は、画像処理部１
７で用いられるソフトウエアを示している。

【００３５】図８は、図６に示す通信制御部２５と通信
装置２６とのブロック図である。通信制御部２５は通信
プロトコル処理部４１とＨＤＬＣ（ハイレベル・データ
リンク・コントロール）フレーム化処理部４２とを有す
る。通信装置２６は呼制御部４３とインタフェース部４
４とを含む。インタフェース部４４はＤチャネル及びＢ
チャネルとＩＳＤＮ（ＩｎｔｅｇｒａｔｅｄＳｅｒｖ
ｉｃｅｓＤｉｇｉｔａｌＮｅｔｗｏｒｋ）とのイン
タフェースを確立する。このＩＳＤＮについては、例え
ばＣＣＩＴＴ勧告に記載されている。通信制御部２５は
Ｂチャネルにおける所定の処理を行い、呼制御部４３は
Ｄチャネルにおける所定の処理を行う。通信プロトコル
処理部４１は、例えばＣＣＩＴＴ勧告に規定されている
通信プロトコルに従って所定の処理を実行する。ＨＤＬ
Ｃフレーム化処理部４２は画像データをフレームに組
み、またフレームを分解して元の画像データを出力す
る。呼制御部４３は、例えばＣＣＩＴＴ勧告に従って、
呼設定処理などの所定の呼制御処理を行う。

【００３６】ソフトウエア（図７）はＣＰＵ１１（図
６）によって実行され、前述のステップＳ１−Ｓ５（図
２）及びステップＳ１１−Ｓ１５（図４）を含むもので
ある。圧縮処理部３５は図２に示すステップＳ６を実行
する。より詳細には、図７のステップ（１）で、ＣＰＵ
１１はステップＳ１（図２）を実行して、画質制御パラ
メータの値をレジスタ３１に書き込む。そして、圧縮処
理部３５はこの画質制御パラメータの値を圧縮用テーブ
ル３６に書き込む。その後、ＣＰＵ１１がステップＳ２
（図２）を実行する。

【００３７】制御部２８は画像メモリの状態をモニタし
ている。より詳細には、制御部２８はカウンタ（図示を
省略する）を有している。ソフトウエア２９から画像処
理の要求があるごとに＋１増加し、圧縮処理部３５又は
伸張処理部３８で画像処理要求を処理するごとに＋１減
少する。制御部２８内のカウンタのカウンタ値は、画像
処理キューの画像処理要求の数を示している。

【００３８】ステップＳ２の後、ＣＰＵ１１はステップ
Ｓ３（図２）を実行する。ステップＳ３の判断で画像処
理キューの処理要求件数が指定値に等しいとされたとき
には、圧縮処理部３５は圧縮用テーブル３６に格納され
ている画質制御パラメータの値を用いて、画像バス２７
を介して画像メモリ１８から読み出した画像データを圧
縮する。図７のステップ（２）に示すように、圧縮され
た画像データはレジスタ３２に書き込まれ、バス１２ｂ
及び入出力制御部２４を介して図６に示すメモリ２３に
転送される。

【００３９】ステップＳ３の判断結果により、画像処理
キューの処理要求件数が指定数に等しくないときには、
ＣＰＵ１１はステップＳ３（図２のステップＳ４又はＳ
５）の判断結果に基づいて、画質制御パラメータの値を
変化させ、この値をレジスタ３１に書き込む。圧縮処理
部３５はレジスタ３１から画質制御パラメータの値を読
み出し、圧縮テーブル３６に書き込む。そして、圧縮処
理部３５は圧縮テーブル３６内の画質制御パラメータの
値を用いて、画像メモリから読み出した画像データを圧
縮する。

【００４０】このような圧縮処理においては、圧縮処理
部３５の制御の下に、画質制御パラメータの値を示すデ
ータが対応する圧縮された画像データに付加され、レジ
スタ３２内に書き込まれる。画質制御パラメータの値は
圧縮された画像データを伸張する際に用いられる。例え
ば、圧縮動作時に用いた画質制御パラメータの逆数を計
算して、伸張用の画質制御パラメータを得る。また、圧
縮動作で用いた画質制御パラメータの値から伸張用の画
質圧縮パラメータの値を生成して、圧縮された画像デー
タに付加することとしてもよい。

【００４１】伸張動作において、図７のステップ（ａ）
では、ＣＰＵ１１はステップＳ１１及びステップＳ１２
（図４）を実行し、伸張処理部３７にステップＳ１１で
決定したステージ数の画像データをレジスタ３３に書き
込む。前述したように、実際には１ステージずつ画像デ
ータをレジスタ３３に書き込んで、伸張処理が終了する
ごとにその旨を伸張処理部３７からソフトウエア２９
（ＣＰＵ１１）に通知する。ＣＰＵ１１はステップＳ１
１に引き続いてステップＳ１２（図４）を実行し、画像
処理キュー内の画像処理要求の指定数を決定する。

【００４２】制御部２８は、前述のようにして、画像処
理キューの現在の画像処理要求件数を検出する。ステッ
プＳ１３で、画像処理要求件数と指定数とが等しいと判
断したときには、ソフトウエア２９の制御の下に、伸張
処理部３７は画像メモリ１８からレジスタ３３を介して
読み出した圧縮されている画像データを伸張する（図４
のステップＳ１６及び図７のステップ（ｂ））。このと
き、ステップＳ１１で決定した画像データのステージ数
だけ画像データを順次読み出して、伸張する。更に、画
像データに付加されている伸張用の画質制御パラメーパ
ラメータの値が取り出され、伸張テーブルに書き込まれ
る。ステップＳ１３（図４）の判断結果がＮＯのときに
は、ステップＳ１４又はステップＳ１５でＣＰＵ１１は
ステップＳ１３の判断結果に基づき伸張するデータステ
ージの数を変化させる。そして、この新たなステージ数
分だけ画像データを順次レジスタ３３に書き込み、伸張
処理を行う。

【００４３】図９は、本発明の適用例である適応型離散
コサイン変換システムを示す図であって、図９の（Ａ）
は圧縮系を示し、図９の（Ｂ）は伸張系を示している。

【００４４】圧縮系は、色変換部５１、ブロック分解部
５２、離散コサイン変換部（ＤＣＴ）５３、直流（Ｄ
Ｃ）成分抽出器５４、ＤＰＣＭ部５５、交流（ＡＣ）成
分抽出器５６、一次元化部５７、ゼロ圧縮部５８、及び
ハフマン符号化部５９を有する。

【００４５】色変換部５１はＣＣＩＲ６０１（Ｉｎｔｅ
ｒｎａｔｉｏｎａｌＲａｄｉｏＣｏｎｓｕｌｔａｔｉ
ｖｅＣｏｍｍｉｔｔｅー６０１）に従って、Ｒ、Ｇ、
Ｂ信号をＹ、Ｕ、Ｖ信号に変換する。ここで、Ｙは輝度
成分を意味し、ＵとＶはそれぞれ色成分を意味する。ブ
ロック分解部５２は、図１０の（５２）で示すように、
８×８画素ごとにそれぞれＹ、Ｕ、Ｖ信号を分解する。
図１０には、（８×ｍ）×（８×ｎ）の画素を示してあ
る。ここで、ｍとｎはそれぞれ整数である。また、１ブ
ロックは８×８画素からなるものとする。図１０の
（５３）で示すように、ＤＣＴ部５３は以下に示す式を
用いて、各ブロックのＹ、Ｕ、Ｖ信号毎にＤＣＴ処理を
行う。

【００４６】

【数１】

【００４７】このＤＣＴ処理によって、画像データのお
もな成分は低周波数に集中する。

【００４８】図１０に示すように、ＤＣＴ部５３は上記
変換された各成分に人間の目に応じた量子化係数の逆数
をかける。図１０の、１６、１１、１０、１６・・・は
量子化係数の値である。量子化係数は、前述の画質制御
パラメータに相当する。上記乗算の結果を、図１０の
（５６）で示す。乗算結果は８行（Ｘ方向）及び８列
（Ｙ方向）のマトリクス状に配列されている。行番号
（図１０の量子化係数の配列に沿って示されている）が
大きくなると、周波数が高くなる。同様に、列番号（図
１０の量子化係数の配列に沿って示されている）が大き
くなると、周波数が高くなる。行及び列番号が大きくな
るにつれて、量子化係数の値も大きくなる。すなわち、
低い周波数成分は細かく量子化され、高い周波数成分は
荒く量子化される。座標（０、０）、すなわち８×８の
マトリクスの左上のコーナーにある値”６”は、ＤＣ成
分であり、他の値はＡＣ成分である。

【００４９】ＤＣ成分抽出器５４はＤＣ成分（図１０
の”６”）を抽出し、ＡＣ成分抽出器５６はＡＣ成分を
抽出する。ＤＰＣＭ部５５はＤＣ成分に対しＤＰＣＭ処
理を行う。一次元化部５７は各ステージ毎にジグザクス
キャンを行い、８行８列に配列された値を一次元に展開
する。図１０において、第１ステージはＤＣ成分を有
し、第２ステージはＡＣ成分”４”、”１”、”
３”、”２”、”０”、・・・を有する。前述の量子化
係数を用いることによって、乗算結果は周波数が高くな
るに従ってより多くのゼロを含むようになる。ゼロ圧縮
部５８はゼロ成分を圧縮する。例えば、ゼロ成分をゼロ
のランレングスで表す。

【００５０】ハフマン符号化部５９は、ゼロのランレン
グスと”４”、”１”、”３”、”２”、”０”、・・
・の値を、ハフマンテーブルを参照して圧縮するハフマ
ン符号化処理を行う。そして、ハフマン符号化部５９は
内蔵のメモリに圧縮された画像データを書き込むか、ま
たは次段の回路に出力する。なお、上記圧縮された画像
データは各ステージ毎に得られ、従って上記処理は最後
のステージ（図５の第ｍステージ）が処理されるまで繰
り返して行われる。また、上記処理は各Ｙ、Ｕ、Ｖの各
信号毎に行われる。

【００５１】本発明によれば、量子化係数の値を、例え
ば図９（Ａ）の圧縮系の負荷の度合に応じて可変させ
る。この圧縮系の負荷が小さいときには、量子化後のゼ
ロ成分の数が少なくなるように量子化係数を制御する。
このときは、画質は向上するが、圧縮処理の速度は低下
する。他方、圧縮系の負荷が大きいときには、量子化後
のゼロ成分の数が多くなるように量子化係数を制御す
る。このときは、画質は劣化するが、圧縮処理速度は速
くなる。

【００５２】図９（Ｂ）は伸張系を示す。図示する伸張
系は、ハフマン復号化部６９、ＤＰＣＭ部６５、ＤＣ成
分抽出器６４、ゼロ伸張部６８、ＡＣ成分抽出器６６、
逆ＤＣＴ（ＩＤＣＴ）部６３、ブロック展開部６２及び
色変換部６１を有する。図９（Ｂ）の伸張系は、図１０
に示す圧縮処理の逆の処理を行う。ＩＤＣＴ部６３は量
子化係数の逆数（逆量子化係数）、すなわち図１０に示
す値そのものを用いる。従って、量子化係数の値は図１
０に示す値の逆数である。逆量子化係数に関する情報は
圧縮された画像データと一緒に転送される。伸張すべき
ステージ数は、例えば図９（Ｂ）に示す伸張系の負荷の
度合に応じて決定される。伸張系の負荷が小さいときに
は、伸張すべきステージ数を増やして画質を向上させ、
伸張処理の速度を低下させる（伸張処理に要する時間が
増大する）。図９（Ｂ）の伸張系の負荷が大きいときに
は、伸張すべきステージ数を減らして伸張処理の速度を
早める一方で、画質の劣化を許容する。

【００５３】図１１は、本発明の適用例の画像通信端末
のブロック図である。同図に示す端末は、文字画像、グ
ラフィック画像、自然画（静止画）、及び動画を表示で
きる機能や、画像移動、トリミング（表示サイズ制
御）、コピー及び縮小処理などの自然画編集機能を有す
る。

【００５４】ＮＴＳＣ信号及びＲＧＢ信号はそれぞれ入
力信号変換部７１及び７３でＹ／Ｃ信号に変換され、セ
レクタ７４に入力する。Ｙ／Ｃ信号は直接セレクタ７４
に入力する。これらの入力画像信号源は例えばカメラで
ある。セレクタ７４はＣＰＵ１１０からの指示に応じ
て、３つの入力画像信号のうちの１つを選択する。選択
された画像信号（Ｙ／Ｃ信号）はＡ／Ｄ変換器７５でデ
ィジタル画像信号に変換され、フレームメモリ７６を介
して画像編集部７７に入力する。必要に応じて、画像編
集部７７は画像データに前述した編集処理を行う。編集
された画像データはラインバッファ７８を介して画像バ
ス９５に出力され、画像バス制御部９０が発生するＶＲ
ＡＭアドレスに従い、ビデオＲＡＭ（ＶＲＡＭ）９３に
書き込まれる。画像バス制御部９０は、セレクタ７４か
らの画像信号に同期したタイミング信号に同期してＶＲ
ＡＭアドレスを発生する。

【００５５】画像データを圧縮しない場合には、ＶＲＡ
Ｍ９３から画像データ（Ｙ／Ｃ信号）を読み出し、これ
を変換器１０３でＲＧＢ信号に変換してウィンドウ／画
面合成器１０２に出力する。この合成器１０２には、バ
ス９８を介してキャラクタ・ジェネレータ９９やグラフ
ィックＶＲＡＭ１００が接続されている。これらは、バ
ス９８に接続されたコントローラ９７で制御される。ウ
ィンドウ／画面合成器１０２は、ＶＲＡＭ９３からの画
像データを、キャラクタ・ジェネレータ９９で生成され
た文字データやグラフィックＶＲＡＭ１００から読み出
されたグラフィック画像データに合成し、合成画像デー
タをＤ／Ａ変換器１０４を介して合成器１０５に出力す
る。合成器１０５は、合成制御部１０１の制御の下に、
Ｄ／Ａ変換器１０４からの画像信号と図示しないコンピ
ュータからの画像信号ＰＣとを合成して、表示装置に出
力する。

【００５６】ＣＰＵ１１０は、図２及び図４に示す処理
を実行する。ＶＲＡＭ９３に書き込まれた画像データを
圧縮する場合は、画像処理部９２はＶＲＡＭ９３から画
像データを読み出し、前述した処理により読み出した画
像データを圧縮する。画像処理部９２は、図９（Ａ）に
示した圧縮系と図９（Ｂ）に示した伸張系とを有する。
なお、画像処理部９２が扱う信号はディジタル化された
Ｙ／Ｃ信号である。圧縮された画像データは、バス１１
４を介して圧縮データ格納メモリ１２６に格納する。必
要に応じて、画像処理部９２が出力した圧縮画像データ
を変換器９１に送り、ここでＲＧＢ信号に変換して圧縮
データ格納メモリ１２６に格納してもよい。そして、Ｃ
ＰＵ１１０及び画像バス制御部９０の制御の下に、圧縮
データ格納メモリ１２６から圧縮画像データを読み出
し、バス１１４、通信制御部１１２及び通信装置１２４
を介して相手端末に送信する。

【００５７】相手端末から受信した圧縮画像データは、
バス１１４を介して圧縮データ格納メモリ１２６に書き
込まれる。受信した画像データがＹ／Ｃ信号以外の信号
（ＧＲＢ信号など）の時は、これを変換器９１でＹ／Ｃ
信号に変換して、画像処理部９２で前述したようにして
伸張処理する。伸張された画像データはバス９５を介し
てＶＲＡＭ９３に書き込まれる。

【００５８】なお、バス１１４には入力制御部１１６を
介してＣＰＵ１１０の動作を記述するプログラムを格納
するプログラムメモリ１１８や、入力制御部１２０を介
してキーボードなどの入力装置１２２が接続されてい
る。

【００５９】以上、本発明の実施例や適用例を説明し
た。本発明はこれらに限定されず、本発明の範囲内で種
々の構成が可能である。

【００６０】

【発明の効果】以上説明したように本発明によれば、画
像データの圧縮・伸張処理装置において、画像処理手段
の負荷の度合に応じて、再生された画像の画質が変化す
るように圧縮又は伸張処理を制御するので、装置の画像
データの圧縮・伸張処理能力を最大限に利用することが
できる。

【００６１】すなわち、請求項１記載の発明によれば、
制御手段は、画像処理手段の負荷の度合に応じて、圧縮
された画像データから形成される画像の画質が変化する
ように圧縮処理を制御するので、圧縮処理の負荷が小さ
いときは画質が高くなるように圧縮処理を行い、負荷が
大きいときには画質が低くなるように圧縮処理を行うこ
とで、装置の画像データ圧縮処理能力を最大限に活用で
きる。

【００６２】また、請求項９記載の発明によれば、制御
手段は、画像処理手段の負荷の度合に応じて、圧縮され
た画像データから形成される画像の画質が変化するよう
に前記画像処理を制御するので、伸張処理の負荷が小さ
いときは画質が高くなるように伸張処理を行い、負荷が
大きいときには画質が低くなるように伸張処理を行うこ
とで、装置の画像データ伸張処理能力を最大限に活用で
きる。。

【００６３】更に、請求項１５記載の発明によれば、上
記制御手段に加え更に通信手段を有しているので、複数
の画像処理制御装置を用いたシステムを容易に構築でき
る。

【図面の簡単な説明】

【図１】本発明の原理的構成を示す図である。

【図２】本発明における処理フロー（１）を示す図であ
る。

【図３】画像処理キューを示す図である。

【図４】本発明における処理フロー（２）を示す図であ
る。

【図５】階層的な伸張におけるデータの構成例を示す図
である。

【図６】本発明の一実施例のブロック図である。

【図７】図６に示す画像処理部のブロック図である。

【図８】図６に示す通信制御部及び通信装置のブロック
図である。

【図９】本発明の適用例を示すブロック図である。

【図１０】図９に示す圧縮系での圧縮処理を示す図であ
る。

【図１１】本発明の適用例の画像通信端末のブロック図
である。

【符号の説明】

１画像処理部２画像メモリ３１画質制御パラメータ設定レジスタ３２圧縮用データレジスタ３３伸張用データレジスタ３５圧縮処理部３６圧縮テーブル３７伸張処理部３８伸張テーブル

フロントページの続き (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04N 1/41 - 1/419 H04N 7/24

Claims

(57)【特許請求の範囲】

【請求項１】圧縮すべき画像データを格納するメモリ
手段（２、１８、９３）と、該メモリ手段に記憶されている画像データを圧縮処理す
る画像処理手段（１、１７、３５、９２）と、該画像処理手段の負荷の度合に応じて、圧縮された画像
データから形成される画像の画質が変化するように前記
圧縮処理を制御する制御手段（１１、２９、１１０）と
を有することを特徴とする画像処理制御装置。
【請求項２】前記画像処理手段は画質制御パラメータ
に従って画像データを圧縮する第１の手段（３５）を有
し、前記制御手段は、前記画像処理手段の負荷の度合に応じ
て、前記画質制御パラメータの値を変化させる第２の手
段を有することを特徴とする請求項１記載の画像処理制
御装置。
【請求項３】前記第１の手段は、前記画質制御パラメ
ータに相当する量子化係数に従って画像データを量子化
する量子化手段（５３）を有することを特徴とする請求
項２記載の画像処理装置。
【請求項４】前記制御手段は、前記画像処理手段の負
荷の度合に応じて前記量子化係数を変化させる第３の手
段（１１０）を有することを特徴とする請求項３記載の
画像処理装置。
【請求項５】前記制御手段は、前記画像処理手段に対
する前記メモリ手段中の画像データの処理要求件数を検
出する第１の手段（１１、２９、１１０）を有し、前記
処理要求件数は前記画像処理手段の負荷の度合に相当す
ることを特徴とする請求項１記載の画像処理制御装置。
【請求項６】前記制御手段はメモリ手段中の処理要求
件数を所定値と比較し、前記処理要求件数と所定値との
関係に基づき前記圧縮処理を制御する第２の手段（１
１、２９、１１０）を有することを特徴とする請求項５
記載の画像処理装置。
【請求項７】前記画像処理制御装置は更に、圧縮され
た画像データを他の端末に転送する通信手段（２５、２
６、１１２、１２４）を有することを特徴とする請求項
１記載の画像処理制御装置。
【請求項８】前記画像処理手段は、画像データを各々
所定数の画素を有するブロックに変換し、該ブロック毎
に前記画像データを圧縮する第１の手段（５２）を有す
ることを特徴とする請求項１記載の画像処理制御装置。
【請求項９】画像データを伸張処理する画像処理手段
（１、１７、３７、９２）と、該画像処理手段の負荷の度合に応じて、伸張された画像
データから形成される画像の画質が変化するように前記
伸張処理を制御する制御手段（１、２９、１１０）と、伸張された画像を格納するメモリ手段（２、１８、９
３）とを有することを特徴とする画像処理制御装置。
【請求項１０】前記画像処理手段は、送信側の画像処
理装置の負荷の度合に基づいて決定された画質制御パラ
メータの値を用いて画像データを伸張する第１の手段
（３７）を有することを特徴とする請求項９記載の画像
処理制御装置。
【請求項１１】前記画像データは複数のブロックを有
し、各ブロックはｍステージを有し、ｍは任意の整数で
あって、ｍブロックの各々は少なくとも１つの画素を有
し、前記制御手段は画像処理手段の負荷の度合に応じて前記
伸張処理すべきステージ数（１１、２９、１１０）を決
定する手段を有することを特徴とする請求項９記載の画
像処理制御装置。
【請求項１２】前記制御手段は画像処理手段に対する
画像データの処理要求の数を検出する第１の手段（１
１、２９、１１０）を有し、前記処理要求の数は前記画像処理手段の負荷の度合に相
当することを特徴とする請求項９記載の画像処理制御装
置。
【請求項１３】前記制御手段は処理要求件数を所定値
と比較し、前記処理要求件数と所定値との関係に基づき
前記伸張処理を制御する第２の手段（１１、２９、１１
０）を有することを特徴とする請求項１２記載の画像処
理制御装置。
【請求項１４】前記画像処理制御装置は更に、圧縮さ
れた画像データであって他の端末から転送された前記画
像データを受信する通信手段（２５、２６、１１２、１
２４）を有することを特徴とする請求項９記載の画像処
理制御装置。
【請求項１５】圧縮すべき画像データを格納するメモ
リ手段（２、１８、９３）と、該メモリ手段に記憶されている画像データを圧縮処理す
る第１の画像処理手段（１、１７、３５、９２）と、画像データを伸張処理する第２の画像処理手段（１、１
７、３７、９２）と、と、該画像処理手段の負荷の度合に応じて、圧縮された又は
伸張された画像データから形成される画像の画質が変化
するように前記圧縮及び伸張処理を制御する制御手段
（１１、２９、１１０）と、前記第１の画像処理手段で生成された圧縮画像データを
他の端末に送信し、他の端末から受信した伸張される画
像データを前記第２の画像処理手段に送出する通信手段
（２５、２６、１１２、１２４）とを有することを特徴
とする画像処理制御装置。