JP2003069832A

JP2003069832A - 画像処理装置及び方法及びプログラム及びコンピュータ読み取り可能な記録媒体

Info

Publication number: JP2003069832A
Application number: JP2001255019A
Authority: JP
Inventors: Hideshi Osawa; 秀史大澤
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2001-08-24
Filing date: 2001-08-24
Publication date: 2003-03-07

Abstract

(57)【要約】【課題】画像データの転送が中断した場合であって
も、転送済みの画像データを用いて明瞭な画像を復号化
して再生することができる画像処理装置及び方法及びプ
ログラム及びコンピュータ読み取り可能な記録媒体を提
供することを目的とする。【解決手段】送信側端末１の原画像を記憶する画像Ｄ
Ｂ１１から指定された画像が符号器１２においてプログ
レッシブ符号化される。符号化された画像データは送信
器１３から送信され、ネットワーク３を介して受信側端
末２の受信器２１で受信される。受信された画像データ
は受信バッファ２２に記憶されるとともに、受信レート
がバッファモニタ２６で検出される。そして、受信バイ
ト数の変化量が所定値より小さい場合、画像データの受
信が中止される。また、受信された画像データを用いて
受信データ解析器２３でデータ補間等され、復号器２４
で画像データの復号化が行われ、表示器２５で画面表示
される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は，圧縮・符号化さ
れた画像データを転送して復号化する画像処理装置及び
方法及びプログラム及びコンピュータ読み取り可能な記
録媒体に関する。

【０００２】

【従来の技術】一般的に、カラー静止画像の圧縮には、
離散コサイン変換（ＤＣＴ）を利用したＪＰＥＧ（Join
t Photographic Coding Experts Group）方式や、ウェ
ーブレット変換を利用した圧縮方式が多く使われてい
る。従来から画像データを転送する際には、これらの圧
縮方式によって圧縮・符号化された画像データがネット
ワークを介して転送され、転送先で画像データの復号化
が行われている。この場合、受信側（クライアント側）
は、まず、送信側（サーバ側）の画像データ群の中から
画面表示させたい画像を選択する。次に、選択された画
像がサーバ側で符号化された後、ネットワーク等を介し
てクライアント側へ転送される。そして、符号化された
画像は、クライアント側において復号化される。このよ
うにして、クライアントは所望の画像を画面表示させる
ことが可能となる。

【０００３】ところで、国際標準方式のＪＰＥＧでは、
ＤＣＴを使うオプション機能としてプログレッシブ符号
化方式が定義されている。この方式では、転送されてき
た画像データを転送の初期段階で粗い画像を画面表示さ
せ、画像データの転送が進むにつれて精細な画像を表示
できるようなデータ構造をつくることができる。

【０００４】従来、クライアント側においては、上述し
たようなデータ構造の画像データを受信したとき、画像
データの中の区切り信号が転送された段階で逐次画像を
画面表示したり、あるいは、選択された画像データがす
べて転送されてから画像を画面表示していた。このよう
に従来の方式では、サーバ側で設定されたデータ構造に
依存した形に従って、クライアント側が受信した画像デ
ータの画面表示が行われていた。

【０００５】

【発明が解決しようとする課題】しかしながら、サーバ
システムの過負荷や通信回線の混雑などにより、サーバ
側からの画像データの送信が長い時間中断する場合があ
った。この場合、クライアント側での画面表示が停止し
たり、アプリケーションの動作が停止してしまうような
エラーが起こることがあった。

【０００６】このような場合、ＤＣＴにより得られるＤ
ＣＴ係数を符号化することによって符号化された画像デ
ータの各ブロックの区切り信号も転送されなくなる。そ
のため、上述したような方法では区切り信号を受信する
までは、受信した画像データを画面表示することができ
ないという問題があった。また、画像データの転送の途
中で受信を中断して画面表示を行った場合、受信した情
報だけで画像の復号化を行うと、画質の劣化が目立つと
いう問題もあった。

【０００７】この発明は、このような事情を考慮してな
されたものであり、画像データの転送が中断した場合で
あっても、転送済みの画像データを用いて画像を復号化
して再生することができる画像処理装置及び方法及びプ
ログラム及びコンピュータ読み取り可能な記録媒体を提
供することを目的とする。

【０００８】

【課題を解決するための手段】上記の課題を解決するた
めに、請求項１記載の発明は、プログレッシブ符号化さ
れた画像データを受信する受信手段と、受信された画像
データの受信レートを検出する検出手段と、前記受信レ
ートが所定値より小さい場合、前記画像データの受信を
中止する中止手段と、受信された画像データを用いて画
像を復号化する復号化手段とを備えることを特徴とす
る。

【０００９】請求項２記載の発明は、請求項１記載の発
明において、前記復号化手段が、受信された最後の区切
り信号までの符号化された画像データを用いて画像を復
号化することを特徴とする。

【００１０】請求項３記載の発明は、請求項１記載の発
明において、受信された画像データに含まれる複数の直
流係数に基づいて所定数の交流係数を予測する交流係数
予測手段と、受信された画像データのうち欠落している
交流係数について予測された交流係数を割り当てるデー
タ補間手段とをさらに備え、前記復号化手段が、データ
補間された画像データを用いて画像を復号化することを
特徴とする。

【００１１】請求項４記載の発明は、プログレッシブ符
号化された画像データを受信する第１の過程と、受信さ
れた画像データの受信レートを検出する第２の過程と、
前記受信レートが所定値より小さい場合、前記画像デー
タの受信を中止する第３の過程と、受信された画像デー
タを用いて画像を復号化する第４の過程とを備えること
を特徴とする。

【００１２】請求項５記載の発明は、プログレッシブ符
号化された画像データを受信する第１のステップと、受
信された画像データの受信レートを検出する第２のステ
ップと、前記受信レートが所定値より小さい場合、前記
画像データの受信を中止する第３のステップと、受信さ
れた画像データを用いて画像を復号化する第４のステッ
プとをコンピュータに実行させるためのプログラムであ
ることを特徴とする。

【００１３】請求項６記載の発明は、コンピュータに、
プログレッシブ符号化された画像データを受信する第１
の手順と、受信された画像データの受信レートを検出す
る第２の手順と、前記受信レートが所定値より小さい場
合、前記画像データの受信を中止する第３の手順と、受
信された画像データを用いて画像を復号化する第４の手
順とを実行させるためのプログラムを記録したコンピュ
ータ読み取り可能な記録媒体であることを特徴とする。

【００１４】

【発明の実施の形態】以下、図面を参照して、この発明
の一実施形態について説明する。図１は、この発明の
一実施形態による画像通信システムの構成を説明するた
めのブロック図である。

【００１５】図１に示すように、送信側端末１は画像デ
ータを符号化して、符号化された画像データをネットワ
ーク３を介して受信側端末２に転送するための装置であ
る。送信側端末１には、原画像である画像データを記憶
するための画像データベース（ＤＢ）１１と、特定の画
像を複数のブロックに分割して、各ブロックに対してＤ
ＣＴを用いて得られたＤＣＴ係数を符号化するための符
号器１２と、符号化された特定の画像データを受信側端
末２に送信するための送信器１３とが備わっている。ま
た、送信器１３は通信回線４１を介してネットワーク３
に接続されている。

【００１６】一方、受信側端末２では、送信側端末１か
ら送信されてくる符号化された画像データを受信するた
めに、受信器２１が通信回線４２を介してネットワーク
３に接続されている。さらに、受信側端末２は、受信さ
れた画像データを一時的に記憶するための受信バッファ
２２と、受信された画像データからデータの一部削除や
欠落データの補間等によって、画像データの再構成を行
うための受信データ解析器２３と、画像の復号化を行う
ための復号器２４と、復号化された画像を画面表示する
ための表示器２５とが備わっている。さらに、受信側端
末２には、単位時間あたりの受信したデータ量を観察
し、送信側端末１から転送された画像データの受信が停
止しているか否かを判断するバッファモニタ２６が備わ
っている。

【００１７】本実施形態における受信データ解析器２３
においては、次に示すような処理が行われることによっ
て、復号器２４に画像データを復号化する指示が出され
る。図２は、受信データ解析器２３における細部構成を
説明するためのブロック図である。まず、受信バッファ
２２に一時記憶されている符号化された画像データの中
から、各ブロックごとのスキャンの先頭を示すマーカで
あるＳＯＳ（Start of Scan）コードがＳＯＳカウント
部２３ａにおいて検出される。次いで、当該ブロックの
直流係数が直流係数解析部２３ｂにおいて検出される。
さらに、当該ブロックの交流係数が交流係数解析部２３
ｃにおいて検出される。

【００１８】送信側端末１から転送される画像データは
８×８画素を１ブロックとした複数のブロックに分けら
れ、それぞれのブロックに対してＤＣＴされている。画
像データは、通常、１番目のブロックの直流係数、２番
目のブロックの直流係数、…、Ｎ番目のブロックの直流
係数、１番目のブロックの交流係数、２番目のブロック
の交流係数、…、Ｎ番目のブロックの交流係数の順に並
んでいる。尚、本実施形態においては、交流係数をさら
に周波数の低い順に複数のグループに分けている。図３
は、ＤＣＴ係数の周波数分割のグループ分けを説明する
ための概要図である。本実施形態では、図３に示すよう
に交流成分を周波数の低い順に〜の３つのグループ
に分けている。

【００１９】したがって、本実施形態における画像デー
タの構成は、１番目のブロックの直流係数、２番目のブ
ロックの直流係数、…、Ｎ番目のブロックの直流係数、
１番目のブロックの部分の交流係数、２番目のブロッ
クの部分の交流係数、…、Ｎ番目のブロックの部分
の交流係数、１番目のブロックの部分の交流係数、２
番目のブロックの部分の交流係数、…、Ｎ番目のブロ
ックの部分の交流係数、…の順に並んでいる。

【００２０】図４は、プログレッシブ符号化における画
像データの構成および画像転送の中断指示が入るタイミ
ングを説明するための概要図である。本実施形態では、
画像データを説明しやすくするために、第一段階のデー
タ３１、第二段階のデータ３２、第三段階のデータ３
３、第四段階のデータ３４に分割している。そして、各
段階のデータには、先頭にＳＯＳコードが設定され、Ｓ
ＯＳコードの後にＤＣＴ係数である圧縮データが続いて
いる。

【００２１】例えば、上述した画像データにおいて、交
流係数の部分だけに注目すると、第一段階のデータ３１
は、１番目のブロックの部分の交流係数に関するデー
タであって、当該部分のデータであることを示すＳＯＳ
コードと部分の圧縮データ１から構成される。また、
第二段階のデータ３２は、２番目のブロックの部分の
交流係数に関するデータであって、当該部分のデータで
あることを示すＳＯＳコードと部分の圧縮データ２で
ある。第三段階のデータ３３、第四段階のデータ３４に
ついても同様にしてＳＯＳコードと圧縮データから構成
される。

【００２２】また、図４における記号Ａ、Ｂ、Ｃ、Ｄ
は、それぞれサーバシステムの過負荷や通信回線の混
雑、その他の理由により受信途中における中断が入るタ
イミングの一例を示している。そこで、それぞれの段階
において中断が入った場合、受信中の圧縮データを廃棄
して、それ以前に受信した圧縮データとして完成してい
る部分のみを用いて画像を復元するような方法が考えら
れる。例えば、タイミングＢで中断した場合は、第一段
階のデータ３１を含むそれ以前のデータを用いて画像の
復号化を行う。同様に、タイミングＣで中断した場合は
第二段階までのデータで、タイミングＤで中断した場合
では第三段階までのデータを用いて画像の復号化処理を
することが可能である。

【００２３】そこで、本実施形態においては、図２に示
されるＳＯＳカウント部２３ａで行われるカウント結果
と、直流係数解析部２３ｂで得られる直流係数と、交流
係数解析部２３ｃで得られる交流係数とを用いることに
よって、判定部２３ｄにおいて以下のような判定が行わ
れるものとする。

【００２４】送信されてきた画像データのすべての直流
係数のデータが既に受信済みであって、交流係数のデー
タの個数が少ない場合は解像度変換により画像を復号化
するための指示信号が解析部２３ｅに出される。この場
合、受信した画像データの範囲内で画像を復号化するた
めに解像度の低い画像が得られ、その画像を公知の手段
で拡大処理することによって原画像と同じサイズに変換
する。これによって、画像データの受信が中断された場
合であっても、それまでに受信した画像データを用いて
最小限の画像を復号化することができる。

【００２５】一方、交流係数のデータがある程度受信さ
れているが、いくつかのデータが欠落しているような場
合には、直流係数から交流係数を予測する処理を行うこ
とによって交流係数のデータ補間を行わせるための指示
信号が解析部２３ｅに出される。この場合、前述した方
法のように送信途中の部分のデータを無視するのではな
く、受信された交流係数はすべて獲得データとして利用
し、欠落している部分のみを補間する。これによって、
画面表示する際の画像データの画質劣化を防ぐことがで
きる。また、解析部２３ｅでは、判定部２３ｄからの指
示信号にしたがって、復号器２４で復号化するための画
像データの再構成が行われる。

【００２６】次に、上述した構成を備える本実施形態の
画像通信システムの動作手順について説明する。画像Ｄ
Ｂ１１には複数のカラー静止画像が記憶されている。受
信側端末２からある画像の転送が指定された場合、画像
ＤＢ１１に記憶されている指定された画像は、８×８画
素のブロックに分割されて、符号器１２においてプログ
レッシブ符号化される。これによって、受信側端末２に
おいて画像を画面表示する際には、大まかな出力画像か
ら徐々に解像度の高い画像を再現することが可能とな
る。そして、符号化された画像データが逐次送信器１３
から送信される。

【００２７】送信器１３から送信された画像データは、
通信回線４１、ネットワーク３、通信回線４２を介し
て、受信側端末２の受信器２１で受信される。受信され
た画像データは、逐次受信バッファに記憶される。この
際、画像データの単位時間あたりに受信されるデータ量
がバッファモニタ２６で観察される。さらに、バッファ
モニタでは、この受信レートが、あらかじめ設定された
値に対して大きいか否かの比較が行われる。そして。あ
らかじめ設定された値よりも小さい場合は、送信側端末
１からの画像データの転送が中断しているものと判断さ
れる。

【００２８】バッファモニタ２６が画像データの転送が
中断されていると判断した場合、受信バッファ２２は送
信側端末１から受信する画像データの記憶を中止する。
そして、受信データ解析器２３では上述したような２つ
のデータ解析が行われる。

【００２９】最初に、解像度を下げて画面表示する場合
の実施例について詳細に説明する。図５は、８×８画素
で構成された１ブロックをＤＣＴの演算で得られたＤＣ
Ｔ係数のジグザグスキャンの順を説明するための図であ
る。図５において、ＤＣＴ係数の伝送は「０」、
「１」、「２」、…、「６３」の位置のデータ順に行わ
れる。図５において、「０」の位置には直流係数があ
り、この直流係数の伝送に引き続いて交流係数がジグザ
グスキャンの順に伝送される。

【００３０】尚、４番目までのＤＣＴ係数を用いること
によって、１／４の解像度の画像を生成するのに十分な
データ（２×２）が得られる。この場合、それ以降の係
数が０であっても、多少粗い画像ではあるが、ある程度
の画質を持った画像が復号することができる。さらに、
２４番目までのＤＣＴ係数を用いることによって、１／
２の解像度の画像を生成するのに十分なデータ（４×
４）が得られる。この場合は、それ以降の係数が０であ
っても、４番目までのＤＣＴ係数しか用いていない場合
よりも、比較的画質のよい画像を復号することができ
る。

【００３１】したがって、本実施形態においては、ジグ
ザグスキャンの順番のしきい値を４番と２４番に設定す
る。すなわち、画像データの構成を各ブロックの直流係
数、１番〜４番までの交流係数、５番〜２４番までの交
流係数、２５番〜６３番までの交流係数の順に並べる。
尚、直流係数は各ブロックの画素値の平均値を表すの
で、直流係数のみを用いて１／８の解像度の画像を生成
することも可能である。

【００３２】図６は、解像度変換に必要な係数値を残す
ための、マスクデータを説明するための概要図である。
図６（ａ）は、すべてのＤＣＴ係数を用いて逆ＤＣＴを
行う場合のマスクデータである。８×８の領域のＤＣＴ
係数を用いて逆ＤＣＴを行うと、原画像の画像サイズと
同一、かつ同解像度の画像データを生成することができ
る。また、図６（ｂ）はＤＣＴ係数のジグザグスキャン
の２４番目の係数までを用いる場合のマスクデータであ
る。４×４の領域のＤＣＴ係数を用いて逆ＤＣＴを行う
と、原画像の画像サイズの１／２の画像データが生成さ
れる。そして、このデータを公知の方法で２倍に拡大す
ると、解像度が原画像の１／２の画像を生成することが
できる。

【００３３】図６（ｃ）は、ＤＣＴ係数のジグザグスキ
ャンの４番目の係数までを用いる場合のマスクデータで
ある。２×２の領域のＤＣＴ係数を用いて逆ＤＣＴを行
うと、原画像の画像サイズの１／４の画像データが生成
される。このデータを公知の方法で４倍に拡大すると、
解像度が原画像の１／４の画像を生成することができ
る。これらの復号化処理は、図１における復号部２４に
おいて行われる。

【００３４】図７は、解像度変換を行う場合の復号部２
４における処理を実現するための構成を説明するための
ブロック図である。図７において、受信データ解析器２
３で解析された受信データは復号バッファ２４ａに一時
記憶される。そして、可変長復号器（ＶＣＤ）２４ｂに
おいて、交流係数を残す処理が行われる。この結果に基
づいて、８×８の逆ＤＣＴ部（８×８ＩＤＣＴ）２４
ｃ、４×４の逆ＤＣＴ部（４×４ＩＤＣＴ）２４ｄ、２
×２の逆ＤＣＴ部（２×２ＩＤＣＴ）２４ｅのいずれか
の逆ＤＣＴ部で逆ＤＣＴが行われる。

【００３５】さらに、その結果に対して、色変換部２４
ｆにおいて輝度・色差信号がＲＧＢ信号に変換される。
また、４×４ＩＤＣＴ２４ｄにおいて逆ＤＣＴされた場
合は、２倍拡大部２４ｇで画像サイズが縦横方向それぞ
れに２倍され、原画像のサイズに合わせられる。一方、
２×２ＩＤＣＴ２４ｅにおいて逆ＤＣＴされた場合は、
４倍拡大部２４ｈで画像サイズが縦横方向それぞれに４
倍されて原画像のサイズに合わせられる。このようにし
て復号化された画像データは、ラインバッファ２４ｉを
通して表示器２５で出力される。

【００３６】次に、交流係数を予測して画像データを補
間する方法について説明する。交流係数の予測方法に関
しては、特許第２６１８０８３号公報や特許第３１１８
２３７号公報等で既に開示されているものもあるが、本
実施形態については以下のようにして予測する。

【００３７】図８は、同実施形態による画像処理装置の
動作手順を説明するためのフローチャートである。まず
送信側端末１からプログレッシブ符号化された画像デー
タが送信されると、受信側端末２の受信器２１で当該画
像データの受信が開始される（ステップＳ１１）。そし
て、バッファモニタ２６の作動により、画像データが一
定の受信レート以上で受信しているか否かが判断される
（ステップＳ１２）。その結果、一定の受信レート以上
で画像データを受信している場合（ＹＥＳ）、受信され
た画像データは受信バッファ２２に格納される（ステッ
プＳ１３）。一方、一定の受信レート以下で受信されて
いる場合、或いは全く受信されていないような場合（Ｎ
Ｏ）、ある一定の時間が経過したか否かが判断される
（ステップＳ１７）。そして、一定時間が経過した場合
（ＹＥＳ）、受信データ解析器２３において受信した画
像データの補間が行われる（ステップＳ１８）。

【００３８】また、ステップＳ１３で受信バッファ２２
に画像データが格納された後、全画像データが受信され
たか否かが判断される（ステップＳ１４）。その結果、
全画像データが受信された場合（ＹＥＳ）、画像データ
の復号化が復号器２４で行われる（ステップＳ１５）。
そして、復号化が行われた画像データの再生が表示器２
５で行われる（ステップＳ１６）。一方、ステップＳ１
８で画像データが補間された後も当該画像データの復号
化が行われ（ステップＳ１５）、画像が再生される（ス
テップＳ１６）。

【００３９】図９は、同実施形態における交流係数予測
を説明するための概要図である図９（ａ）は、注目して
いるブロックを含んだ９個のブロックの直流係数を用い
て８個の中間データを算出する手順を説明をするための
図である。

【００４０】図９（ａ）において、注目しているブロッ
クをＢ５として、ブロックＢ５のまわりに位置するブロ
ックＢ１〜Ｂ４およびブロックＢ６〜Ｂ９における各直
流係数ＤＣ１〜ＤＣ９を用いて、次式に示すような８個
の中間データを算出する。Ｄ４Ｍ６＝ＤＣ４−ＤＣ６（１）Ｄ４Ｐ６＝ＤＣ４＋ＤＣ６−２×ＤＣ５（２）Ｄ２Ｍ８＝ＤＣ２−ＤＣ８（３）Ｄ２Ｐ８＝ＤＣ２＋ＤＣ８−２×ＤＣ５（４）Ｄ１Ｍ３＝ＤＣ１−ＤＣ３（５）Ｄ１Ｐ３＝ＤＣ１＋ＤＣ３（６）Ｄ７Ｍ９＝ＤＣ７−ＤＣ９（７）Ｄ７Ｐ９＝ＤＣ７＋ＤＣ９（８）また、図９（ｂ）は算出された８個の中間データから、
注目しているブロックＢ５のＣＦ２〜ＣＦ１５に位置す
る１４個の交流係数の予測値を算出する手順を説明する
ための図である。交流係数ＣＦ２〜ＣＦ１５は、８個の
中間データおよび直流成分を用いて次式のように算出す
ることができる。ＣＦ２＝９．１１０８×Ｄ４Ｍ６（９）ＣＦ３＝９．１１０８×Ｄ４Ｐ６（１０）ＣＦ４＝２．２３０５×Ｄ２Ｐ８（１１）ＣＦ５＝１．２９７×（Ｄ１Ｍ３−Ｄ７Ｍ９）（１２）ＣＦ６＝２．２３０５×Ｄ４Ｐ６（１３）ＣＦ７＝０．９５２４×Ｄ４Ｍ６（１４）ＣＦ８＝０．３１７５×（Ｄ１Ｐ３−Ｄ７Ｐ９−２×Ｄ２Ｍ８）（１５）ＣＦ９＝０．３１７５×（Ｄ１Ｍ３＋Ｄ７Ｍ９−２×Ｄ４Ｍ６）（１６）ＣＦ１０＝０．９５２４×Ｄ２Ｍ８（１７）ＣＦ１１＝０．５×Ｄ２Ｐ８（１８）ＣＦ１２＝０．１３５６×（Ｄ１Ｍ３−Ｄ７Ｍ９）（１９）ＣＦ１３＝０．０７７７×（Ｄ１Ｐ３＋Ｄ７Ｐ９ −２×（ＤＣ２＋Ｄ４Ｐ６＋ＤＣ８））（２０）ＣＦ１４＝０．１３５６×（Ｄ１Ｍ３−Ｄ７Ｍ９）（２１）ＣＦ１５＝０．５×Ｄ４Ｐ６（２２）このようにして受信データ解析器２３における解析部２
３ｅで算出された予測値ＣＦ２〜ＣＦ１５を注目ブロッ
クにおける交流係数が、受信された画像データ中の欠落
している部分に割り当てる。

【００４１】尚、画像データ中の交流係数の受信状態に
応じて、交流係数を予測して補間する手段を用いるか、
補間を行わずに受信した画像データのみで画像を復号化
するかについては、次のような方法を用いることができ
る。図１０は、画像データ中の交流係数の受信状態に応
じて符号データを再構成する処理手順を説明するための
フローチャートである。

【００４２】まず、受信したデータである２次元ハフマ
ン符号の復号化を行う（ステップＳ２１）。次いで、ゼ
ロラングレスとＤＣＴ係数を解析して、図５に示される
ジグザグスキャンの最大のシーケンス番号をカウントす
る（ステップＳ２２）。そして、このシーケンス番号が
あらかじめ設定されたしきい値よりも大きいか否かが判
定される（ステップＳ２３）。例えば、このしきい値と
しては、上述したように「４」や「２４」が与えられ
る。

【００４３】その結果、しきい値以上である場合（ＹＥ
Ｓ）、しきい値の次の位置のＤＣＴ係数に対するハフマ
ン符号の直前にブロックデータの終端符号であるＥＯＢ
コードを付加する（ステップＳ２４）。一方、しきい値
以下である場合（ＮＯ）、上述した交流係数予測を行う
ことによって、交流係数のデータ補間を行う（ステップ
Ｓ２５）。このようにして得られた符号化データに対し
て、逆ＤＣＴが行われることによって画像を復号化する
ことができる。

【００４４】なお、本発明は、複数の機器（例えばホス
トコンピュータ、インタフェイス機器、リーダ、プリン
タなど）から構成されるシステムに適用しても、一つの
機器からなる装置（例えば、複写機、ファクシミリ装置
など）に適用してもよい。

【００４５】また、本発明の目的は、前述した実施形態
の機能を実現するソフトウェアのプログラムコードを記
録した記録媒体（または記憶媒体）を、システムあるい
は装置に供給し、そのシステムあるいは装置のコンピュ
ータ（またはＣＰＵやＭＰＵ）が記録媒体に格納された
プログラムコードを読み出し実行することによっても、
達成されることは言うまでもない。この場合、記録媒体
から読み出されたプログラムコード自体が前述した実施
形態の機能を実現することになり、そのプログラムコー
ドを記憶した記録媒体は本発明を構成することになる。
また、コンピュータが読み出したプログラムコードを実
行することにより、前述した実施形態の機能が実現され
るだけでなく、そのプログラムコードの指示に基づき、
コンピュータ上で稼働しているオペレーティングシステ
ム（ＯＳ）などが実際の処理の一部または全部を行い、
その処理によって前述した実施形態の機能が実現される
場合も含まれることは言うまでもない。

【００４６】さらに、記録媒体から読み出されたプログ
ラムコードが、コンピュータに挿入された機能拡張カー
ドやコンピュータに接続された機能拡張ユニットに備わ
るメモリに書込まれた後、そのプログラムコードの指示
に基づき、その機能拡張カードや機能拡張ユニットに備
わるＣＰＵなどが実際の処理の一部または全部を行い、
その処理によって前述した実施形態の機能が実現される
場合も含まれることは言うまでもない。

【００４７】本発明を上記記録媒体に適用する場合、そ
の記録媒体には、先に説明したフローチャートに対応す
るプログラムコードが格納されることになる。

【００４８】

【発明の効果】以上説明したように、請求項１記載の発
明によれば、プログレッシブ符号化された画像データを
受信する受信手段と、受信された画像データの受信レー
トを検出する検出手段と、前記受信レートが所定値より
小さい場合、前記画像データの受信を中止する中止手段
と、受信された画像データを用いて画像を復号化する復
号化手段とを備えることを特徴とするので、画像データ
の転送が中断した場合であっても、転送済みの画像デー
タを用いて明瞭な画像を復号化して再生することができ
るという効果が得られる。

【００４９】また、請求項３記載の発明によれば、受信
された画像データに含まれる複数の直流係数に基づいて
所定数の交流係数を予測する交流係数予測手段と、受信
された画像データのうち欠落している交流係数について
予測された交流係数を割り当てるデータ補間手段とをさ
らに備え、復号化手段が、データ補間された画像データ
を用いて画像を復号化するので、画像データの転送が中
断した場合であっても、欠落した交流係数の補間によっ
て、明瞭な画像を復号化して再生することができるとい
う効果が得られる。

【図面の簡単な説明】

【図１】この発明の一実施形態による画像通信システ
ムの構成を説明するためのブロック図である。

【図２】受信データ解析器２３における細部構成を説
明するためのブロック図である。

【図３】ＤＣＴ係数の周波数分割のグループ分けを説
明するための概要図である。

【図４】プログレッシブ符号化における画像データの
構成および画像転送の中断指示が入るタイミングを説明
するための概要図である。

【図５】８×８画素で構成された１ブロックをＤＣＴ
の演算で得られたＤＣＴ係数のジグザグスキャンの順を
説明するための図である

【図６】解像度変換に必要な係数値を残すための、マ
スクデータを説明するための概要図である。

【図７】解像度変換を行う場合の復号部２４における
処理を実現するための構成を説明するためのブロック図
である。

【図８】同実施形態による画像処理装置の動作手順を
説明するためのフローチャートである。

【図９】同実施形態における交流係数予測を説明する
ための概要図である。

【図１０】画像データ中の交流係数の受信状態に応じ
て符号データを再構成する処理手順を説明するためのフ
ローチャートである。

【符号の説明】

１１画像データベース、１２符号器、１３送信
器、２１受信機、２２受信バッファ、２３受信デ
ータ解析器、２４復号器、２５表示器、２６バッ
ファモニタ

Claims

【特許請求の範囲】

【請求項１】プログレッシブ符号化された画像データ
を受信する受信手段と、受信された画像データの受信レートを検出する検出手段
と、前記受信レートが所定値より小さい場合、前記画像デー
タの受信を中止する中止手段と、受信された画像データを用いて画像を復号化する復号化
手段とを備えることを特徴とする画像処理装置。
【請求項２】前記復号化手段が、最後に受信された区
切り信号までの画像データを用いて画像を復号化するこ
とを特徴とする請求項１記載の画像処理装置。
【請求項３】受信された画像データに含まれる複数の
直流係数に基づいて所定数の交流係数を予測する交流係
数予測手段と、受信された画像データのうち欠落している交流係数につ
いて予測された交流係数を割り当てるデータ補間手段と
をさらに備え、前記復号化手段が、データ補間された画像データを用い
て画像を復号化することを特徴とする請求項１記載の画
像処理装置。
【請求項４】プログレッシブ符号化された画像データ
を受信する第１の過程と、受信された画像データの受信レートを検出する第２の過
程と、前記受信レートが所定値より小さい場合、前記画像デー
タの受信を中止する第３の過程と、受信された画像データを用いて画像を復号化する第４の
過程とを備えることを特徴とする画像処理方法。
【請求項５】プログレッシブ符号化された画像データ
を受信する第１のステップと、受信された画像データの受信レートを検出する第２のス
テップと、前記受信レートが所定値より小さい場合、前記画像デー
タの受信を中止する第３のステップと、受信された画像データを用いて画像を復号化する第４の
ステップとをコンピュータに実行させるためのプログラ
ム。
【請求項６】コンピュータに、プログレッシブ符号化された画像データを受信する第１
の手順と、受信された画像データの受信レートを検出する第２の手
順と、前記受信レートが所定値より小さい場合、前記画像デー
タの受信を中止する第３の手順と、受信された画像データを用いて画像を復号化する第４の
手順とを実行させるためのプログラムを記録したコンピ
ュータ読み取り可能な記録媒体。