JPH09247682A - 画像符号化方法及び画像符号化装置 - Google Patents

Abstract

(57)【要約】 【課題】 リフレッシュのために符号量を徒に増加させ
ることなく、復号できない場合に画質劣化が著しい分割
区画について、復号側への伝送でデータ誤りやデータ欠
落が生じても復号画像の画質劣化期間をごく短時間とす
る。 【解決手段】 １フレームを複数に分割し、分割区画毎
に、時間相関利用符号化方式又は同一画像内符号化方式
のいずれかで符号化する画像符号化方法又は装置であっ
て、各フレーム又は数フレーム毎に、いくつかの分割区
画をリフレッシュ対象の分割区画として決定し、リフレ
ッシュ対象と決定された分割区画は同一画像内符号化方
式で符号化する画像符号化方法又は装置に関する。そし
て、各分割区画について、その画像内容の時間変化特徴
量を計算し、この得られた各分割区画毎の時間変化特徴
量に基いて、リフレッシュ対象の分割区画を決定するこ
とを特徴とする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は画像符号化方法及び
画像符号化装置に関し、特に、復号エラーが複数枚の連
続画像に影響を与えることを防止するためのリフレッシ
ュ機能の改良に関する。

【０００２】

【従来の技術】デジタル通信において、膨大な情報量を
持つ動画像データを送信しようとする場合には、動画像
データは情報圧縮が施されて冗長性を削られる。一般
に、標準化になっている動画像符号化方式（例えば、Ｉ
ＴＵ−Ｔ／Ｈ．２６１やＭＰＥＧ２等での動画像符号化
方式）においては、時間的に前のフレームとの差分を符
号化（以下、フレーム間符号化又はＩＮＴＥＲモード符
号化と呼ぶ）して時間方向の冗長度を削減したり、ある
いは、前後するフレーム間の差分をとらずに符号化対象
画像に直交交換を施して符号化（以下、フレーム内符号
化又はＩＮＴＲＡモード符号化と呼ぶ）することにより
空間方向の冗長度を削減したりする圧縮方法を併用して
いる。

【０００３】現在標準化になっているＩＴＵ−Ｔ／Ｈ．
２６１やＭＰＥＧ２等の動画像符号化方式では、１枚の
画像（フレーム）をある大きさ（例えば１６画素×１６
画素）の区画に区切り（以下、この分割区画をマクロブ
ロックと呼ぶ）、マクロブロック単位で符号化を行な
う。このような符号化されたマクロブロックを所定数ず
つまとめ（例えば、図２において点線で区切られた部
分）、これらのマクロブロック群の間には、可変長符号
の同期をとるための同期符号語が挿入される。このよう
な区切りの単位（マクロブロック群）は、ＩＴＵ−Ｔ／
Ｈ．２６１ではＧＯＢ（Group of Block）と呼ばれ、Ｍ
ＰＥＧ２ではスライスと呼ばれている。以下、この明細
書においては、ＧＯＢやスライスのような区切りの単位
をまとめてスライスと呼ぶことにする。

【０００４】このように圧縮データにはスライス単位に
同期符号語が挿入されているので、データ誤りやデータ
欠落のあった影響はスライス単位で生じる。すなわち、
データ誤りやデータ欠落があったスライスは復号するこ
とができなくなってしまうが、同期符号語により次のス
ライスからは復号可能である。

【０００５】しかしながら、ＩＮＴＥＲモードで符号化
された動画像圧縮データに誤りが生じたり、データが途
中でなくなってしまった場合には、復号画像が大きく歪
み、ＩＮＴＥＲモードでは時間的に前のフレームとの差
分を符号化しているので、その歪みの影響は、後のフレ
ームにもそのまま連続して伝搬していく。例えば、圧縮
データに誤りがない場合には、図２（ａ）に示すよう
に、復号される画像でも、４番目のスライスに何らかの
誤りが生じて第２フレーム目の一部分が復号できない場
合には、図２（ｂ）に示すように、第２フレーム目だけ
でなく、第３フレーム以降にもその誤りの影響が伝搬し
ていく。

【０００６】このような誤りに伴う歪み（画質劣化）の
後続フレームへの伝搬を防止するために、符号側におい
て、一定周期で、前のフレームを参照しないフレーム内
符号化（ＩＮＴＲＡモード符号化）を強制的に行なうよ
うにしている。このような強制的なＩＮＴＲＡモードで
の符号化動作はリフレッシュと呼ばれている。リフレッ
シュには、文献１に記載のように、スライス単位でリフ
レッシュするＩＮＴＲＡスライスと呼ばれるものや、フ
レーム単位でリフレッシュするＩＮＴＲＡフレームと呼
ばれるものがあり、さらには、文献名は挙げないが、マ
クロブロック単位でリフレッシュする方法もある。

【０００７】文献１『町田豊、行武剛共著、「セル廃棄
耐性を有するＡＴＭ画像符号化方式」、１９９２年画像
符号化シンポジウム』 図３は従来のＩＮＴＲＡスライスの説明図である。ＩＮ
ＴＲＡスライスでは、図３に示すように、リフレッシュ
する所定数（図示のものは２個）のスライスを、フレー
ム毎に巡回的に変化させている。また、図４は従来のマ
クロブロック単位でのリフレッシュ方法の説明図であ
る。マクロブロック単位でのリフレッシュでも、図４に
示すように、リフレッシュする所定数（図示のものは３
個）のマクロブロックを、フレーム毎に巡回的に変化さ
せている。

【０００８】

【発明が解決しようとする課題】しかしながら、リフレ
ッシュ単位がフレーム、スライス、マクロブロックのい
ずれであろうと、従来のリフレッシュ方法は、以下のよ
うに課題を有するものであった。

【０００９】(1) ＩＮＴＥＲ符号化は、フレーム相関
によりダイナミックレンジが狭められたフレーム間差分
信号を符号化するものであるので、ＩＮＴＲＡ符号化に
比較して符号化効率が良好なものである。リフレッシュ
機能によりＩＮＴＲＡ符号化を行なうことは、その画像
区画（リフレッシュ単位）をＩＮＴＥＲ符号化する場合
に比較して、符号量を増大させる。このようなマイナス
面を有するリフレッシュを実行するからには、リフレッ
シュの実行による画質補償が高くなければならない。

【００１０】ところで、圧縮データに誤りがあったりデ
ータが欠落したりした場合、一般には、正常に復号され
た過去のフレームのその分割区画のデータを用いる。こ
のような分割区画が静止画の場合、このようなデータ誤
りや欠落に対する補償で十分な画質が得られ、リフレッ
シュを必要としない。

【００１１】しかしながら、従来のリフレッシュ方法で
は、画像内容に関係なく、フレーム毎に巡回的に定まる
分割区画やフレームをリフレッシュ（ＩＮＴＲＡ符号
化）していたので、リフレッシュをしなくてもデータ誤
りや欠落に対する画質補償が十分な画像（例えば静止
画）に対してもリフレッシュを行なうことも生じてお
り、この点から符号量を余分に増加させており、伝送効
率を低下させていた。

【００１２】(2) 上述した図２（ｂ）に示したよう
に、動画領域に係る圧縮データ部分にデータ誤りやデー
タ欠落が生じた場合、データ誤りやデータ欠落による画
質劣化は著しい。従って、動画領域に生じたデータ誤り
やデータ欠落の後続フレームへの伝搬は、早期に断切る
ことが好ましい。この点に鑑みた場合、同一の画像区画
に対するリフレッシュ周期を短くすることが好ましい。
しかし、リフレッシュ周期を短くした場合には、伝送す
る符号量が増大するので、かかる解決方法を採用するこ
とができない。

【００１３】そのため、動画領域に係る圧縮データ部分
にデータ誤りやデータ欠落が生じて画質が著しく劣化し
ても、その画像区画に対するリフレッシュがなされるの
を待たなければならず、場合によって、画質劣化時間が
かなり長期になることも生じていた。

【００１４】

【課題を解決するための手段】かかる課題を解決するた
め、第１の本発明においては、１フレームを複数に分割
し、分割区画毎に、時間相関利用符号化方式又は同一画
像内符号化方式のいずれかで符号化する画像符号化方法
であって、各フレーム又は数フレーム毎に、いくつかの
分割区画をリフレッシュ対象の分割区画として決定し、
リフレッシュ対象と決定された分割区画は同一画像内符
号化方式で符号化する画像符号化方法において、(1) 各
分割区画について、その画像内容の時間変化特徴量を計
算し、(2) 得られた各分割区画毎の時間変化特徴量に基
いて、リフレッシュ対象の分割区画を決定することを特
徴とする。

【００１５】また、第２の本発明においては、１フレー
ムを複数に分割し、分割区画毎に、時間相関利用符号化
方式又は同一画像内符号化方式のいずれかで画像符号化
手段が符号化する画像符号化装置であって、リフレッシ
ュ対象決定手段が、各フレーム又は数フレーム毎に、い
くつかの分割区画をリフレッシュ対象の分割区画として
決定し、画像符号化手段がリフレッシュ対象と決定され
た分割区画を同一画像内符号化方式で符号化する画像符
号化装置において、リフレッシュ対象決定手段を、以下
のように構成したことを特徴とする。

【００１６】すなわち、リフレッシュ対象決定手段を、
(1) 各分割区画について、その画像内容の時間変化特徴
量を計算する特徴量計算部と、(2) 得られた各分割区画
毎の時間変化特徴量に基いて、リフレッシュ対象の分割
区画を決定するリフレッシュ対象決定部とで構成したこ
とを特徴とする。

【００１７】第１及び第２の本発明においては、画像内
容の時間変化の特徴に基いて、リフレッシュ対象の分割
区画を決定するようにしたので、復号できない場合に画
質劣化が著しい分割区画について、復号側への伝送でデ
ータ誤りやデータ欠落が生じても、リフレッシュにより
画質劣化を迅速に回復できるようになり、また、伝送効
率をリフレッシュのために低下させることもない。

【００１８】

【発明の実施の形態】

（Ａ）第１の実施形態 以下、本発明による画像符号化方法及び画像符号化装置
の第１の実施形態を図面を参照しながら詳述する。な
お、この第１の実施形態は、ＭＰＥＧ２に従う方法及び
装置を前提としているものである。

【００１９】図１は、この第１の実施形態の画像符号化
装置の機能的構成を示すブロック図である。

【００２０】図１において、この画像符号化装置１００
は、情報源符号器１０１、ビデオ信号多重化符号器１０
２、送信バッファ１０３、伝送路符号器１０４、符号化
制御器１０９及びＳＡＤソーティング部１１０から構成
されている。ここで、符号化制御器１０９は、上位ｎ選
択器１０５、一致判定器１０６、符号化モード判定器１
０７及び量子化ステップサイズ決定器１０８から構成さ
れている。

【００２１】例えば、ビデオカメラが撮像したり、記録
媒体から読み出されたりしたビデオ信号（デジタル信
号）が情報源符号器１０１に入力される。情報源符号器
１０１は、入力されたビデオ信号をＩＮＴＥＲ符号化又
はＩＮＴＲＡ符号化により情報源符号化する。

【００２２】図５は、情報源符号器１０１の詳細構成例
を示すブロック図である。なお、情報源符号器１０１
は、入力ビデオ信号をスライスやマクロブロックに分割
し、その分割区画毎に符号化処理する。従って、図示は
省略しているが、今、どのスライス、どのマクロブロッ
クを処理しているかを認識している処理回路が存在して
いる。

【００２３】図５において、入力されたビデオ信号は、
減算器２００、信号選択器２０１、動きベクトル検出器
２０８に与えられる。減算器２００は、入力されたビデ
オ信号と、フレームメモリ２０７から与えられた動き補
償されている前フレームのビデオ信号との差分信号を得
て信号選択器２０１に与える。信号選択器２０１には、
符号化モード判定器１０７からモード種類信号が与えら
れており、信号選択器２０１は、モード種類信号がＩＮ
ＴＥＲモードを指示しているとき減算器２００からの差
分信号を選択し、ＩＮＴＲＡモードを指示しているとき
入力されたビデオ信号そのものを選択する。信号選択器
２０１からの出力信号は、直交変換器の一種であるＤＣ
Ｔ変換器（離散コサイン変換器）２０２によってＤＣＴ
変換され、さらに、量子化器２０３によって量子化さ
れ、圧縮ビデオ信号（符号化データ）としてビデオ信号
多重化符号器１０２に与えられると共に、逆量子化器２
０４に与えられる。

【００２４】なお、量子化器２０３及び逆量子化器２０
４が必要とする量子化ステップサイズは、量子化ステッ
プサイズ決定器１０８から与えられる。

【００２５】圧縮ビデオ信号（符号化データ）は、逆量
子化器２０４及び逆ＤＣＴ変換器２０５を介して、信号
選択器２０１からの出力信号に対応した信号に局部復号
されて加算器２０６に与えられる。この加算器２０６に
も、信号線の図示は省略するが、符号化モード判定器１
０７からのモード種類信号が与えられており、モード種
類信号がＩＮＴＥＲモードを指示しているときには、逆
ＤＣＴ変換器２０５からの出力信号にフレームメモリ２
０７からの前フレームでの局部再生ビデオ信号を加算
し、モード種類信号がＩＮＴＲＡモードのときには逆Ｄ
ＣＴ変換器２０５からの出力信号をそのまま通過させて
フレームメモリ２０７に与える。フレームメモリ２０７
は、加算器２０６からの信号を、次のフレームの符号化
処理の際に必要となる前フレームの信号（予測ビデオ信
号）として格納する。

【００２６】動きベクトル検出器２０８は入力ビデオ信
号から動きベクトルを検出し、その検出信号をフレーム
メモリ２０７及びビデオ信号多重化符号器１０２に与え
る。例えば、縦横に±１５画素だけでずらした範囲内を
探索範囲とし、減算器２００からの差分信号の分散値が
最も小さくなる動きベクトルを検出する。フレームメモ
リ２０７は、格納動作時又は読出し動作時の一方におい
て、与えられた動きベクトルに基づいた補償動作を実行
する。

【００２７】図５は、符号化という観点から機能ブロッ
クで示したものであり、図５に示した以外にも情報源符
号器１０１は処理機能部を有している。上述したような
処理に供しているスライスやマクロブロックを認識する
機能部や、後述するようなＩＮＴＥＲモード、ＩＮＴＲ
Ａモードの決定処理に用いる情報を算出する機能部を有
している。

【００２８】図１において、ビデオ信号多重化符号器１
０２は、量子化器２０３からの圧縮信号（符号化デー
タ）をさらに可変長符号化し、また、同期符号語等のヘ
ッダを多重化して送信しようとする符号列を完成して送
信バッファ１０３に与える。この多重化の際には、符号
化モード判定器１０７からのモード種類信号や、量子化
ステップサイズ決定器１０８からの量子化ステップサイ
ズや、動きベクトル検出器２０８からの動きベクトル信
号等の情報も多重化される。送信バッファ１０３に格納
された送信符号列は、伝送路符号器１０４によって伝送
路符号化されて送信される。伝送路符号としては、例え
ばＢＣＨ符号等の誤り訂正符号が用いられる。

【００２９】送信符号量を制御するために送信バッファ
１０３からバッファの中の格納状態が量子化ステップサ
イズ決定器１０７に通知される。量子化ステップサイズ
決定器１０７は、送信バッファ１０３の格納状態に基づ
いて、その時点で最適な量子化ステップサイズを決定し
て、上述したように情報源符号器１０１（量子化器２０
３及び逆量子化器２０４）並びにビデオ信号多重化符号
器１０２に対して、制御信号として与える。

【００３０】以上説明した情報源符号器１０１〜伝送路
符号器１０４及び量子化ステップサイズ決定器１０８
は、従来と同様である。

【００３１】この第１の実施形態の場合、以下に詳述す
る上位ｎ選択器１０５、一致判定器１０６、符号化モー
ド判定器１０７及びＳＡＤソーティング部１１０でなる
リフレッシュ機能を担う構成部分に特徴を有するもので
ある。

【００３２】すなわち、従来においては画像内容に関係
なく、巡回的にリフレッシュするフレーム又は分割区画
（スライス又はマクロブロック）を定めていたが、この
第１の実施形態では、リフレッシュする分割区画又はフ
レームの決定に画像内容を反映させる点に特徴を有して
おり、かかる特徴を、上位ｎ選択器１０５、一致判定器
１０６、符号化モード判定器１０７及びＳＡＤソーティ
ング部１１０によって実現している。以下では、フレー
ム毎に３個のマクロブロックをリフレッシュするとして
説明を行なう。

【００３３】符号化モード判定器１０７には、従来と同
様に、そのマクロブロックがリフレッシュ対象でない場
合に、ＩＮＴＥＲモードで符号化するかＩＮＴＲＡモー
ドで符号化するかを判定できるようにする情報が、情報
源符号器１０１から与えられている。すなわち、マクロ
ブロックについての全ての画素（Ｎ×Ｍ画素；例えば１
６×１６画素）の入力ビデオ信号（原データ）の値の分
散値（以下、原データ分散値と呼ぶ）と、動き補償が最
も良好になされた状態で減算器２００から出力された、
そのマクロブロックについての全ての画素の差分信号
（予測誤差データ）の値の分散値（最適な動きベクトル
の探索時において得られる差分信号の分散値の中の最小
値であり、以下、動き補償差分データ分散値と呼ぶ）と
が符号化モード判定器１０７に与えられる。従って、リ
フレッシュ対象でないマクロブロックについては、これ
ら原データ分散値と動き補償差分データ分散値との比較
（それぞれ所定の係数を乗算又は加算した後に比較して
も良い）により、ＩＮＴＥＲモード又はＩＮＴＲＡモー
ドのどちらで符号化するかを決定する。ビデオ信号は、
フレーム相関が高いものであるので、ほとんどの場合、
動き補償差分データ分散値の方がかなり小さくなり、Ｉ
ＮＴＥＲモードでの符号化に決定される。

【００３４】この第１の実施形態の場合、以上のような
原データ分散値及び動き補償差分データ分散値に加え
て、動きベクトルを０とした場合に減算器２００から出
力されるであろう差分信号（予測誤差データ）の各マク
ロブロックでの分散値（以下、位置固定差分データ分散
値と呼び、必要に応じてＳＡＤと略す）も、符号化モー
ド判定器１０７に与えられ、この点、従来とは異なって
いる。

【００３５】この位置固定差分データ分散値（ＳＡＤ）
は、動きベクトルを０とした前後するフレーム間の差分
信号の分散値であるので、対象となっているマクロブロ
ックの画像が動画部分であれば大きい値をとり、対象と
なっているマクロブロックの画像が静止画部分であれば
小さい値（動き補償差分データ分散値に等しいと考えら
れる）をとるものとなる。言い換えると、この位置固定
差分データ分散値（ＳＡＤ）が大きいことは、その値が
大きいほど、次のフレームのそのマクロブロックの画像
として前のフレームの同一位置のマクロブロックの画像
を適用した場合に、おかしな画像となることを表してい
る。なお、位置固定差分データ分散値（ＳＡＤ）とし
て、統計学上の分散の定義式に従って求めた値を用いる
代りに、それと同様な性格を有する後述するようにして
計算された値を用いることもできる。

【００３６】符号化モード判定器１０７は、情報源符号
器１０１から各マクロブロックについての位置固定差分
データ分散値（ＳＡＤ）を、ＳＡＤソーティング部１１
０に与える。

【００３７】ＳＡＤソーティング部１１０は、符号化モ
ード判定器１０７から与えられた位置固定差分データ分
散値を受取り、１フレームの符号化が終了したときに
は、そのフレームの全てのマクロブロックに係る位置固
定差分データ分散値を大きい順にソーティングする。そ
して、ソーティングした結果を、上位ｎ選択器１０５に
出力する。

【００３８】上位ｎ選択器１０５は、位置固定差分デー
タ分散値（ＳＡＤ）が大きい方のｎ個（ここではｎが３
とする）のマクロブロックの番号を認識して、一致判定
器１０６に出力する。

【００３９】一致判定器１０６は、上位ｎ選択器１０５
から与えられたｎ個のマクロブロック番号を内部に保持
し、情報源符号器１０１がこれから符号化処理しようと
するマクロブロックの番号が、保持しているｎ個のマク
ロブロック番号のいずれかに一致しているか否かを判定
する。一致判定器１０６は、保持しているｎ個のマクロ
ブロック番号のいずれにも一致していない場合に不一致
を表し、これに対して、一致するマクロブロック番号が
保持されている場合には一致を表す一致不一致信号を符
号化モード判定器１０７に与える。

【００４０】符号化モード判定器１０７は、不一致の一
致不一致信号が与えられたときには、上述したように、
原データ分散値と動き補償差分データ分散値との比較に
より、ＩＮＴＥＲモード又はＩＮＴＲＡモードのどちら
で符号化するかを決定する。これに対して、符号化モー
ド判定器１０７は、一致の一致不一致信号が与えられた
ときには、原データ分散値と動き補償差分データ分散値
との大小に関係なく、ＩＮＴＲＡモードで符号化するこ
と（リフレッシュすること）に決定し、このようにして
決定されたモードの種類を表しているモード種類信号を
情報源符号器１０１に与える。

【００４１】実際上、画像符号化装置１００は、１又は
２以上の半導体チップで構成させることが多く、図１に
示すような明確に各機能部が分離されたハードウェアで
構成されることは少なく、ハードウェアとソフトウェア
とが融合されて構成されることが多い。

【００４２】そこで、第１の実施形態の画像符号化装置
１００の動作、言い換えると、第１の実施形態の画像符
号化方法の処理を、どのブロック１０１〜１１０の処理
かを明確にすることなく、図６のフローチャートに従っ
て説明する。なお、図６は、各フレームにおいて、３個
のマクロブロックをリフレッシュ対象のマクロブロック
として決定する場合を示している。また、図６は、画像
符号化処理の全体を示しているのではなく、第１の実施
形態の特徴をなすリフレッシュ動作に関連する処理だけ
を示している。

【００４３】図６に示す処理を開始すると、リフレッシ
ュ対象のマクロブロックの番号を指示する３個のパラメ
ータＵＰＤ１、ＵＰＤ２及びＵＰＤ３をそれぞれ、実際
のマクロブロック番号としては存在しない値（図６では
「−１」を用いている）に設定する（ステップ３０
１）。かかる設定処理は、パラメータＵＰＤ１、ＵＰＤ
２及びＵＰＤ３のクリア処理を意味しており、これらパ
ラメータＵＰＤ１、ＵＰＤ２及びＵＰＤ３に有効な値が
設定されるまでは、いずれのマクロブロックに対しても
リフレッシュを実行させないことを確実なものとしてい
る。

【００４４】あるフレームでの処理に入ると、まず、処
理対象のマクロブロックを規定するパラメータＭＢＫを
初期値（「０」；最初のマクロブロックを指示してい
る）に設定する（ステップ３０２）。

【００４５】次に、符号化しようとしているフレームが
最初のフレームであるか否かを判定する（ステップ３０
３）。

【００４６】最初のフレームであれば、パラメータＭＢ
Ｋが指示しているマクロブロックをＩＮＴＲＡモードで
符号化する（ステップ３０６）。最初のフレームであれ
ば、前のフレームとの差分を求めることができないの
で、ＩＮＴＥＲモードで符号化する余地はない。

【００４７】これに対して最初のフレームでなければ、
処理対象のマクロブロックについての位置固定差分デー
タ分散値ＳＡＤ［ＭＢＫ］を計算して格納する（ステッ
プ３０４）。ここで、位置固定差分データ分散値ＳＡＤ
［ｉ］としては、上述したように、現フレーム及び前フ
レームの同一位置の画素信号の差分値に対して統計学上
の分散値の定義通りに求めたものであっても良いが、同
一の機能を果たすことが担保された状態で演算の簡単化
を考慮すると、現フレーム及び前フレームの同一位置の
画素信号の差分絶対値の総和（マクロブロックの画素数
分の総和）を用いることが実際的である。

【００４８】位置固定差分データ分散値ＳＡＤ［ＭＢ
Ｋ］の計算、格納動作が終了すると、パラメータＭＢＫ
と、パラメータＵＰＤ１、ＵＰＤ２又はＵＰＤ３との一
致判定を行なう（ステップ３０５）。すなわち、パラメ
ータＭＢＫで規定されている処理対象マクロブロック
が、現時点でのリフレッシュ対象のマクロブロックに該
当しているか否かを判定する。

【００４９】処理対象マクロブロックが、現時点でのリ
フレッシュ対象のマクロブロックに該当すると、処理対
象マクロブロックをＩＮＴＲＡモードで符号化し（ステ
ップ３０６）、一方、リフレッシュ対象のマクロブロッ
クに該当しないと、原データ分散値と動き補償差分デー
タ分散値とに基づいて符号化モードを決定し、決定した
ＩＮＴＥＲモード又はＩＮＴＲＡモードで処理対象のマ
クロブロックを符号化する（ステップ３０７）。

【００５０】なお、上述した従来と同様な符号化モード
の決定方法によらずに符号化モードを決定するようにし
ても良い。すなわち、この第１の実施形態の場合、位置
固定差分データ分散値ＳＡＤ［ＭＢＫ］が既に得られて
いるので、動き補償差分データ分散値を用いずに、又
は、動き補償差分データ分散値に加えて位置固定差分デ
ータ分散値ＳＡＤ［ＭＢＫ］を利用してＩＮＴＥＲモー
ド及びＩＮＴＲＡモードのどちらの符号化が適している
かを決定するようにしても良い。位置固定差分データ分
散値ＳＡＤ［ＭＢＫ］が大きければ大きいほど現フレー
ム及び前フレームの相関性が弱いことを表しているの
で、上述のように、符号化モードの決定に用いることが
できる。

【００５１】以上のようにして、あるマクロブロックに
対する符号化処理が終了すると、パラメータＭＢＫと、
１フレーム当りのマクロブロック数ＭＢＫＳより１だけ
小さい値ＭＢＫＳ−１とを大小比較することを通じて、
今まで処理対象であったフレームの全てのマクロブロッ
クについて符号化を終了したか否かを判定する（ステッ
プ３０８）。処理が終了直後のマクロブロックが、その
フレームの最後のマクロブロックでない場合には、処理
対象のマクロブロックを規定するパラメータＭＢＫを１
インクリメントして次のマクロブロックを指示するよう
に更新した後（ステップ３０９）、上述したステップ３
０３に戻って次のマクロブロックの処理に移行する。

【００５２】ステップ３０３〜３０８でなる処理ループ
を繰返し実行することにより、やがて、現在処理対象の
フレームの最後のマクロブロックに対する符号化処理も
終了する。このようにして、現在処理対象のフレームの
最後のマクロブロックに対する符号化処理が終了すると
（上記ステップ３０８で肯定結果）、そのフレームが最
後であるか否か、すなわち符号化する入力画像が終わり
であるか否かを判定する（ステップ３１０）。

【００５３】最後のフレームでなければ、計算された全
ての位置固定差分データ分散値ＳＡＤ［ｉ］（ｉ＝０〜
ＭＢＫＳ−１）を大きい順に並換え、並び換えられた位
置固定差分データ分散値ＳＡＤ［ｊ］に対応するマクロ
ブロック番号をパラメータＳＡＤＮＯ［ｊ］に代入する
（ステップ３１１）。例えば、ＳＡＤＮＯ［０］は今符
号化されたフレーム内で一番大きな位置固定差分データ
分散値ＳＡＤを持つマクロブロックの番号であり、ＳＡ
ＤＮＯ［ＭＢＫＳ−１］は一番小さな位置固定差分デー
タ分散値ＳＡＤを持つマクロブロックの番号である。

【００５４】その後、リフレッシュ対象のマクロブロッ
クを規定する３個のパラメータＵＰＤ１、ＵＰＤ２及び
ＵＰＤ３にそれぞれ、パラメータＳＡＤＮＯ［０］、Ｓ
ＡＤＮＯ［１］又はＳＡＤＮＯ［２］）をセットして上
述したステップ３０２に戻り（ステップ３１２）、次の
フレームの処理に進む。すなわち、次のフレームでリフ
レッシュすべきマクロブロックの番号として、今符号化
されたばかりのフレームにおいて、位置固定差分データ
分散値ＳＡＤが大きい方の３個のマクロブロックを設定
した後、次のフレームの符号化処理に移行する。

【００５５】なお、図６では明確に記載していないが、
最初のフレームについては、ステップ３０４において位
置固定差分データ分散値ＳＡＤが計算されることがない
ので、これらステップ３１１及び３１２の処理は省略さ
れてステップ３０２に戻るようになされている。

【００５６】以上のようなステップ３１１及び３１２の
処理により、この第１の実施形態においては、従来のよ
うに（図６に示すように）、リフレッシュ対象のマクロ
ブロックがフレーム毎に巡回的に変化するのではなく、
画像の中でよく動いている部分等の位置固定差分データ
分散値ＳＡＤの大きい部分のマクロブロックを、すなわ
ち誤りによってデータが落とされる場合に非常に歪んで
しまう部分のマクロブロックを、図８に示すように、各
フレームでのリフレッシュ対象に設定することができ
る。言い換えると、背景のように画像の動きがない部分
等の位置固定差分データ分散値ＳＡＤの小さい部分、す
なわち、誤りでデータが落とされても前のフレームを表
示すれば歪みのない画像を得ることができる部分を、リ
フレッシュ対象とすることはないようになっている。

【００５７】上述したステップ３０２〜３１２でなる処
理ループを繰返すことにより、やがて最終フレームの符
号化処理も終了し、このときには（ステップ３１０で肯
定結果）、図６に示す一連の符号化処理を終了させる。

【００５８】以上のように、第１の実施形態によれば、
リフレッシュ対象のマクロブロックを、画像内容に応じ
て柔軟に変更させるようにしたので、復号装置におい
て、データ誤りやデータ欠落により復号できないマクロ
ブロックが生じても、そのマクロブロックの画像として
復号できた過去の同一位置の信号を用いることにより、
十分な画質を得ることができる。

【００５９】すなわち、データ誤りやデータ欠落により
復号できないマクロブロックが静止画部分であれば過去
の信号を用いることで十分な画質が得られ、データ誤り
やデータ欠落により復号できないマクロブロックがその
影響が著しい動画部分であっても直ちにリフレッシュさ
れてその影響が長時間に渡らないので、画質劣化をごく
短時間に押さえることができる。

【００６０】図８は、このような第１の実施形態の効果
を説明するための図面である。ここで、図８（ａ）が従
来の画像符号化方法（リフレッシュ方法）に関するもの
であり、図８（ｂ）がこの第１の実施形態の画像符号化
方法（リフレッシュ方法）に関するものである。

【００６１】従来の方法では、あるマクロブロックにつ
いて見た場合、一定周期でそのマクロブロックをリフレ
ッシュするので、復号側において、２フレーム目の５番
目のスライスの一部分（その先頭側の５個のマクロブロ
ックであり、一部は動画部分になっている）を、誤りや
欠落で復号できないで過去の復号信号を用いることで画
像が歪んでしまうと、その歪んだ部分をリフレッシュす
るまでにかなりの遅延が生じ、図８（ａ）に示すよう
に、復号画像の歪みが長時間継続する。

【００６２】これに対して、上述した第１の実施形態で
は、画像の中でよく動いている部分等の位置固定差分デ
ータ分散値ＳＡＤの大きい部分のマクロブロックをリフ
レッシュ対象としているので、上記と同様に、復号側に
おいて、２フレーム目の５番目のスライスの一部分を誤
りや欠落が生じ、過去の復号信号を用いて動画部分に歪
みが生じても、その動画部分は次のフレーム（３フレー
ム目）でのリフレッシュ対象としてＩＮＴＲＡモードで
符号化されているので、図８（ｂ）に示すように、次の
フレーム（３フレーム目）では正しく復号でき、３フレ
ーム目からは歪みが修正される。すなわち、画質劣化フ
レームを僅かな数フレーム（図８の例では１フレーム）
に抑えることができる。

【００６３】なお、第１の実施形態の場合、１フレーム
当りのリフレッシュ対象数を従来より増やしているわけ
ではないので、符号量の増大（伝送効率の低下）を招く
ことはない。

【００６４】（Ｂ）第２の実施形態 以下、本発明による画像符号化方法及び画像符号化装置
の第２の実施形態を図面を参照しながら詳述する。な
お、この第２の実施形態も、ＭＰＥＧ２に従う方法及び
装置を前提としているものである。

【００６５】図９は、この第２の実施形態の画像符号化
装置の機能的構成を示すブロック図であり、上述した図
１との同一、対応部分には同一符号を付して示してい
る。

【００６６】図９において、この第２の実施形態の画像
符号化装置１００Ａも、情報源符号器１０１、ビデオ信
号多重化符号器１０２、送信バッファ１０３、伝送路符
号器１０４、符号化制御器１０９Ａ及びＳＡＤソーティ
ング部１１０から構成されている。しかし、符号化制御
器１０９Ａの詳細構成が第１の実施形態とは異なってい
る。すなわち、この符号化制御器１０９Ａは、第１の実
施形態と同様に、一致判定器１０６、符号化モード判定
器１０７及び量子化ステップサイズ決定部１０８を備え
ているが、上位ｎ選択器１０５は備えられておらず、上
位ｎ選択器１０５の代りに、周囲画像位置選択器１１１
が設けられている。

【００６７】この第２の実施形態のＳＡＤソーティング
部１１０は、符号化モード判定器１０７から与えられた
位置固定差分データ分散値（ＳＡＤ）を受取り、１フレ
ームの符号化が終了したときには、そのフレームの全て
のマクロブロックに係る位置固定差分データ分散値を大
きい順にソーティングし、ソーティングした結果を、周
囲画像位置選択器１１１に出力する。

【００６８】周囲画像位置選択器１１１は、位置固定差
分データ分散値（ＳＡＤ）が最も大きいマクロブロック
の番号を認識すると共に、そのマクロブロックの周囲の
８個のマクロブロックの番号を認識して、一致判定器１
０６に出力する。なお、位置固定差分データ分散値（Ｓ
ＡＤ）が最も大きいマクロブロックが、そのフレーム画
像の周辺のマクロブロックであって、周囲に８個のマク
ロブロックが存在しない場合には、固定差分データ分散
値（ＳＡＤ）が最も大きいマクロブロックと、その周囲
に存在するマクロブロックの番号を一致判定器１０６に
出力する。

【００６９】一致判定器１０６は、周囲画像位置選択器
１１１から与えられた基本的には計９個のマクロブロッ
ク番号を内部に保持し、情報源符号器１０１がこれから
符号化処理しようとするマクロブロックの番号が、保持
している９個のマクロブロック番号のいずれかに一致し
ているか否かを判定する。一致判定器１０６は、保持し
ている９個のマクロブロック番号のいずれにも一致して
いない場合に不一致を表し、これに対して、一致するマ
クロブロック番号が保持されている場合には一致を表す
一致不一致信号を符号化モード判定器１０７に与える。

【００７０】以上の点を除けば、各機能部は、第１の実
施形態と同様に動作し、ビデオ信号を符号化する。

【００７１】以上のように、第１の実施形態は、主とし
て上位ｎ選択器１０５の機能により、位置固定差分デー
タ分散値（ＳＡＤ）の大きい方のｎ個のマクロブロック
をリフレッシュ対象にしているのに対して、第２の実施
形態は、位置固定差分データ分散値（ＳＡＤ）の一番大
きいマクロブロックとその周囲のマクロブロックをリフ
レッシュ対象にしているという点が異なっている。

【００７２】次に、第２の実施形態の画像符号化装置の
動作、言い換えると、第２の実施形態の画像符号化方法
の処理を、どのブロック１０１〜１１１の処理かを明確
にすることなく、図１０のフローチャートに従って説明
する。なお、図１０において、図６との同一、対応ステ
ップには、同一、対応符号を付して示している。また、
図１０は、画像符号化処理の全体を示しているのではな
く、第２の実施形態の特徴をなすリフレッシュ動作に関
連する処理だけを示している。

【００７３】図１０及び図６の比較から明らかなよう
に、第１の実施形態での処理と第２の実施形態の処理と
は大筋において同様である。但し、第１の実施形態にお
けるステップ３０１、３０５及び３１２の処理が、第２
の実施形態では多少変更されている（それぞれ、ステッ
プ３０１Ａ、３０５Ａ、３１２Ａで表記している）。

【００７４】図１０に示す処理を開始すると、リフレッ
シュ対象のマクロブロックの番号を指示する９個のパラ
メータＵＰＤ１〜ＵＰＤ９をそれぞれ、実際のマクロブ
ロック番号としては存在しない値（「−１」）に設定す
る（ステップ３０１Ａ）。上述のように、第２の実施形
態の場合、１フレーム当り最大９個のマクロブロックが
リフレッシュ対象となり得るので、リフレッシュ対象の
マクロブロックの番号を指示するパラメータも９個用意
されている。

【００７５】このようなパラメータＵＰＤ１〜ＵＰＤ９
の初期設定が終了すると、最初のフレームの符号化処理
に進み、処理対象のマクロブロック番号を規定するパラ
メータＭＢＫを１インクリメントさせることを通じて処
理対象のマクロブロックを順次切り替えながら、最初の
フレームの各マクロブロックをＩＮＴＲＡモードで符号
化する（ステップ３０２と、ステップ３０３−３０６−
３０８−３０９−３０３のループ）。最初のフレームの
全てのマクロブロックの符号化処理が終了しても、この
ときには、位置固定差分データ分散値（ＳＡＤ）が計算
されていないので、ソーティング処理や、その結果に基
づいてリフレッシュ対象のマクロブロックを決定する処
理（ステップ３１１、３１２Ａ）は実行されずに、２番
目のフレームの処理に移行する。

【００７６】２番目以降の各フレームの符号化処理に進
むと、処理対象のマクロブロック番号を規定するパラメ
ータＭＢＫを１インクリメントさせることを通じて処理
対象のマクロブロックを順次切り替えながら、各マクロ
ブロックについて、位置固定差分データ分散値（ＳＡ
Ｄ）の計算と、リフレッシュ対象かの確認と、ＩＮＴＥ
Ｒモード又はＩＮＴＲＡモードでの符号化を行なう（ス
テップ３０２と、ステップ３０３−３０４−３０５Ａ−
３０６（又は３０７）−３０８−３０９−３０３のルー
プ）。なお、この第２の実施形態の場合、１フレーム当
りのリフレッシュ対象のマクロブロック数が９であるの
で、リフレッシュ対象かの確認処理（ステップ３０５
Ａ）が第１の実施形態とは若干異なっている。

【００７７】２番目のフレームの場合には、パラメータ
ＵＰＤ１〜ＵＰＤ９が初期設定のままであるので、ステ
ップ３０５Ａで肯定結果が得られることはなく、一般的
な方法により、符号化モードが決定される（ステップ３
０７）。

【００７８】これに対して、３番目以降のフレームの場
合には、パラメータＵＰＤ１〜ＵＰＤ９には有効な値が
設定されており、リフレッシュが実行されることもあり
得る（ステップ３０６）。

【００７９】２番目以降の各フレームについて、その全
てのマクロブロックの符号化処理が終了したときには、
第１の実施形態と同様に、ソーティング処理が実行され
る（ステップ３１１）。しかし、そのソーティング結果
（ＳＡＤＮＯ［ｊ］）に基づいて、次のフレームでのリ
フレッシュ対象のマクロブロックを決定する処理が第１
の実施形態とは異なっている（ステップ３１２Ａ）。

【００８０】すなわち、第２の実施形態の場合、基本的
には、位置固定差分データ分散値が最も大きいマクロブ
ロックの番号ＳＡＤＮＯ［０］をパラメータＵＰＤ０の
値に設定し、番号がＳＡＤＮＯ［０］のマクロブロック
の周囲の８個のマクロブロックの番号をそれぞれ、パラ
メータＵＰＤ１〜ＵＰＤ８に設定する。図１１（ａ）〜
（ｅ）及び図１２（ｆ）〜図１２（ｉ）は、ステップ３
１２Ａによる、ソーティング結果（ＳＡＤＮＯ［０］）
に基づいたパラメータＵＰＤ１〜ＵＰＤ９の更新処理を
より正確に示したものである。すなわち、位置固定差分
データ分散値が最も大きいマクロブロックの番号ＳＡＤ
ＮＯ［０］のフレーム内の位置によって場合分けして示
したものである。しかし、この場合分け自体には意味が
ないので、これ以上の説明は省略する。

【００８１】いずれにせよ、このステップ３１２Ａの処
理を通じて、位置固定差分データ分散値（ＳＡＤ）の一
番大きいマクロブロックとその周囲のマクロブロック
が、次のフレームのリフレッシュ対象のマクロブロック
となり、次のフレームでの処理で、それらマクロブロッ
クは、ＩＮＴＲＡモードでの符号化（リフレッシュ）が
実行される。

【００８２】この第２の実施形態においても、リフレッ
シュ対象のマクロブロックがフレーム毎に巡回的に変化
するのではなく、図１３に示すように、例えば背景部分
との相違が最も大きい動画部分の移動等に応じて、リフ
レッシュ対象のマクロブロックが動的に変化する。

【００８３】動画部分は１個のマクロブロックより広い
ことが多いので、位置固定差分データ分散値（ＳＡＤ）
に基づいて、データ誤りやデータ欠落による歪みの影響
が大きい１個のマクロブロックを見付けても不十分なこ
とが多く、そこで、この第２の実施形態においては、位
置固定差分データ分散値（ＳＡＤ）の一番大きいマクロ
ブロックの周囲マクロブロックもリフレッシュ対象とす
ることとした。

【００８４】以上のように、第２の実施形態によって
も、リフレッシュ対象のマクロブロックを、画像内容に
応じて柔軟に変更させるようにしたので、復号装置にお
いて、データ誤りやデータ欠落により復号できないマク
ロブロックが生じても、そのマクロブロックの画像とし
て復号できた過去の同一位置の信号を用いることによ
り、十分な画質を得ることができる。すなわち、データ
誤りやデータ欠落により復号できないマクロブロックが
静止画部分であれば過去の信号を用いることで十分な画
質が得られ、データ誤りやデータ欠落により復号できな
いマクロブロックがその影響が著しい動画部分であって
も直ちにリフレッシュされてその影響が長時間に渡らな
いので、画質劣化をごく短時間に押さえることができ
る。

【００８５】特に、この第２の実施形態の場合には、位
置固定差分データ分散値（ＳＡＤ）の一番大きいマクロ
ブロックだけでなく、その周囲マクロブロックも、リフ
レッシュ対象としているので、復号誤りによる画質劣化
をも最小限にすることができる。

【００８６】すなわち、データ誤りやデータ欠落により
復号できないマクロブロック（過去の信号を用いなけれ
ばならないマクロブロック）が生じた場合、その周囲に
復号はできるが復号誤りによる画質が低下しているマク
ロブロック（誤りに気付かずに復号してしまったマクロ
ブロック）が生じることが実際上多い。リフレッシュ機
能により、このような復号誤りによる画質劣化をも直ち
に防止することができる。

【００８７】図１４は、以上のような第２の実施形態の
効果を視覚的な模式図で示したものであり、図１４
（ａ）が従来方法に関するものであり、図１４（ｂ）が
この第２の実施形態に関するものである。図１４におい
て、黒く塗り潰したマクロブロックが、復号誤りのマク
ロブロックを示しており、この図１４からは、従来方法
に比較して、復号誤りのマクロブロックも、リフレッシ
ュにより迅速に画質が回復していることが分かる。

【００８８】なお、この第２の実施形態も、リフレッシ
ュ対象数の増大を意図したものではなく、周囲のマクロ
ブロック数の選定によっては、リフレッシュによる符号
量の増大を従来と同程度にすることができる。

【００８９】（Ｃ）他の実施形態 上記各実施形態においては、リフレッシュ単位がマクロ
ブロックのものを示したが、スライス等の他の分割区画
（マクロブロックより小さいものであっても良い）の大
きさをリフレッシュ単位とするようにしても良い。ま
た、１フレーム当りのリフレッシュ対象の分割区画数
も、上記実施形態のものに限定されないことは勿論であ
る。なお、リフレッシュ単位がフレームの場合にも本発
明を適用できるものである。特許請求の範囲の範囲の表
現からは、このリフレッシュ単位がフレームの場合を除
外しているように読めるが、特許請求の範囲の表現にこ
のリフレッシュ単位がフレームの場合を含むものとす
る。

【００９０】また、上記各実施形態においては、リフレ
ッシュ対象数を固定したもの（第２の実施形態の場合に
も原則的には固定されている）を示したが、各フレーム
で、リフレッシュ対象数を変化させるようにしても良
い。例えば、第１の実施形態の変形として、位置固定差
分データ分散値（ＳＡＤ）が閾値を越える分割区画を全
てリフレッシュ対象とするようにしても良い。また、第
２の実施形態の変形として、位置固定差分データ分散値
（ＳＡＤ）が最大の分割区画と、その周囲の分割区画の
うち、位置固定差分データ分散値（ＳＡＤ）が閾値を越
える分割区画とをリフレッシュ対象とするようにしても
良い。

【００９１】さらに、上記第１の実施形態におけるリフ
レッシュ方法の技術的思想を、従来のリフレッシュ方法
の技術的思想と組み合わせるようにしても良く、また、
第２の実施形態におけるリフレッシュ方法の技術的思想
と組み合わせるようにしても良い。同様に、上記第２の
実施形態におけるリフレッシュ方法の技術的思想を、従
来のリフレッシュ方法の技術的思想と組み合わせるよう
にしても良い。このような組み合わせの一例を図１５に
示している。図１５には、第１及び第２の実施形態にお
けるリフレッシュ方法の技術的思想と、従来のリフレッ
シュ方法の技術的思想との３種類を組み合わせた場合に
おける、リフレッシュ対象の分割区画（マクロブロッ
ク）の変化を示している。

【００９２】さらにまた、上記各実施形態においては、
リフレッシュ対象か否かを決定する値である位置固定差
分データ分散値（ＳＡＤ）を、符号化しようとするフレ
ームの直前２フレームのデータから生成するものを示し
たが、符号化しようとするフレームと直前フレームとの
２フレームから形成するようにしても良く、さらには、
３フレーム以上の情報から形成するようにしても良い。
また、位置固定差分データ分散値（ＳＡＤ）も、統計学
上の分散値だけに限られないことは上述の通りであり、
その値も差分絶対値の総和に限定されるものではない。
例えば、原フレームのマクロブロックのデータ平均値
と、前フレームの同一位置のマクロブロックのデータ平
均値との差分絶対値等であっても良い。要は、復号時に
データ誤りやデータ欠落のために過去の復号信号を用い
た場合に、画質を著しく劣化させるマクロブロックを、
他のマクロブロックから区別できる指標値であれば良
く、値が大きいほどリフレッシュ対象とし難い指標値で
あっても良い。

【００９３】また、上記第２の実施形態においては、位
置固定差分データ分散値（ＳＡＤ）が最大の分割区画
と、その周囲の８個の分割区画とをリフレッシュ対象と
するものを示したが、周囲の分割区画はこれより多くて
も少なくても良い。例えば、周囲の分割区画を１重だけ
でなく２重に選ぶようしても良く、逆に周囲の分割区画
の内、所定方向（例えば垂直方向や水平方向）のものだ
けをリフレッシュ対象とするようにしても良い。図１６
は、このような一例として、水平方向に隣接する周囲の
分割区画だけをリフレッシュ対象とした場合を示してい
る。

【００９４】さらに、上記各実施形態では、フレーム毎
にリフレッシュ対象を定めるものを示したが、数フレー
ム毎にリフレッシュ対象を定めるようにしても良い。

【００９５】さらにまた、上記各実施形態においては、
リフレッシュ対象でないことを確認してから、そのマク
ロブロックをどちらの符号化モードで符号化するかを決
定するものを示したが、逆に、マクロブロックをどちら
の符号化モードで符号化するかを先に決定し、ＩＮＴＥ
Ｒモードで符号化することに決定されたマクロブロック
についてリフレッシュ対象か確認するようにしても良
い。また、この変形例の延長上の変形例としては、ＩＮ
ＴＥＲモードで符号化することに決定されたマクロブロ
ックの中からいくつかを、位置固定差分データ分散値
（ＳＡＤ）に基いて、リフレッシュ対象に決定すること
を挙げることができる。

【００９６】また、上記各実施形態は、ＭＰＥＧ２に準
拠した画像符号化装置及び方法を意識したものである
が、本発明は、これに限定されず、フレーム間の相関性
を利用した符号化方式（特許請求の範囲では時間相関利
用符号化方式と記述している）と、過去のフレームの情
報を利用することなく符号化する符号化方式（特許請求
の範囲では同一画像内符号化方式と記述している）とを
併用している画像符号化装置及び方法に広く適用するこ
とができる。

【００９７】この場合において、時間相関利用符号化方
式も同一画像内符号化方式も、上記実施形態のものに限
定されるものではない。例えば、時間相関利用符号化方
式として、１フレームだけでなく過去の数フレームの情
報から予測信号を形成する符号化方式や、フレーム相関
ではなくフィールド相関（なお、特許請求の範囲におけ
るフレームの用語は、一般的な定義と異なるが、場合に
よってはフィールド概念を含むものとする）を利用した
符号化方式等を適用しても良く、同一画像内符号化方式
として、ライン相関を利用した符号化方式等を適用して
も良い。従って、画像フレームの分割方法や、動きベク
トルの探索範囲等が上記実施形態のものに限定されない
ことは勿論である。

【００９８】さらに、リフレッシュ動作時以外では、常
に時間相関利用符号化方式で符号化することを原則とし
ている画像符号化装置や方法にも本発明を適用すること
ができる。

【００９９】

【発明の効果】以上のように、本発明の画像符号化装置
及び方法によれば、各分割区画について、その画像内容
の時間変化特徴量を計算し、この得られた各分割区画毎
の時間変化特徴量に基いて、リフレッシュ対象の分割区
画を決定するようにしたので、復号できない場合に画質
劣化が著しい分割区画について、復号側への伝送でデー
タ誤りやデータ欠落が生じても、リフレッシュにより画
質劣化を迅速に回復でき、また、リフレッシュのために
符号量を徒に増加させることもない。

【図面の簡単な説明】

【図１】第１の実施形態の装置構成を示すブロック図で
ある。

【図２】リフレッシュ動作の必要性の説明図である。

【図３】従来のリフレッシュ方法（１）の説明図であ
る。

【図４】従来のリフレッシュ方法（２）の説明図であ
る。

【図５】第１の実施形態の情報源符号器の詳細構成例を
示すブロック図である。

【図６】第１の実施形態のリフレッシュ処理を示すフロ
ーチャートである。

【図７】第１の実施形態でのリフレッシュ対象の変化例
を示す説明図である。

【図８】第１の実施形態の効果の説明図である。

【図９】第２の実施形態の装置構成を示すブロック図で
ある。

【図１０】第２の実施形態のリフレッシュ処理を示すフ
ローチャートである。

【図１１】第２の実施形態の周囲マクロブロックの認識
方法（１）の説明図である。

【図１２】第２の実施形態の周囲マクロブロックの認識
方法（２）の説明図である。

【図１３】第２の実施形態でのリフレッシュ対象の変化
例を示す説明図である。

【図１４】第２の実施形態の効果の説明図である。

【図１５】他の実施形態の説明図（１）である。

【図１６】他の実施形態の説明図（２）である。

【符号の説明】

１００、１００Ａ…画像符号化装置、１０１…情報源符
号器、１０５…上位ｎ選択器、１０６…一致判定器、１
０７…符号化モード判定器、１１０…ＳＡＤソーティン
グ部、１１１…周囲画像位置選択器。

Claims (10)

【特許請求の範囲】
1. 【請求項１】 １フレームを複数に分割し、分割区画毎
   に、時間相関利用符号化方式又は同一画像内符号化方式
   のいずれかで符号化する画像符号化方法であって、各フ
   レーム又は数フレーム毎に、いくつかの分割区画をリフ
   レッシュ対象の分割区画として決定し、リフレッシュ対
   象と決定された分割区画は同一画像内符号化方式で符号
   化する画像符号化方法において、 各分割区画について、その画像内容の時間変化特徴量を
   計算し、 得られた各分割区画毎の時間変化特徴量に基いて、リフ
   レッシュ対象の分割区画を決定することを特徴とする画
   像符号化方法。
2. 【請求項２】 上記時間変化特徴量が、これから符号化
   しようとするフレームと符号化が終了した直前フレーム
   の２フレーム間の画素データの差分絶対値、若しくは、
   これから符号化しようとするフレームの直前２フレーム
   間の画素データの差分絶対値を、その分割区画の全ての
   画素位置について累積した値であることを特徴とする請
   求項１に記載の画像符号化方法。
3. 【請求項３】 上記時間変化特徴量が表す時間変化度合
   いが大きい方の所定個数の分割区画をリフレッシュ対象
   の分割区画として決定することを特徴とする請求項１又
   は２に記載の画像符号化方法。
4. 【請求項４】 上記時間変化特徴量が表す時間変化度合
   いが所定閾値より大きい全ての分割区画をリフレッシュ
   対象の分割区画として決定することを特徴とする請求項
   １又は２に記載の画像符号化方法。
5. 【請求項５】 上記時間変化特徴量が表す時間変化度合
   いが大きい方の１又は２以上の分割区画と、その分割区
   画の周囲の分割区画とをリフレッシュ対象の分割区画と
   して決定することを特徴とする請求項１又は２に記載の
   画像符号化方法。
6. 【請求項６】 １フレームを複数に分割し、分割区画毎
   に、時間相関利用符号化方式又は同一画像内符号化方式
   のいずれかで画像符号化手段が符号化する画像符号化装
   置であって、リフレッシュ対象決定手段が、各フレーム
   又は数フレーム毎に、いくつかの分割区画をリフレッシ
   ュ対象の分割区画として決定し、上記画像符号化手段が
   リフレッシュ対象と決定された分割区画を同一画像内符
   号化方式で符号化する画像符号化装置において、 上記リフレッシュ対象決定手段が、 各分割区画について、その画像内容の時間変化特徴量を
   計算する特徴量計算部と、 得られた各分割区画毎の時間変化特徴量に基いて、リフ
   レッシュ対象の分割区画を決定するリフレッシュ対象決
   定部とでなることを特徴とする画像符号化装置。
7. 【請求項７】 上記特徴量計算部が求める時間変化特徴
   量が、これから符号化しようとするフレームと符号化が
   終了した直前フレームの２フレーム間の画素データの差
   分絶対値、若しくは、これから符号化しようとするフレ
   ームの直前２フレーム間の画素データの差分絶対値を、
   その分割区画の全ての画素位置について累積した値であ
   ることを特徴とする請求項６に記載の画像符号化装置。
8. 【請求項８】 上記リフレッシュ対象決定部は、上記時
   間変化特徴量が表す時間変化度合いが大きい方の所定個
   数の分割区画をリフレッシュ対象の分割区画として決定
   することを特徴とする請求項６又は７に記載の画像符号
   化装置。
9. 【請求項９】 上記リフレッシュ対象決定部は、時間変
   化特徴量が表す時間変化度合いが所定閾値より大きい全
   ての分割区画をリフレッシュ対象の分割区画として決定
   することを特徴とする請求項６又は７に記載の画像符号
   化装置。
10. 【請求項１０】 上記リフレッシュ対象決定部は、上記
    時間変化特徴量が表す時間変化度合いが大きい方の１又
    は２以上の分割区画と、その分割区画の周囲の分割区画
    とをリフレッシュ対象の分割区画として決定することを
    特徴とする請求項６又は７に記載の画像符号化装置。