JP4523493B2

JP4523493B2 - 階層的動画像符号化装置、階層的動画像復号装置、およびその方法

Info

Publication number: JP4523493B2
Application number: JP2005171458A
Authority: JP
Inventors: 和夫杉本; 悦久山田; 嘉明加藤; 光太郎浅井
Original assignee: Mitsubishi Electric Corp
Current assignee: Mitsubishi Electric Corp
Priority date: 2005-06-10
Filing date: 2005-06-10
Publication date: 2010-08-11
Anticipated expiration: 2025-06-10
Also published as: JP2006345433A

Description

この発明は、デジタル化された入力画像信号を処理し、圧縮されたデータ系列を出力する階層的画像符号化装置、階層的動画像復号装置、およびその方法に関するものである。

プラズマＴＶや液晶ＴＶなどの低価格化・高品質化に伴い、家庭での視聴用テレビだけでなく、ビルの壁面や店頭でのディスプレイなど様々な分野においてＨＤＴＶ（１９２０×１０８０）解像度に対応したものが急速に普及しつつある。一方、屋外等で使用される携帯電話やＰＤＡなどのモバイル端末には、持ち運びの利便性（端末サイズ）や消費電力等の点から、ＱＶＧＡ（３２０×２４０画素）解像度程度のものが多く普及している。また、ラップトップＰＣではＸＧＡ（１０２４×７６８画素）解像度のものが一般的であり、ＤＶＤなどの映像を再生する、という点ではこれまで４０年以上にわたって放送サービスが行われてきた標準ＴＶ方式であるＳＤＴＶ（７２０×４８０画素）解像度相当が使われている。このように、現在利用・普及が進んでいるディスプレイのサイズについては利用環境・目的に応じて多様化している。

映像コンテンツを蓄積・伝送するためには非常に多くの情報量を必要とするため、通常は情報量の圧縮、すなわち符号化処理が行われる。映像信号の符号化方式として様々な解像度に対して高い圧縮率で符号化可能な国際標準方式として、ISO/IEC 14496-10（Advanced Video Coding）|ITU-T H.264（以後、AVC/H.264と呼ぶ）が知られている。

14496-10（Advanced Video Coding）|ITU-T H.264

しかし、従来の動画像符号化方式においては、１つの圧縮データから様々な解像度の映像コンテンツを再生することができないため、同じ内容の映像コンテンツであっても解像度が異なる場合には、それぞれの解像度に対応した映像コンテンツを個別の圧縮データとして生成する必要があった。そのため、解像度別に映像コンテンツを管理せねばならず、不便であった。

この発明は、上述した点に鑑みてなされたもので、様々な解像度に対応した映像コンテンツを１つの圧縮データから容易に生成できる階層的動画像符号化装置およびその方法を得ることを目的とする。

また、前記階層的動画像符号化装置によって生成された圧縮データから所望の解像度の映像コンテンツを再生する階層的動画像復号装置およびその方法を得ることを目的とする。

この発明に係る階層的動画像符号化装置及び方法は、入力された画像データを所定のサイズの領域に分解し、それぞれの画像領域に対して処理を行うものであって、前記画像領域をさらに小さい階層化ブロックに分割し、それぞれの階層化ブロックに対して少なくとも１つの直流成分係数と少なくとも１つの交流成分係数に分解し、前記画像領域内のそれぞれの成分ごとに成分係数を成分ブロックとして出力する階層化変換を行うブロック階層化手段・ステップと、前記画像領域内の各成分ブロックを直交変換し変換係数を出力する変換手段・ステップと、前記変換係数をエントロピー符号化し、符号化データを出力するエントロピー符号化手段・ステップとを備え、変換手段・ステップは、直流成分を含む成分ブロックに対して第一の直交変換を行い直流成分変換係数を出力する直流成分変換部と、その他の成分ブロックに対して第二の直交変換を行い交流成分変換係数を出力する交流成分変換部とを備えることを特徴とする。

また、この発明に係る階層的動画像復号装置及び方法は、入力された符号化データをエントロピー復号し、変換係数を出力するエントロピー復号手段・ステップと、画像領域内の各成分ブロックの変換係数を直交逆変換し逆変換成分データを生成する逆変換手段・ステップと、前記各成分ブロックの前記逆変換成分データをそれぞれ復号対象となる画像領域における各階層化ブロックに再配置し再生データを出力する逆階層化手段・ステップとを備え、逆変換手段・ステップは、直流成分を含む成分ブロックに対して第一の直交逆変換を行う直流成分逆変換部と、その他の成分ブロックに対して第二の直交逆変換を行う交流成分逆変換部とを備えることを特徴とする。

この発明によれば、符号化データは直流成分と交流成分に分解されているため、直流成分のみを復号することにより低い解像度の再生画像を得ることができると同時に、交流成分も含めて復号すれば、高い解像度の再生画像を得ることができるため、１つの符号化データから複数種類の解像度の再生画像を得ることができ、異なる解像度であっても同じ内容のコンテンツであれば一元的に管理することができる。

実施の形態１．
以下、図面を参照して、この発明の実施の形態１における階層的動画像符号化装置について詳細に説明する。
図１は、この発明の実施の形態１に係る階層的動画像符号化装置１００の構成を示すブロック図である。
図１に示す階層的動画像符号化装置１００は、入力映像を階層的動画像符号化し、その結果得られる符号化データを出力する装置であり、画像入力部１０１と、階層化部１０２と、差分データ生成部１０３と、変換部１０４と、エントロピー符号化部１０５と、逆変換部１０６と、成分加算部１０７と、成分復号データメモリ１０８と、成分予測部１０９から構成される。

画像入力部１０１は、外部より入力される映像信号のフレーム内を分割してなるマクロブロック単位に所定の順次マクロブロック画像として出力する。ひとつの例として、ここでは、マクロブロック画像は、輝度信号に関しては１６×１６画素、色差信号に関しては８×８画素のサイズの領域であるとして説明する。もちろん、これらのサイズは説明を容易にするために用いているのであり、その他のサイズであっても、あるいは、マクロブロックごとに異なるサイズであっても同様の効果を得ることができる。

階層化部１０２は、入力されたマクロブロックをさらに小さいサイズのマイクロブロックに分割し、それぞれのマイクロブロックに対して直流成分と交流成分を分離する階層化変換を行う。ここでのマイクロブロックのサイズとして、ここでは、一例として、２×２画素のサイズを用いて説明する。もちろん、このマイクロブロックのサイズについても、例えば４×４画素、８×８画素など、他のサイズでも同様の効果を得ることができる。

直流成分と交流成分を分離する変換としては、例えばDiscrete Cosine Transform（ＤＣＴ）やＨａａｒ変換などの直交変換がある。この発明は、直流成分と交流成分に分解できる変換であればいかなる変換でも有効であるが、ここでは、その１例として、式（１）に示す２行２列の変換を用いて説明する。

式（１）において、ｘ_０〜ｘ_３はマイクロブロックの４つの画素値、ｆ_０〜ｆ_３は直流成分と交流成分の分解後の成分で、ｆ_０は直流成分、ｆ_１〜ｆ_３は交流成分である。

すなわち、階層化部１０２は、図２に示すように、１６×１６画素サイズの輝度値信号のマクロブロックを２×２画素サイズのマイクロブロックに分割し、それぞれのマイクロブロックに対して式（１）を適用し、得られた成分ごとにそれぞれ８×８画素サイズの成分ブロックを形成し、出力する。同様に、８×８画素サイズの色差信号のマクロブロックを２×２画素サイズのマイクロブロックに分割し、それぞれのマイクロブロックに対して式（１）を適用し、得られた成分ごとにそれぞれ４×４画素サイズの成分ブロックを形成し、出力する。なお、これらの成分ブロックのうち、直流成分で構成される成分ブロックを直流成分ブロック、それ以外の成分ブロックを交流成分ブロックと呼ぶこととする。

差分データ生成部１０３は、後述する成分予測部１０９より出力される前記各成分ブロックの各成分係数に対する予測値と各成分係数の差分演算を行い、差分データを出力する。

変換部１０４は、前記差分データ生成部１０３より出力される差分データに対してたとえばＤＣＴなどの変換を行う。ここでは、必ずしもＤＣＴを行わなければならないわけではなく、例えばMPEG-４ AVCで採用されている整数変換や、Wavelet変換など、あらゆる変換を用いてもよい。また、変換のサイズは、成分ブロックサイズ以下であれば８×８画素サイズに対し行っても、８×８画素サイズをさらに分解し、例えば４つの４×４画素サイズに対して行ってもよい。例えば、ここでは、図３に示すように、４×４画素サイズに対して行うこととする。また、変換部１０４においては、変換係数に対して量子化処理を行い、それを最終的な変換係数としてもよい。量子化を行うことによって、より圧縮率を高めることができる。

なお、図４に示すように、変換部１０４は、直流成分ブロックを変換し直流成分変換係数を出力する直流成分変換部１０４１と、交流成分ブロックを変換し交流成分変換係数を出力する交流成分変換部１０４２とを備えるよう構成することもできる。この際、直流成分変換部１０４１では、量子化処理で高周波成分係数が低周波成分係数に対してより粗い量子化を行うよう構成すれば、画質を保ったままより高い圧縮率で符号化できるという効果が得られる。また、交流成分変換部１０４２に対しては、直流成分変換部に比べてより粗い量子化を行うことにより、より高い圧縮率で符号化できるという効果が得られる。このようにして変換された直流成分係数および交流成分係数が変換係数として出力される。

エントロピー符号化部１０５は、前記変換部１０４より出力される変換係数をエントロピー符号化し、符号化データとして出力する。エントロピー符号化としては、ハフマンテーブルを用いたハフマン符号化や、算術符号化などいかなる手段であってもよい。

逆変換部１０６は、前記変換係数を逆変換し逆変換成分データを出力する。逆変換は、変換部１０４における変換の逆変換としてなされるものであり、変換部１０４の構成に対応した構成とする。変換部１０４において、直流成分変換部１０４１と交流成分変換部１０４２を持つよう構成した場合には、図５に示すように、逆変換部１０６も、直流成分変換係数を逆変換し逆変換直流成分データを出力する直流成分逆変換部１０６１と、交流成分変換係数を逆変換し逆変換交流成分データを出力する交流成分逆変換部１０６２とを備えるよう構成する。こうして得られた逆変換成分データが出力される。

成分加算部１０７は、前記逆変換部１０６より出力される逆変換成分データと後述する成分予測部１０９より出力される前記各成分ブロックの各成分係数に対する予測値を加算し、成分復号データとして出力する。

成分復号データメモリ１０８は、前記成分加算部１０７より出力される成分復号データを記憶するメモリである。

成分予測部１０９は、前記成分復号データメモリ１０８に記憶されたデータを利用して、前記成分ブロックの各成分係数に対する予測値を生成し出力する。予測手段としては、例えばMPEG-４ AVCに採用されているように４×４画素ブロック単位に符号化対象となるブロックの周囲ブロックにおける成分復号データから係数値を、図６に示すように、伸張して得られる値を予測値とすることができる。この際、予測手段が複数ある場合には予測手段を特定する予測モードを明示的にエントロピー符号化して出力する。

次に、階層的動画像符号化装置１００の動作について説明する。
図７は、階層的動画像符号化装置１００の動作を示すフローチャートである。
まず、画像入力部１０１は、外部より映像信号を入力し、映像信号のフレーム内を分割してなるマクロブロック単位に所定の順次マクロブロック画像として出力する（ステップＳ１０）。

次に、階層化部１０２により、入力されたマクロブロックはさらに小さいサイズのマイクロブロックに分割され、それぞれのマイクロブロックに対して直流成分と交流成分を分離する階層化変換が行われ、成分ブロックが出力される（ステップＳ１１）。

差分データ生成部１０３において、前記成分ブロックと前記各成分ブロックの各成分係数に対する予測値との差分演算が行われ、差分データが出力される（ステップＳ１２）。

前記差分データは、変換部１０４において変換され、変換係数が出力される（ステップＳ１３）。

前記変換係数は、エントロピー符号化部１０５においてエントロピー符号化され、符号化データが出力される（ステップＳ１４）。

一方、前記変換係数は、逆変換部１０６において逆変換され逆変換成分データが出力される（ステップＳ１５）。

続いて、前記逆変換成分データは、成分加算部１０７において、前記各成分ブロックの各成分係数に対する予測値が加算され、成分復号データとして出力される（ステップＳ１６）。

前記成分復号データは、成分復号データメモリ１０８に記憶される（ステップＳ１７）。

成分予測部１０９は、前記成分復号データメモリ１０８に記憶された前記成分復号データを用いて前記成分ブロックの各成分係数に対する予測値を生成し出力する（ステップＳ１８）。

これらの処理は、画面内のすべてのマクロブロックの符号化が終了するまで繰り返され（ステップＳ１９）、１枚の画像データの符号化が完了する。

上述したように、実施の形態１によれば、入力された画像データを所定のサイズの領域に分解し、それぞれの画像領域をさらに小さい階層化ブロックに分割し、それぞれの階層化ブロックに対して少なくとも１つの直流成分係数と少なくとも１つの交流成分係数に分解し、前記画像領域内のそれぞれの成分ごとに成分係数を成分ブロックとして出力する階層化変換を行い、前記画像領域内の各成分ブロックを変換た変換係数をエントロピー符号化し、符号化データを出力することにより、符号化データの階層化を実現することができ、符号化データは直流成分と交流成分に分解されているため、直流成分のみを復号することにより低い解像度の再生画像を得ることができると同時に、交流成分も含めて復号すれば高い解像度の再生画像を得ることができるため、１つの符号化データから複数種類の解像度の再生を可能にし、異なる解像度であっても同じ内容のコンテンツであれば一元的に管理することができる。

実施の形態２．
次に、図８は、この発明の実施の形態２に係る階層的動画像復号装置２００の構成を示すブロック図である。
図８に示す本階層的動画像復号装置２００は、符号化データを復号し、その結果得られる再生画像を出力する装置であり、エントロピー復号部２０１と、逆変換部２０２と、成分加算部２０３と、逆階層化部２０４と、成分復号データメモリ２０５と、成分予測部２０６から構成される。

エントロピー復号部２０１は、符号化データをエントロピー復号し、変換係数を出力する。エントロピー復号としては、前記階層的動画像符号化装置１００におけるエントロピー符号化部１０５で用いた符号化手段に対応する復号手段を適用する。

逆変換部２０２は、前記変換係数を逆変換し逆変換成分データを出力する。逆変換は、前記階層的動画像符号化装置の変換部１０４における変換の逆変換としてなされるものであり、変換部１０４の構成に対応した構成とする。

変換部１０４において、直流成分変換部１０４１と交流成分変換部１０４２を持つよう構成した場合には、図９に示すように、逆変換部２０２も、直流成分変換係数を逆変換し逆変換直流成分データを出力する直流成分逆変換部２０２１と、交流成分変換係数を逆変換し逆変換交流成分データを出力する交流成分逆変換部２０２２とを備えるよう構成する。こうして得られた逆変換成分データが出力される。

成分加算部２０３は、前記逆変換部２０２より出力される逆変換成分データと後述する成分予測部２０６より出力される前記各成分ブロックの各成分係数に対する予測値を加算し、成分復号データとして出力する。

逆階層化部２０４は、前記成分加算部２０３より出力される成分復号データに対して前記階層的動画像符号化装置１００の前記階層化部１０２における処理の逆処理を行う。すなわち、直流成分ブロックおよび交流成分ブロックから各マイクロブロックを再構成し、各マイクロブロックに逆階層化変換を施してマクロブロックデータを得る。例えば前記階層的動画像符号化装置１００において、式（１）による階層化変換が行われる場合には、式（２）に示す２行２列の逆変換を行う。

式（２）において、ｆ_０〜ｆ_３は直流成分と交流成分の成分係数で、ｆ_０は直流成分、ｆ_１〜ｆ_３は交流成分、y_０〜y_３はマイクロブロックの４つの再生された画素値である。

このようにして得られる再生された画素値が再生画像データとして出力される。

成分復号データメモリ２０５は、前記成分加算部２０３より出力される成分復号データを記憶する。

成分予測部２０６は、前記成分復号データメモリ２０５に記憶されたデータを利用して、前記成分ブロックの各成分係数に対する予測値を生成し出力する。予測手段としては、前記階層的動画像符号化装置１００の成分予測部１０９と同一の手段を用いる。

次に、階層的動画像復号装置２００の動作について説明する。
図１０は、階層的動画像復号装置２００の動作を示すフローチャートである。
まず、外部より入力される符号化データがエントロピー復号部２０１に入力されると、エントロピー復号部２０１は、前記符号化データをエントロピー復号し、変換係数を出力する（ステップＳ２０）。

続いて、前記変換係数が逆変換部２０２に入力され、逆変換部２０２は、前記変換係数を逆変換し逆変換成分データを出力する（ステップＳ２１）。

次に、成分加算部２０３は、前記逆変換部２０２より出力される逆変換成分データと後述する成分予測部２０６より出力される前記各成分ブロックの各成分係数に対する予測値とを加算し、成分復号データとして出力する（ステップＳ２２）。

前記成分復号データは逆階層化部２０４に入力され、逆階層化部２０４は、前記成分加算部２０３より出力される成分復号データに対して前記階層的動画像符号化装置１００の前記階層化部１０２における処理の逆処理を行い、再生画像データを出力する（ステップＳ２３）。

同時に、前記成分復号データは成分復号データメモリ２０５に記憶される（ステップＳ２４）。

続いて、成分予測部２０６は、前記成分復号データメモリ２０５に記憶されたデータを利用して、前記成分ブロックの各成分係数に対する予測値を生成し出力する（ステップＳ２５）。

これらの処理は、画面内のすべてのマクロブロックの復号が終了するまで繰り返され（ステップＳ２６）、１枚の画像の復号が完了する。

従って、実施の形態２によれば、符号化データをエントロピー復号し、変換係数を逆変換した逆変換成分データと各成分ブロックの各成分係数に対する予測値とを加算した成分復号データを記憶すると共に、成分復号データに対して符号化装置の階層化部における処理の逆処理を行って再生画像データを出力し、記憶されたデータを利用して、前記成分ブロックの各成分係数に対する予測値を生成するようにして画像の復号を行うので、１つの符号化データから複数種類の解像度の再生を可能にし、異なる解像度であっても同じ内容のコンテンツであれば一元的に管理することができ、階層的動画像符号化装置によって生成された圧縮データから所望の解像度の映像コンテンツを再生できる。

実施の形態３．
なお、図１１に示す階層的動画像復号装置３００のように、階層的動画像復号装置２００から逆階層化部２０４を除いて復号装置を構成し、符号化データのうち、直流成分変換係数をエントロピー符号化した符号化データのみを用いて階層的動画像復号装置２００と同様の処理を行い、直流成分復号データを再生画像データとして出力することにより、低い解像度の画像のみを再生することが可能となる。

この発明の実施の形態１に係る階層的動画像符号化装置の構成を示すブロック図である。この発明の実施の形態１に係る成分ブロックの構成を示した説明図である。この発明の実施の形態１に係る変換ブロックの構成を示した説明図である。この発明の実施の形態１に係る変換部１０４の構成を示した構成図である。この発明の実施の形態１に係る逆変換部１０６の構成を示すブロック図である。この発明の実施の形態１に係る成分予測部１０９における予測方法の一例を示した説明図である。この発明の実施の形態１に係る階層的動画像符号化装置１００の動作を示すフローチャートである。この発明の実施の形態２に係る階層的動画像復号装置２００の構成を示すブロック図である。この発明の実施の形態２に係る逆変換部２０２の構成を示すブロック図である。この発明の実施の形態２に係る階層的動画像復号装置２００の動作を示すフローチャートである。この発明の実施の形態３に係る階層的動画像復号装置３００を示すブロック図である。

符号の説明

１００階層的動画像符号化装置、１０１画像入力部、１０２階層化部、１０３差分データ生成部、１０４変換部、１０５エントロピー符号化部、１０６逆変換部、１０７成分加算部、１０８成分復号データメモリ、１０９成分予測部、２００，３００階層的動画像復号装置、２０１エントロピー復号部、２０２逆変換部、２０３成分加算部、２０４逆階層化部、２０５成分復号データメモリ、２０６成分予測部、１０４１直流成分変換部、１０４２交流成分変換部、１０６１直流成分逆変換部、１０６２交流成分逆変換部、２０２１直流成分逆変換部、２０２２交流成分逆変換部。

Claims

入力された画像データを所定のサイズの領域に分解し、それぞれの画像領域に対して処理を行う動画像符号化装置であって、
前記画像領域をさらに小さい階層化ブロックに分割し、それぞれの階層化ブロックに対して少なくとも１つの直流成分係数と少なくとも１つの交流成分係数に分解し、前記画像領域内のそれぞれの成分ごとに成分係数を成分ブロックとして出力する階層化変換を行うブロック階層化手段と、
前記画像領域内の各成分ブロックを直交変換し変換係数を出力する変換手段と、
前記変換係数をエントロピー符号化し、符号化データを出力するエントロピー符号化手段と
を備え、
前記変換手段は、直流成分を含む成分ブロックに対して第一の直交変換を行い直流成分変換係数を出力する直流成分変換部と、その他の成分ブロックに対して第二の直交変換を行い交流成分変換係数を出力する交流成分変換部とを備えることを特徴とする階層的動画像符号化装置。
請求項１記載の階層的動画像符号化装置において、
前記変換係数を直交逆変換し逆変換成分データを生成する逆変換手段と、
前記逆変換成分データと成分予測データを加算し成分復号データを生成する成分加算手段と、
前記成分復号データを記憶する成分復号データメモリと、
前記成分復号データメモリに記憶された前記成分復号データを用いて成分予測データを生成する成分予測手段と、
前記成分予測データと前記成分係数との差分データを生成する差分画像生成手段と
をさらに備え、
前記変換手段は、前記差分画像生成手段からの差分データを入力して画像領域内の各成分ブロックを直交変換し変換係数を出力する
ことを特徴とする階層的動画像符号化装置。
入力された符号化データをエントロピー復号し、変換係数を出力するエントロピー復号手段と、
画像領域内の各成分ブロックの変換係数を直交逆変換し逆変換成分データを生成する逆変換手段と、
前記各成分ブロックの前記逆変換成分データをそれぞれ復号対象となる画像領域における各階層化ブロックに再配置し再生データを出力する逆階層化手段と
を備え、
前記逆変換手段は、直流成分を含む成分ブロックに対して第一の直交逆変換を行う直流成分逆変換部と、その他の成分ブロックに対して第二の直交逆変換を行う交流成分逆変換部とを備えることを特徴とする階層的動画像復号装置。
請求項３記載の階層的動画像復号装置において、
前記逆変換成分データと成分予測データを加算し成分復号データを生成する成分加算手段と、
前記成分復号データを記憶する成分復号データメモリと、
前記成分復号データメモリに記憶された前記成分復号データを用いて成分予測データを生成する成分予測手段と
をさらに備え、
前記逆階層化手段は、前記成分加算手段からの成分復号データを入力とし再生データを出力する
ことを特徴とする階層的動画像復号装置。
入力された画像データを所定のサイズの領域に分解し、それぞれの画像領域に対して処理を行う動画像符号化方法であって、
前記画像領域をさらに小さい階層化ブロックに分割し、それぞれの階層化ブロックに対して少なくとも１つの直流成分係数と少なくとも１つの交流成分係数に分解し、前記画像領域内のそれぞれの成分ごとに成分係数を成分ブロックとして出力する階層化変換を行うブロック階層化ステップと、
前記画像領域内の各成分ブロックを直交変換し変換係数を出力する変換ステップと、
前記変換係数をエントロピー符号化し、符号化データを出力するエントロピー符号化ステップと
を備え、
前記変換ステップは、直流成分を含む成分ブロックに対して第一の直交変換を行い直流成分変換係数を出力する直流成分変換ステップと、その他の成分ブロックに対して第二の直交変換を行い交流成分変換係数を出力する交流成分変換ステップとを備えることを特徴とする階層的動画像符号化方法。
請求項５記載の階層的動画像符号化方法において、
前記変換係数を直交逆変換し逆変換成分データを生成する逆変換ステップと、
前記逆変換成分データと成分予測データを加算し成分復号データを生成する成分加算ステップと、
前記成分復号データを成分復号データメモリに記憶するステップと、
前記成分復号データメモリに記憶された前記成分復号データを用いて成分予測データを生成する成分予測ステップと、
前記成分予測データと前記成分係数との差分値を差分データとして生成する差分画像生成ステップと
をさらに備え、
前記変換ステップは、前記差分データを入力して画像領域内の各成分ブロックを直交変換し変換係数を出力する
ことを特徴とする階層的動画像符号化方法。
入力された符号化データをエントロピー復号し、変換係数を出力するエントロピー復号ステップと、
画像領域内の各成分ブロックの変換係数を直交逆変換し逆変換成分データを生成する逆変換ステップと、
前記各成分ブロックの前記逆変換成分データをそれぞれ復号対象となる画像領域における各階層化ブロックに再配置し再生データを出力する逆階層化ステップと
を備え、
前記逆変換ステップは、直流成分を含む成分ブロックに対して第一の直交逆変換を行う直流成分逆変換ステップと、その他の成分ブロックに対して第二の直交逆変換を行う交流成分逆変換ステップとを備えることを特徴とする階層的動画像復号方法。
請求項７記載の階層的動画像復号方法において、
前記逆変換成分データと成分予測データを加算し成分復号データを生成する成分加算ステップと、
前記成分復号データを成分復号データメモリに記憶するステップと、
前記成分復号データメモリに記憶された前記成分復号データを用いて成分予測データを生成する成分予測ステップと
をさらに備え、
前記逆階層化ステップは、前記成分復号データを入力とし再生データを出力する
ことを特徴とする階層的動画像復号方法。