JP4427553B2 - 動画像復号化装置 - Google Patents

Description

本発明は、動画像復号化装置に関し、より詳細には、動画像符号化装置により適応的動き補償フレーム間予測方式を用いて符号化された画像フレームを復号化する動画像復号化装置に関するものである。

従来では ＩＳＤＮ(Integrated Services Digital Network)網などの高速ディジタル網において、テレビ電話やテレビ会議システムなどの動画像通信が実現されていた。近年ＰＨＳ(Personal Handyphone System)に代表される無線伝送網の進展、およびＰＳＴＮ(Public Switching Telephone Network)網におけるデータ変調・復調技術の進展、さらに画像圧縮技術の進展に伴い、より低ビットレート網における動画像通信への要求が高まっている。

一般にテレビ電話やテレビ会議システムのように、動画像情報を伝送する場合においては、動画像の情報量が膨大なのに対して、伝送に用いる回線の回線速度やコストの点から、伝送する動画像の情報量を圧縮符号化し、情報量を少なくして伝送することが必要となってくる。

動画像情報を圧縮する符号化方式としては、Ｈ．２６１、ＭＰＥＧ−１(Moving Picture Coding Expert Group)、ＭＰＥＧ−２などがすでに国際標準化されている。さらに６４ｋｂｐｓ以下の超低ビットレートでの符号化方式としてＭＰＥＧ−４の標準化活動が進められている。

現在標準化されている動画像映像符号化方式では、フレーム間予測符号化およびフレーム内符号化を組み合わせて行うハイブリッド映像符号化方式を採用している。フレーム間予測符号化は、動画像を符号化する際に参照画像から予測画像を生成し、現画像との差分を符号化することで符号量を減少させ伝送することで伝送路の効率的な利用を図るものである。

従来の動画像符号化装置の全体の動作を説明する。従来の動画像符号化装置の全体の構成例を図３に示す。ここで、動き補償フレーム間予測符号化を行っている場合の定常状態としてフレームメモリ部１６に、予測画像を生成する際に使用される参照画像が記憶されているとする。入力画像が動画像符号化装置に入力され、減算部１１および動き補償フレーム間予測部１７に入力される。

動き補償フレーム間予測部１７では、フレームメモリ部１６に記憶された参照画像と入力画像から動き予測を行い、減算部１１に対して予測画像を出力する。また、予測の際に得られた動きベクトルなどのサイド情報を符号化し、符号化サイド情報を出力する。

減算部１１は、入力画像から動き補償フレーム間予測部１７より入力した予測画像を減算し、減算した結果（予測誤差情報）を画像符号化部１２に出力する。

画像符号化部１２は、入力された予測誤差信号をＤＣＴ(Discrete Cosine Transform)変換などの空間変換および量子化を行い、符号化画像情報として出力する。同時に、画像符号化部１２から出力された符号化画像情報は、画像復号化部１４によりローカル復号され、加算部１５に出力される。

加算部１５では動き補償フレーム間予測部１７から出力された予測画像と画像復号化部１４より出力された予測誤差情報を加算し、新たな参照画像を生成し、フレームメモリ部１６へ出力する。

フレームメモリ部１６は、加算部１５より出力された新たな参照画像を記憶し、次の入力画像の符号化の際に前記動き補償フレーム間予測部１７に出力される。以上、説明したような動作を繰り返すことにより、動画像符号化装置では連続した符号化画像情報（予測誤差情報）および符号化サイド情報の出力を行う。

次に、従来の動画像復号化装置の全体の動作を説明する。従来の動画像復号化装置の全体の構成例を図４に示す。ここで、動き補償フレーム間予測符号化を行っている場合の定常状態としてフレームメモリ部２４に、予測画像を生成する際に使用される参照画像が記憶されているとする。動画像復号化装置に入力された符号化画像情報は、画像復号化部２１に入力される。前記画像復号化部２１では、画像符号化装置における画像復号化部１４と同一で符号化画像情報を復号し、得られた誤差画像を加算部２２に出力する。

一方、動画像復号化装置に入力された符号化サイド情報は、動き補償フレーム間予測部２３に入力される。

動き補償フレーム間予測部２３は、入力された符号化サイド情報を復号し、動きベクトルなどのサイド情報を得る。さらに得たサイド情報とフレームメモリ部２４から入力される参照画像より予測画像を生成し、加算部２２に出力する。

加算部２２は、画像復号化部２１より出力された誤差画像と動き補償フレーム間予測部２３より出力された予測画像の加算を行い、出力画像を得る。この出力画像は、出力画像として動画像復号化装置から出力され、同時にフレームメモリ部２４に対しても出力される。

フレームメモリ部２４は、加算部２２より出力された新たな参照画像を記憶し、次の画像の復号化の際に動き補償フレーム間予測部２３に出力される。以上、説明したような動作を繰り返すことにより、動画像復号化装置では連続した出力画像の出力を行う。

次に、動画像符号化装置および動画像復号化装置における動き補償フレーム間予測部の動作および各部で用いられる方式について説明する。まず、動画像符号化装置における動き補償フレーム間予測部１７の構成例および動作を説明する。図５に示すように、動き補償フレーム間予測部１７は、動きベクトル探索部４１、予測フレーム生成部４２、サイド情報符号化部４３から構成されている。

動きベクトル探索部４１は、入力された入力画像とフレームメモリ部１６から入力された参照画像より動きベクトルを探索し予測フレーム生成部４２に出力する。予測フレーム生成部４２は、入力された動きベクトルと参照画像よりブロック移動、アフィン変換、双線形変換などの予測方式のいずれか一つを用いて予測画像を生成する。

また、予測画像の生成の際には、領域情報、動きベクトルなどのサイド情報が得られる。生成された予測画像は、減算部１１および加算部１５に出力され、サイド情報は、サイド情報符号化部４３に出力される。サイド情報符号化部４３は予測フレーム生成部４２より入力されたサイド情報を符号化し、符号化サイド情報として出力する。

次に、動画像復号化装置における動き補償フレーム間予測部２３の構成および動作を説明する。図６に示すように、動き補償フレーム間予測部２３は、予測フレーム生成部５１、サイド情報復号化部５２から構成されている。前記動き補償フレーム間予測部２３に入力された符号化サイド情報は、サイド情報復号化部５２に入力される。

サイド情報復号化部５２では、入力された符号化サイド情報を復号し、領域情報、動きベクトルなどのサイド情報を得、予測フレーム生成部５１に出力する。予測フレーム生成部５１は、サイド情報復号化部５２より入力されたサイド情報およびフレームメモリ部２４より入力された参照画像よりフレーム間予測処理を行い、得られた予測画像を加算部２２に出力する。

次に、アフィン変換について説明する。アフィン変換は、ある画像フレームから別の画像フレームへの写像を６つのパラメータにより表現することにより行われる。一般的に、アフィンパラメータの計算の簡便化などの理由によりアフィン変換は、三角形領域を対象として行われる。

前方向予測を行う場合のアフィン変換を用いたフレーム間予測の説明図を図１０に示す。現画像フレームのコントロールグリッド点Ａ，Ｂ，Ｃの動きベクトルを探索した結果、参照フレームのコントロールグリッド点Ａ′，Ｂ′，Ｃ′が対応する位置であったとする。

アフィンパラメータを求めるためには、まず、４つのコントロールグリッド点のうち３点を選択し領域の分割を行う。例えば、現画像フレームでは、Ａ，Ｂ，ＣとＢ，Ｃ，Ｄのような領域の分割を行う。対応して参照画像フレームでは、Ａ′，Ｂ′，Ｃ′とＢ′，Ｃ′，Ｄ′に分割される。領域を三角形に分割した後、各三角形の頂点の位置（一方が頂点の位置で、片方が動きベクトルでもよい）よりアフィンパラメータを計算する。

そして、求められたアフィンパラメータより分割された三角形領域の内部の画素全てを予測画像フレームに写像することにより予測画像フレームを生成する。この際、参照画像フレーム中で参照画像フレーム中で参照される画素位置が整数でなかった場合には、双線形内挿などの予測値の補間を行い予測画像フレームの画素値の決定を行う。以上の処理を行うことにより予測画像を生成する。

しかしながら、上述した従来の技術においては、動き補償フレーム間予測として用いられる方式が固定的に決められていたため、アフィン変換を用いた動き補償フレーム間予測方式を用いた場合に、ブロック移動を用いた動き補償フレーム間予測方式で予測を表現した方が、全体としての符号量が減少することがあるが対応できないという問題点があった。

また、アフィン変換を用いた動き補償フレーム間予測方式において、領域を分割する際に、被写体の形状・大きさ・位置によって、予測効率が十分でないことがあるという問題点があった。

本願発明は、適応的動き補償フレーム間予測を行うことにより得た予測画像と、復号化された予測誤差情報とから画像を復元する動画像復号化装置であって、既に復号化された映像信号を記憶しておくためのフレームメモリと、予測モード情報および動きベクトルを含むサイド情報を復号するサイド情報復号化部と、画像フレームを複数の処理領域に分割し、前記動きベクトルを用いて前記処理領域毎に複数の動き補償フレーム間予測方式により、前記フレームメモリに記憶された映像信号から前記予測モード情報に応じて予測画像を生成する予測部とを備え、前記予測部は、前記処理領域に対し、ブロック移動による予測方式を用いて前記予測画像を生成する第１の予測モードと、前記処理領域に対し、アフィン変換による予測方式を用いて前記予測画像を生成する第２の予測モードと、を有し、所定の処理領域において前記第１の予測モードが用いられ、前記所定の処理領域に隣接する処理領域において前記第２の予測モードが用いられた場合に、前記隣接する処理領域の動きベクトルを用いることによって、前記所定の処理領域の動きベクトルを少ない情報量で復号することを特徴とする。
また、本願発明は、動画像符号化装置により符号化されたデータを入力し、複数の動き補償フレーム間予測方式を用いて画像フレームを復号化する動画像復号化装置であって、画像フレームの動きベクトルを復号化する動きベクトル復号化部と、前記画像フレームを複数の領域に分割した領域毎に、前記動きベクトルと前記複数の予測方式のそれぞれに対応する予測画像を生成する予測部と、前記複数の予測方式から一の予測方式を選択する情報および前記動きベクトルを示す情報を復号化するサイド情報復号化部とを備え、前記符号化されたデータは、前記動画像符号化装置に入力された画像フレームを複数の領域に分割した領域の動きベクトルと、該領域に対して複数の予測方式から選択した一の予測方式を示すサイド情報とを含み、前記サイド情報は、前記動画像符号化装置において、符号化対象領域に隣接する領域に対し該符号化対象領域とは異なる予測方式が決定された場合に、該隣接領域の動きベクトルを用いることによって、符号化対象領域の動きベクトルに要するサイド情報量を少なくしたものであり、前記サイド情報復号化部は、復号化対象領域に隣接する領域に対し該復号化対象領域とは異なる予測方式が決定された場合に、該隣接領域の動きベクトルを用いることによって、復号化対象領域の動きベクトルを復号化することを特徴とする。

本発明の動画像復号化装置によれば、全体として少ない符号量で符号化された場合であっても、復号した予測モード情報に応じて、第１の予測モード、および第２の予測モードを用いることで十分な予測効率で動画像を復元することが可能である。

以下、本発明の実施の形態について図面を参照して説明する。動画像符号化装置および動画像復号化装置の全体的な動作は、図３及び図４に示した従来の動画像符号化装置および動画像復号化装置で説明したものと同様である。動画像符号化装置の構成例を図３に、動画像復号化装置の構成例を図４に示す。ここでは、動画像符号化装置における動き補償フレーム間予測部および動画像復号化装置における動き補償フレーム間予測部に関する動作を説明する。

まず始めに、動画像符号化装置における本発明の動き補償フレーム間予測部１７の構成例を図１に示す。図１において、３１は動きベクトル探索部、３２ａ、３２ｂ、．．．、３２ｎは、予測部１、予測部２、．．．、予測部ｎ、３３は領域予測決定部、３４はサイド情報符号化部である。動きベクトル探索部３１は、入力された入力画像フレームとフレームメモリ部１６から入力された参照画像フレームより動きベクトルを探索し、予測部１〜ｎ（３２ａ〜３２ｎ）に出力する。

各予測部１〜ｎ（３２ａ〜３２ｎ）は、入力された動きベクトルおよびフレームメモリ部１６より入力された参照画像フレームより、異なるｎ個の動き補償フレーム間予測方式を用いて予測画像を生成する。この際、各予測部１〜ｎ（３２ａ〜３２ｎ）は、入力された参照画像フレームを一つ以上の小領域に分割し、フレーム間予測処理を行う。このそれぞれの領域を、以後、処理小領域と呼ぶ。

そして、各予測部１〜ｎ（３２ａ〜３２ｎ）は、生成した予測画像１〜ｎ（一つ以上の処理小領域）およびフレーム間予測処理で使用した動きベクトルを領域予測決定部３３に出力する。

領域予測決定部３３は、予測部１〜ｎ（３２ａ〜３２ｎ）より入力された予測画像１〜ｎと入力画像フレームから差分を計算し、各処理小領域毎に誤差が最小となる予測画像を採用し、処理小領域を構成する動きベクトル、領域情報、予測モード情報などのサイド情報をサイド情報符号化部３４に出力し、また、採用された各処理小領域をまとめて予測画像フレームとして出力する。

サイド情報符号化部３４は、領域予測決定部３３より入力されたサイド情報（動きベクトル、領域情報、予測モード情報）を符号化し符号化サイド情報を出力する。

次に、動画像復号化装置における本発明の動き補償フレーム間予測部２３の構成例を図２に示す。図２において、３５はサイド情報復号化部、３６ａ、３６ｂ、．．．、３６ｎは、予測部１、予測部２、．．．、予測部ｎ、３７は領域予測選択部である。

動き補償フレーム間予測部２３に入力された符号化サイド情報は、サイド情報復号化部３５に入力される。サイド情報復号化部３５では、入力された符号化サイド情報を復号し、動きベクトル、領域情報、予測モード情報を得、予測部１〜予測部ｎ（３６ａ〜３６ｎ）に動きベクトルを、領域予測選択部３７に領域情報、予測モード情報を出力する。

予測部１〜ｎ（３６ａ〜３６ｎ）は、サイド情報復号化部３５より入力された動きベクトルとフレームメモリ部２４より入力された参照画像フレームより、異なるｎ個の動き補償フレーム間予測方式を用いて予測画像を生成する。

この際、各予測部は、入力された参照画像フレームを一つ以上の処理小領域に分割し、フレーム間予測処理を行う。そして、各予測部１〜ｎ（３６ａ〜３６ｎ）は、生成した予測画像１〜ｎ（一つ以上の処理小領域）を領域予測選択部３７に出力する。

領域予測選択部３７は、サイド情報復号化部３５からの領域情報、予測モード情報に従って、予測部１〜ｎ（３６ａ〜３６ｎ）より入力された予測画像１〜ｎを選択して、予測画像フレームを生成する。そして、得られた予測画像フレームを出力する。

次に、予測部に関して説明する。図７に、本発明における予測方式の選択に関する例を示す。

従来の予測方式では、画像のある領域に対してただ一つの動き補償フレーム間予測方式を用いていたため、図７−Ａに示すように領域が細分化され、動きベクトルなどのサイド情報量が増加する傾向にあった。本発明による予測方式では、画像の領域を小領域に分割し、各小領域に対して異なる動き補償フレーム間予測方式を用いる。

例えば、図７−Ｂに示すように、網で囲まれた小領域１と２つの三角形からなる小領域２を異なる動き補償フレーム間予測を用いた場合、小領域１は、ブロック移動による動き補償フレーム間予測方式を用い、小領域２は、アフィン変換による動き補償フレーム間予測方式を用いる。

この例では、小領域１は、隣接する小領域２の左上の動きベクトルを用いる。上記のように小領域毎に異なる動き補償フレーム間予測方式を用いることにより予測処理の際に必要となる動きベクトルが７つから４つに減っていることが分かる。

例では、１６×１６画素の単位領域を更に細かく小領域に分割し、予測部１（３２ａ）がブロック移動による動き補償フレーム間予測方式を用いている場合を、また予測部２（３２ｂ）がアフィン変換による動き補償フレーム間予測方式を用いている場合を示した。

本発明では、上記の例のように単位領域のみを対象とするのではなく、様々なサイズの領域を対象として、予測部１〜ｎ（３２ａ〜３２ｎ）において、オーバーラップ動き補償、双線形変換、バックグラウンド予測など他の動き補償フレーム間予測方式を用いることが例として考えられる。

次に、アフィン変換による動き補償フレーム間予測方式を用いた予測部に関して説明する。図８にアフィン変換による動き補償フレーム間予測方式を用いた場合の領域分割の例を示す。アフィン変換による動き補償フレーム間予測では、三角形の領域を対象としているため、１６×１６画素の単位領域を複数の三角形に分割して処理を行う。

図９に１６×１６画素の単位領域を複数の三角形により分割した領域分割例を示す。図８に示すような被写体をアフィン変換による動き補償フレーム間予測方式を用いて予測する場合、図８−Ａのように領域分割を５分割してもよいが、図８−Ｂに示すように、領域を斜め方向に４分割する分割方式をとると、予測処理の際に必要となる動きベクトルが７つから５つに減少することが分かる。

上記のような分割数の少ない場合、例えば領域を斜め方向に２分割（図９において、“１，２”で示す分割方式）あるいは４分割（図９において、“２７”で示す分割方式）する分割方式のように分割数の少ない場合でも、上記小領域毎に異なる予測方式を用いて複数の予測画像を生成する方式と組み合わせることにより、より動きベクトルなどのサイド情報が少なくても、予測効率を十分に上げることができる。

以上の説明から明らかなように、本発明によると、以下のような効果がある。

(１) 動き補償フレーム間予測処理の際に、可変サイズの小領域毎に異なる予測方式を用いて複数の予測画像を生成し、出力する予測部と、予測部からの複数の予測画像より最適な領域サイズおよび予測方式を決定し、領域情報、予測モード情報、動きベクトルなどから成るサイド情報と予測画像を出力する領域予測決定部と、領域予測決定部から出力される上記サイド情報を符号化するサイド情報符号化部を具備することで、複数の動き補償フレーム間予測方式の中で、動きベクトルなどのサイド情報量、もしくは、予測誤差が最も少なくなる予測方式を用いることが可能となる。

(２) 動き補償フレーム間予測処理の際に、符号化の単位となる領域、または前記単位領域を更に細かく分割した小領域毎に異なる予測方式を用いて複数の予測画像を生成し、出力する予測部と、予測部からの複数の予測画像より処理単位が単位領域または単位領域を更に分割した小領域であるかの情報（領域情報）および予測方式を決定し、領域情報、予測モード情報、動きベクトルなどから成るサイド情報と予測画像を出力する領域予測決定部と、領域予測決定部から出力される上記サイド情報を符号化するサイド情報符号化部を具備することで、複数の動き補償フレーム間予測方式の中で、動きベクトルなどのサイド情報量、もしくは、予測誤差が最も少なくなる予測方式を用いることが可能となる。

(３) 動き補償フレーム間予測処理の際に、可変サイズの小領域毎にブロック移動（オーバーラップ動き補償）、アフィン変換、双線形変換、バックグラウンド予測などの予測方式を用いて複数の予測画像を生成し、出力する予測部と、予測部からの複数の予測画像より最適な領域サイズおよび予測方式を決定し、領域情報、予測モード情報、動きベクトルなどから成るサイド情報と予測画像を出力する領域予測決定部と、領域予測決定部から出力される上記サイド情報を符号化するサイド情報符号化部を具備することで、複数の動き補償フレーム間予測方式の中で、動きベクトルなどのサイド情報量、もしくは、予測誤差が最も少なくなる予測方式を用いることが可能となる。

(４) 動き補償フレーム間予測処理の際に、符号化の単位となる領域を斜め方向に２分割もしくは４分割した小領域毎にアフィン変換による予測を用いて予測画像を生成し、出力する予測部を具備することで、従来では不可能であった被写体の形状・大きさ・位置に対応し、動きベクトルなどのサイド情報、もしくは、予測誤差を減少させることが可能となる。

(５) 動き補償フレーム間予測処理の際に、符号化の単位となる領域を斜め方向に２分割もしくは４分割した小領域毎にアフィン変換による予測を用いて予測画像を生成し、出力する予測部を具備することで、複数の動き補償フレーム間予測方式の中で、動きベクトルなどのサイド情報量、もしくは、予測誤差が最も少なくなる予測方式を用いること、および、従来では不可能であった被写体の形状・大きさ・位置に対応し、動きベクトルなどのサイド情報、もしくは、予測誤差を減少させることが可能となる。

(６) 符号化サイド情報を復号し、領域情報、予測モード情報、動きベクトルなどから成るサイド情報を復号し、出力するサイド情報符号化部と、動き補償フレーム間予測処理の際に、可変サイズの小領域毎に異なる予測方式を用いて複数の予測画像を生成し、出力する予測部と、サイド情報復号化部からの指示に従って予測部からの複数の予測画像の中で最適な予測画像を生成し、予測画像を出力する領域予測選択部を具備することで、複数の動き補償フレーム間予測方式の中で、動きベクトルなどのサイド情報量、もしくは、予測誤差が最も少なくなる予測方式を用いることが可能となる。

(７) 符号化サイド情報を復号し、領域情報、予測モード情報、動きベクトルなどから成るサイド情報を復号し、出力するサイド情報符号化部と、動き補償フレーム間予測処理の際に、復号化の単位となる領域、または前記単位領域を更に細かく分割した小領域毎に異なる予測方式を用いて複数の予測画像を生成し、出力する予測部と、サイド情報復号化部からの指示に従って予測部からの複数の予測画像の中で最適な予測画像を生成し、予測画像を出力する領域予測選択部を具備することで、複数の動き補償フレーム間予測方式の中で、動きベクトルなどのサイド情報量、もしくは、予測誤差が最も少なくなる予測方式を用いることが可能となる。

(８) 符号化サイド情報を復号し、領域情報、予測モード情報、動きベクトルなどから成るサイド情報を復号し、出力するサイド情報符号化部と、動き補償フレーム間予測処理の際に、復号化の単位となる領域、または前記単位領域を更に細かく分割した小領域毎にブロック移動（オーバーラップ動き補償）、アフィン変換、双線形変換、バックグラウンド予測などの予測方式を用いて複数の予測画像を生成し、出力する予測部と、サイド情報復号化部からの指示に従って予測部からの複数の予測画像の中で最適な予測画像を生成し、予測画像を出力する領域予測選択部を具備することで、複数の動き補償フレーム間予測方式の中で、動きベクトルなどのサイド情報量、もしくは、予測誤差が最も少なくなる予測方式を用いることが可能となる。

(９) 動き補償フレーム間予測処理の際に、復号化処理の単位となる領域を斜め方向に２分割もしくは４分割した小領域毎にアフィン変換による予測を用いて予測画像を生成し、出力する予測部を具備することで、従来では不可能であった被写体の形状・大きさ・位置に対応し、動きベクトルなどのサイド情報、もしくは、予測誤差を減少させることが可能となる。

(１０) 動き補償フレーム間予測処理の際に、復号化処理の単位となる領域を斜め方向に２分割もしくは４分割した小領域毎にアフィン変換による予測を用いて予測画像を生成し、出力する予測部を具備することで、複数の動き補償フレーム間予測方式の中で、動きベクトルなどのサイド情報量、もしくは、予測誤差が最も少なくなる予測方式を用いること、および、従来では不可能であった被写体の形状・大きさ・位置に対応し、動きベクトルなどのサイド情報、もしくは、予測誤差を減少させることが可能となる。

本発明に係る動画像復号化装置に対応する動画像符号化装置の動き補償フレーム間予測部の構成例を示す図である。 本発明に係る動画像復号化装置の動き補償フレーム間予測部の構成例を示す図である。 動画像符号化装置の構成例を示す図である。 動画像復号化装置の構成例を示す図である。 従来の動画像符号化装置の動き補償フレーム間予測部の構成例を示す図である。 従来の動画像復号化装置の動き補償フレーム間予測部の構成例を示す図である。 領域に対する予測方式の選択の例を説明するための図である。 領域分割方式の例を説明するための図である。 三角形による領域の分割を示す図である。 前方向予測を行う場合のアフィン変換を用いたフレーム間予測の説明図である。

符号の説明

１１ 減算部
１２ 画像符号化部
１３ 符号化制御部
１４ 画像復号化部
１５ 加算部
１６ フレームメモリ部
１７ 動き補償フレーム間予測部
２１ 画像復号化部

Claims (2)

1. 適応的動き補償フレーム間予測を行うことにより得た予測画像と、復号化された予測誤差情報とから画像を復元する動画像復号化装置であって、
   既に復号化された映像信号を記憶しておくためのフレームメモリと、
   予測モード情報および動きベクトルを含むサイド情報を復号するサイド情報復号化部と、
   画像フレームを複数の処理領域に分割し、前記動きベクトルを用いて前記処理領域毎に複数の動き補償フレーム間予測方式により、前記フレームメモリに記憶された映像信号から前記予測モード情報に応じて予測画像を生成する予測部と
   を備え、前記予測部は、
   前記処理領域に対し、ブロック移動による予測方式を用いて前記予測画像を生成する第１の予測モードと、
   前記処理領域に対し、アフィン変換による予測方式を用いて前記予測画像を生成する第２の予測モードと、
   を有し、
   所定の処理領域において前記第１の予測モードが用いられ、前記所定の処理領域に隣接する処理領域において前記第２の予測モードが用いられた場合に、前記隣接する処理領域の動きベクトルを用いることによって、前記所定の処理領域の動きベクトルを少ない情報量で復号することを特徴とする動画像復号化装置。
2. 動画像符号化装置により符号化されたデータを入力し、複数の動き補償フレーム間予測方式を用いて画像フレームを復号化する動画像復号化装置であって、
   画像フレームの動きベクトルを復号化する動きベクトル復号化部と、
   前記画像フレームを複数の領域に分割した領域毎に、前記動きベクトルと前記複数の予測方式のそれぞれに対応する予測画像を生成する予測部と、
   前記複数の予測方式から一の予測方式を選択する情報および前記動きベクトルを示す情報を復号化するサイド情報復号化部とを備え、
   前記符号化されたデータは、前記動画像符号化装置に入力された画像フレームを複数の領域に分割した領域の動きベクトルと、該領域に対して複数の予測方式から選択した一の予測方式を示すサイド情報とを含み、
   前記サイド情報は、前記動画像符号化装置において、符号化対象領域に隣接する領域に対し該符号化対象領域とは異なる予測方式が決定された場合に、該隣接領域の動きベクトルを用いることによって、符号化対象領域の動きベクトルに要するサイド情報量を少なくしたものであり、
   前記サイド情報復号化部は、復号化対象領域に隣接する領域に対し該復号化対象領域とは異なる予測方式が決定された場合に、該隣接領域の動きベクトルを用いることによって、復号化対象領域の動きベクトルを復号化することを特徴とする動画像復号化装置。

Images