JP3918509B2 - 動画像編集装置、動画像編集方法、動画像復号化装置及び動画像復号化方法 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は動画像編集装置、動画像編集方法、動画像復号化装置及び動画像復号化方法に係り、特にピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法を用いて動画像を符号化して得た符号列の編集を行う動画像編集装置及び動画像編集方法と、符号化された動画像の復号化を行う動画像復号化装置及び動画像復号化方法に関する。
【０００２】
【従来の技術】
従来より、動画像の高能率圧縮符号化方式としてＭＰＥＧ（Moving Picture Experts Group）方式が知られている。このＭＰＥＧ方式では、画像間予測の方法により３種類のピクチャタイプを持つ。Ｉピクチャと呼ばれるピクチャ内独立符号化ピクチャと、Ｐピクチャと呼ばれる片方向予測符号化（フレーム間又はフィールド間順方向予測符号化）ピクチャと、Ｂピクチャと呼ばれる双方向予測符号化ピクチャである。Ｉピクチャはランダムアクセスやチャンネル切替えに対応するもので、そこから復号が可能となる。ここで、ピクチャは動画像の１フレームないし１フィールドを指す。
【０００３】
符号列はピクチャが複数束ねられ、符号列群すなわちＧＯＰ（Group Of Picture）が形成される。このＧＯＰにおいては、Ｉピクチャがひとつは必ず入る形となる。通常のＧＯＰの構成は、Ｂピクチャから始まりＰピクチャで終わる。このピクチャ構成を図７（ａ）に示す。符号列においてＰ（Ｉ）ピクチャとＢピクチャの順番が入れ替わるため、このような構成となる。
【０００４】
一方、最初のＢピクチャは前のＧＯＰのＰピクチャからも予測されるため、画像間予測が途切れず符号列をＧＯＰ単位で入れ替えることができない。そこで、最初のＢピクチャを無くし、前ＧＯＰのＰピクチャの直後をＩピクチャとする方法がある。これはクローズド（Ｃｌｏｓｅｄ）ＧＯＰと呼ばれるもので、各ＧＯＰは前後ＧＯＰと関係なくなるため、ＧＯＰ単位で符号列の編集が可能になる。このＧＯＰ構成を図７（ｂ）に示す。この場合、最初の部分が周期的な処理でなくなるので、処理がやや面倒になる。また、符号量が少ないＢピクチャが削除されるので平均符号量が増加する。
【０００５】
一方、本発明者が先に特開平１１−１６４３０７号公報にて開示したように、主たる符号列とは別に副符号列として、ピクチャ内独立符号化された符号列を多重化する動画像符号化装置及び動画像復号化装置がある。この動画像符号化装置では、入力される動画像に対して、画像内独立符号化または画像間予測符号化をフレーム又はフィールド単位で切り替えて行い、得られた主符号列を出力する主符号化手段と、前記主符号化手段において画像間予測符号化が行われるフレーム又はフィールドのうち所定フレーム又はフィールドを、画像内独立符号化し、得られた副符号列を出力する副符号化手段と、前記所定フレーム又はフィールドの主符号列の隣接部に前記所定フレームまたはフィールドの副符号列を挿入し、多重化された符号列を得る符号列多重化手段とより構成したことを特徴とする。
【０００６】
また、上記の動画像復号化装置は、入力される符号列のタイプ（主符号列／副符号列）を符号列のヘッダーより検出し、符号列のタイプ情報を出力するタイプ検出手段と、前記符号列のタイプ情報に基づき、連続した画像の復号化が行われていない場合は、入力されるいずれの符号列も復号化処理に導き、連続した画像の復号化が行われている場合は、副符号列を放棄して主符号列のみを復号化処理に導く符号列制御手段と、前記符号列制御手段から与えられる符号列に対して、画像内復号化又は画像間予測復号化を行い、得られた再生画像を出力する復号化手段とを有する構成である。
【０００７】
この本発明者の先の提案になる動画像符号化装置及び動画像復号化装置によれば、通常の復号化ではピクチャ内独立符号化された符号列は用いずに復号化し、ランダムアクセスやチャンネル切替え時にのみ、ピクチャ内独立符号化された符号列から復号化することが可能になる。
【０００８】
また、ピクチャ内独立符号化した局部復号画像とピクチャ間予測画像の両方を用いて画質を高める手法がある。例えば、本発明者が先に特開平５−１３０５９１号公報にて開示した動画像符号化装置では、ピクチャ内独立符号化の再生画像とピクチャ間予測画像を適応的に加算し、予測信号を形成するものである。
【０００９】
図８は従来の動画像符号化装置の一例のブロック図を示す。同図において、画像入力端子１より入来する動画像信号は、すべてがフレーム遅延器２に供給される一方、Ｉピクチャとして符号化する信号のみがスイッチ１９を介してＤＣＴ２０に供給される。フレーム遅延器２は、ＰピクチャをＢピクチャに先行して符号化するために、Ｂピクチャのみをフレーム時間遅延させる。順番が入れ替えられた各画像は、減算器３に与えられる。
【００１０】
フレーム遅延器２からの画像信号は、減算器３において後述する加算器９からの予測信号と減算されて予測残差とされてＤＣＴ４に入力される。ＤＣＴ４は予測残差に対して離散コサイン変換（ＤＣＴ：Discrete Cosine Transform）の変換処理を行い、得られた係数を量子化器５に供給する。量子化器５は所定のステップ幅で入力係数を量子化し、固定長の符号となった係数を可変長符号化器６と逆量子化器１０に供給する。可変長符号化器６は、固定長の予測残差を可変長符号で圧縮して、得られた符号を多重化器１３に供給する。
【００１１】
一方、逆量子化器１０及び逆ＤＣＴ１１ではＤＣＴ４及び量子化器５の逆処理が行われ、予測残差を再生する。得られた再生予測残差は加算器１２で、加算器９からの予測信号と加算されて再生画像とされ、画像間予測器７に入力される。画像間予測器７はこの再生画像を参照画像として用いて画像間予測信号を形成し、乗算器８に供給する。乗算器８は、後述の特定画像設定器１８よりの制御情報に従って再生画像に０から１の値を乗じて、加算器９に供給する。
【００１２】
Ｉピクチャの符号化は、上記Ｐピクチャとして符号化される画像の内、周期的に設定した一部の画像について行う。Ｉピクチャの符号化は、予測残差に対する上記の処理と同様で、ＤＣＴ２０、量子化器２１及び可変長符号化器２２からなる回路部で符号化されるが、この処理はＩ（Ｐ）ピクチャに対するＤＣＴ４、量子化器５及び可変長符号化器６からなる回路部の処理と同様である。得られた符号は可変長符号化器２２から多重化器１３に入力される。
【００１３】
一方、逆量子化器１５及び逆ＤＣＴ１６ではＤＣＴ２０及び量子化器２１の逆処理が行われ、画像を再生する。得られた再生画像（Ｉピクチャ局部復号画像）は、乗算器１７に与えられる。乗算器１７は、後述する特定画像設定器１８からの制御情報に従って局部復号画像に０から１の値を乗じて、加算器９に供給する。
【００１４】
加算器９は、乗算器８からの画像間予測画像と、乗算器１７からのＩピクチャ局部復号画像とを加算して最終的な予測画像を得る。乗算器８の乗算係数と乗算器１７の乗算係数とは、それらの和が１となるもので、画像の相関により制御されてもよい。Ｉピクチャの無い非特定ピクチャでは乗算器８で１、乗算器１７で０が乗算され、通常のＰピクチャの処理となる。Ｂピクチャは予測の参照画像とならないので、この加算処理は関係ない。
【００１５】
特定画像設定器１８は所定周期毎のＰピクチャを特定ピクチャとして設定し、その制御情報をスイッチ１９、乗算器８、１７、多重化器１３に与える。多重化器１３は、特定ピクチャの情報と各ピクチャの符号列を多重化し、符号列出力端子１４より出力する。
【００１６】
従来のＧＯＰ（画像群）の符号列構成は、通常のＧＯＰの場合は図９（ａ）に示すように、クローズド（Closed）ＧＯＰの場合は図９（ｂ）に示すようになる。図９で区切りは各ピクチャの符号列を示し、Ｉ、Ｂ、Ｐはピクチャタイプ、数字は再生表示ピクチャ番号である。符号列は、ＢピクチャとＰ（Ｉ）ピクチャの順番が逆転しているのが判る。その結果ＧＯＰの最後はＰピクチャにならず、その前のＢピクチャとなる。
【００１７】
通常のＧＯＰ構成の動画像符号列は、ＧＯＰ単位で編集を行うと最初のＢピクチャが復号化できなくなる。これはその前のＰピクチャが前のＧＯＰに属し、ＧＯＰ単位の編集によりＰピクチャが他の画像に変化してしまうので、正しい参照画像が得られなくなるためである。この場合、復号化装置でＢピクチャの画像を復号化しないようにするため、編集が行われていることを示すフラグ（Bloken Link）を立てる必要がある。
【００１８】
一方、クローズド（Closed）ＧＯＰ構成の動画像符号列は、最初のＢピクチャがないので、ＧＯＰ単位で編集を行っても復号化に影響しない。これは画像間予測がＧＯＰで閉じているためで、編集が行われていることを示すフラグ（Bloken
Link）を立てる必要はない。
【００１９】
図８に示した従来の動画像符号化装置に対応する従来の動画像復号化装置は、予測信号の形成において、図８の局部復号部分と同様に独立フレーム復号画像と画像間予測画像が適応的に加算する構成である。
【００２０】
一方、通常のＧＯＰ構成の動画像符号列で、ＧＯＰ単位で編集が行われ、ブロークンリンク（Bloken Link）フラグが立っている場合、復号化では、編集点以降でＩピクチャより前のＢピクチャは復号化せず、前の画像などで置き換える。クローズド（Closed）ＧＯＰ構成の動画像符号列では、ＧＯＰ単位での符号列編集の影響は受けないが、Ｐピクチャの周期が不連続となるので、それに応じた復号化処理が必要になる。
【００２１】
【発明が解決しようとする課題】
従来の動画像編集方法では、Ｉピクチャの周期で束ねられた符号列群、すなわちＧＯＰ（Group Of Picture）単位を持つ符号列の編集を行うが、通常のＧＯＰ構成では符号列の編集が困難であり、最初のＢピクチャがないクローズド（Closed）ＧＯＰ構成では、符号化効率が低下し、また、Ｐピクチャの周期が不連続になるという問題がある。
【００２２】
また、Ｐピクチャにおいて副符号列としてＩピクチャも持つ従来の手法は、ランダムアクセスなどには有効であるが、重複するＩピクチャ分だけ符号量が増加し、符号列編集に対応したＧＯＰ構造になっていない。
【００２３】
更に、同一フレームのＩピクチャ局部復号画像と画像間予測信号から予測信号を形成する従来の手法は、符号化効率は良いが、両方の符号列がないと復号化ができないので、符号列の編集はできない。
【００２４】
本発明は以上の点に鑑みなされたもので、所定ＰピクチャではＩピクチャも持ち、両者の再生画像を加算したものを再生画像とすることで、編集可能でありながら再生画像の画質を改善できる動画像編集装置、動画像編集方法、動画像復号化装置及び動画像復号化方法を提供することを目的とする。
【００２５】
【課題を解決するための手段】
上記の目的を達成するため、本発明の動画像編集装置は、ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列を編集する動画像編集装置において、片方向予測で符号化されるピクチャの一部を特定ピクチャとし、特定ピクチャでは片方向予測符号化と共にピクチャ内独立でも符号化した第１の符号列と、この第１の符号列とは異なる画像の、片方向予測で符号化されるピクチャの一部を特定ピクチャとし、この特定ピクチャでは片方向予測符号化と共にピクチャ内独立でも符号化した第２の符号列とを入力とし、この入力された第１及び第２の符号列の各ピクチャの画像タイプをそれぞれ検出する画像タイプ検出手段と、第１及び第２の符号列の一方を選択する選択手段と、画像タイプ検出手段により検出された第１及び第２の符号列の各ピクチャの画像タイプと、編集タイミングの情報とに基づいて、ピクチャ単位で第１の符号列のピクチャ又は第２の符号列のピクチャを選択手段により選択させて、特定ピクチャのピクチャ内独立符号化された符号列で始まり、特定ピクチャの直前のピクチャの双方向予測符号化された符号列で終了する符号列を一つの符号列群とし、この符号列群単位で符号列の入れ替えを行われた編集後の符号列を出力する切替え制御手段とを有する構成としたものである。
【００２６】
また、上記の目的を達成するため、本発明の動画像編集方法は、ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列を編集する動画像編集方法において、片方向予測で符号化されるピクチャの一部を特定ピクチャとし、特定ピクチャでは片方向予測符号化と共にピクチャ内独立でも符号化した第１の符号列と、この第１の符号列とは異なる画像の、片方向予測で符号化されるピクチャの一部を特定ピクチャとし、この特定ピクチャでは片方向予測符号化と共にピクチャ内独立でも符号化した第２の符号列とを入力とし、この入力された第１及び第２の符号列の各ピクチャの画像タイプをそれぞれ検出する第１のステップと、第１及び第２の符号列の一方を選択する第２のステップと、第１及び第２の符号列の各ピクチャの画像タイプと、編集タイミングの情報とに基づいて、ピクチャ単位で第１の符号列のピクチャ又は第２の符号列のピクチャを選択手段により選択させて、特定ピクチャのピクチャ内独立符号化された符号列で始まり、特定ピクチャの直前のピクチャの双方向予測符号化された符号列で終了する符号列を一つの符号列群とし、この符号列群単位で符号列の入れ替えを行われた編集後の符号列を出力する第３のステップとを含むことを特徴とする。
【００２７】
本発明の動画像編集装置及び方法では、特定ピクチャでは片方向予測符号化と共にピクチャ内独立でも符号化した符号列があり、特定ピクチャのピクチャ内独立符号化された符号列で始まり、特定ピクチャの直前のピクチャの双方向予測符号化された符号列で終了する符号列を一つの符号列群とし、この符号列群単位で連続された第１及び第２の符号列に対して編集を行うに際し、上記の符号列群の単位で符号列の入れ替えるようにしたため、特定ピクチャに含まれるピクチャ内独立符号化ピクチャと片方向予測符号化ピクチャとの間で区切ることができる。
【００２８】
また、上記の目的を達成するため、本発明の第１の動画像復号化装置は、ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列であり、片方向予測で符号化されるピクチャの一部を特定ピクチャとし、特定ピクチャでは片方向予測符号化と共にピクチャ内独立でも符号化した符号列を入力として受け、その入力符号列から特定ピクチャのピクチャ内独立符号化ピクチャと、片方向予測符号化ピクチャ及び双方向予測符号化ピクチャとに分離する多重化分離手段と、多重化分離手段により分離された、片方向予測符号化ピクチャの符号列を復号化して復号画像を得る第１の復号化手段と、特定ピクチャにおいて、ピクチャ内独立符号化ピクチャを復号化し、ピクチャ内独立符号化ピクチャの復号画像を得る第２の復号化手段と、特定ピクチャにおいて、第１の復号化手段により得られた片方向予測符号化ピクチャの復号画像と、第２の復号化手段により得られたピクチャ内独立符号化ピクチャの復号画像とを加算して、第１の復号化手段で用いる他ピクチャの画像間予測処理の参照画像とする画像間予測手段とを有する構成としたものである。
【００２９】
また、上記の目的を達成するため、本発明の第１の動画像復号化方法は、ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列であり、片方向予測で符号化されるピクチャの一部を特定ピクチャとし、特定ピクチャでは片方向予測符号化と共にピクチャ内独立でも符号化した符号列から特定ピクチャのピクチャ内独立符号化ピクチャと、片方向予測符号化ピクチャ及び双方向予測符号化ピクチャとに分離する第１のステップと、第１のステップで分離された、片方向予測符号化ピクチャの符号列を復号化して復号画像を得る第２のステップと、特定ピクチャにおいて、ピクチャ内独立符号化ピクチャを復号化し、ピクチャ内独立符号化ピクチャの復号画像を得る第３のステップと、特定ピクチャにおいて、第２のステップで得られた片方向予測符号化ピクチャの復号画像と、第３のステップで得られたピクチャ内独立符号化ピクチャの復号画像とを加算して、第２のステップで用いる他ピクチャの画像間予測処理の参照画像とする第４のステップとを含むことを特徴とする。
【００３０】
本発明の第１の動画像復号化装置及び方法では、復号化する符号列は、特定ピクチャでは片方向符号化ピクチャとピクチャ内独立符号化ピクチャを持ち、２種類のピクチャが重複することになるが、両者の局部復号画像を加算することで、再生画像のＳ／Ｎが改善されて画質が向上する。
【００３１】
また、上記の目的を達成するため、本発明の第２の動画像復号化装置は、ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列であり、片方向予測で符号化されるピクチャの一部を特定ピクチャとし、特定ピクチャでは片方向予測符号化と共にピクチャ内独立でも符号化した符号列から特定ピクチャのピクチャ内独立符号化ピクチャと、片方向予測符号化ピクチャ及び双方向予測符号化ピクチャとに分離する多重化分離手段と、多重化分離手段により分離された、片方向予測符号化ピクチャの符号列を復号化して復号画像を得る第１の復号化手段と、特定ピクチャにおいて、ピクチャ内独立符号化ピクチャを復号化し、ピクチャ内独立符号化ピクチャの復号画像を得る第２の復号化手段と、特定ピクチャより時間的に前のピクチャの復号化では、第１の復号化手段により得られた片方向予測符号化ピクチャの復号画像を参照画像とし、特定ピクチャより時間的に後のピクチャの復号化では、第２の復号化手段により得られたピクチャ内独立符号化ピクチャの復号画像を参照画像とする画像間予測手段とを有する構成としたものである。
【００３２】
また、上記の目的を達成するため、本発明の第２の動画像復号化方法は、ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列であり、片方向予測で符号化されるピクチャの一部を特定ピクチャとし、特定ピクチャでは片方向予測符号化と共にピクチャ内独立でも符号化した符号列から特定ピクチャのピクチャ内独立符号化ピクチャと、片方向予測符号化ピクチャ及び双方向予測符号化ピクチャとに分離する第１のステップと、第１のステップで分離された、片方向予測符号化ピクチャ及び双方向予測符号化ピクチャの符号列を復号化して復号画像を得る第２のステップと、特定ピクチャにおいて、ピクチャ内独立符号化ピクチャを復号化し、ピクチャ内独立符号化ピクチャの復号画像を得る第３のステップと、特定ピクチャより時間的に前のピクチャの復号化では、第２のステップで得られた片方向予測符号化ピクチャの復号画像を参照画像とし、特定ピクチャより時間的に後のピクチャの復号化では、第３のステップで得られたピクチャ内独立符号化ピクチャの復号画像を参照画像とする第４のステップとを含むことを特徴とする。
【００３３】
上記の本発明の第２の動画像復号化装置及び方法では、編集された符号列を復号化するに当たり、特定ピクチャの片方向予測符号化ピクチャとピクチャ内独立符号化ピクチャとは形式的に同一ピクチャとなっているが、片方向予測符号化ピクチャは時間的に前の符号列群のものであり、ピクチャ内独立符号化ピクチャは時間的に後の符号列群のものであるので、特定ピクチャより時間的に前のピクチャの復号化では、片方向予測符号化ピクチャの復号画像を参照画像とし、特定ピクチャより時間的に後のピクチャの復号化では、ピクチャ内独立符号化ピクチャの復号画像を参照画像とすることにより、視覚特性を考慮した場合、編集点での劣化の目立ちにくい復号化ができる。
【００３４】
【発明の実施の形態】
次に、本発明の実施の形態について図面と共に説明する。図１は本発明になる動画像編集装置の一実施の形態のブロック図を示す。この動画像編集装置は、３つの入力端子（編集情報入力端子３０、符号列Ａ入力端子３１、符号列Ｂ入力端子３２）と、２つの符号列バッファ３３及び３４と、画像タイプ検出器３５と、切替え制御器３６と、スイッチ３７と、フラグ挿入器３８と、符号列出力端子３９とより構成されており、入力端子３１、３２には所定の符号列が入力されて編集動作を行う。従って、本実施の形態の動作を説明する前に、上記の所定の符号列を発生する符号化装置についてまず、説明する。
【００３５】
図２は上記の所定の符号列を発生する動画像符号化装置の一例のブロック図を示す。同図中、図８と同一構成部分には同一符号を付してある。また、本明細書中、「ピクチャ」とは、一つのフレームないしフィールドを指すものとする。
【００３６】
図２において、画像入力端子１より入来する動画像信号は、すべてがフレーム遅延器２に与えられ、Ｉピクチャとして符号化するもののみがスイッチ１９を介してＤＣＴ２０に与えられる。フレーム遅延器２は、ＰピクチャをＢピクチャに先行して符号化するために、Ｂピクチャのみを遅延させる。順番が入れ替えられた各画像は、減算器３に与えられる。
【００３７】
フレーム遅延器２により遅延された入力画像信号は、減算器３において画像間予測器２７から与えられる予測信号と減算され、予測残差とされてＤＣＴ４に入力される。ＤＣＴ４は予測残差に対してＤＣＴ（Discrete Cosine Transform）の変換処理を行い、得られた係数を量子化器５に与える。量子化器５は与えられた係数を所定のステップ幅で量子化し、固定長の符号となった係数を可変長符号化器６と逆量子化器１０に供給する。可変長符号化器６は、量子化器５からの固定長の予測残差を可変長符号で圧縮し、得られたＰピクチャ又はＢピクチャの可変長符号は多重化器１３に供給される。
【００３８】
一方、逆量子化器１０及び逆ＤＣＴ１１ではＤＣＴ４及び量子化器５の逆処理が行われ、予測残差を再生する。得られた再生予測残差は加算器１２において画像間予測器２７からの予測信号と加算されて局部復号画像となり、乗算器２５に供給される。乗算器２５は、特定画像設定器１８からの制御情報に従って局部復号画像に０から１の値を乗じて、加算器２６に供給する。
【００３９】
Ｉピクチャの符号化は、Ｐピクチャとして符号化される画像の内、周期的に設定した一部の画像について行う。このＩピクチャの符号化は、予測残差に対する上記の処理と同様にして行われる。すなわち、Ｉピクチャは、ＤＣＴ２０及び量子化器２１を通して可変長符号化器２２に入力されて可変長符号化されるが、この処理はＰ（Ｂ）ピクチャに対するＤＣＴ４、量子化器５及び可変長符号化器６の処理と同様である。可変長符号化器２２により得られたＩピクチャの可変長符号は多重化器１３に入力される。
【００４０】
一方、逆量子化器１５及び逆ＤＣＴ１６ではＤＣＴ２０及び量子化器２１の逆処理が行われ、局部復号画像を再生する。得られた局部復号画像は、乗算器１７に与えられる。乗算器１７は、特定画像設定器１８からの制御情報に従って局部復号画像に０から１の値を乗じて、加算器２６に供給する。
【００４１】
加算器２６は乗算器２５、１７からの２種類の局部復号画像を加算して画像間予測処理のための参照画像を得る。画像間予測器２７は、この参照画像を用いて画像間予測信号を形成する。この画像間予測信号は減算器３及び加算器１２にそれぞれ供給される。
【００４２】
特定画像設定器１８は所定周期毎のＰピクチャを特定ピクチャとして設定し、その制御情報をスイッチ１９、乗算器１７、２５、多重化器１３に与える。多重化器１３は、特定ピクチャの情報と各ピクチャの符号列を多重化し、符号列出力端子１４より出力する。スイッチ１９は上記の特定ピクチャのときにのみオンとされ、それ以外の非特定ピクチャのときにはオフとされる。
【００４３】
次に、加算器２６における２種類の局部復号画像の加算処理について説明する。まず、非特定ピクチャでは、Ｉピクチャはないので、乗算器２５は１を乗じ、乗算器１７は０を乗じる。すなわち一般的なＰピクチャの符号化と変わらない。なお、Ｂピクチャは参照画像とならないので、加算処理はそもそも関係しない。
【００４４】
一方、特定ピクチャでは、Ｐピクチャの局部復号画像とＩピクチャの局部復号画像の加算を行うために、乗算器２５と乗算器１７は共に係数０．５を入力局部復号画像に乗じる。互いの画像に含まれる雑音成分が白色雑音の場合は、加算により３ｄＢのＳ／Ｎが改善できるが、Ｐピクチャの局部復号画像のノイズ成分とＩピクチャの局部復号画像のノイズ成分は、それぞれ処理方法が異なるものの、高い周波数成分で量子化が粗くなっているなど共通点もあるので、雑音成分にも相関があり、３ｄＢの改善は得られない。しかし、同一ではないので、ある程度の改善は見込まれる。仮に半分の１．５ｄＢであるとすると、符号量でこれに見合う改善を行うためには３０％程度符号量を増加させる必要がある。
【００４５】
一般に、量子化器５、２１の各量子化ステップ幅を各々設定することで、ＩピクチャはＰピクチャより再生画像の品質を高めに設定する。これは、ＧＯＰのすべての画像の参照画像の基となるＩピクチャの品質を高めにすることが、ＧＯＰ全体の画質向上に寄与するためである。一方、Ｐピクチャの再生画像とＩピクチャの再生画像でＳ／Ｎが異なると、加算はあまり有効でなくなる。そこで、Ｉピクチャの符号量をある程度減らすと、ＰピクチャとＳ／Ｎが同等になり、最大の効果が得られる。
【００４６】
本発明で編集又は復号する符号列は、通常のＧＯＰ構成に対しＰピクチャが追加されているので、その分符号量が多くなるが、Ｉピクチャの符号量を減らしてＳ／Ｎを下げても、ＩピクチャとＰピクチャの加算で参照画像のＳ／Ｎが保持できれば、再生画像、符号量共に通常のＧＯＰと同等となる。
【００４７】
ここで、発生符号量を通常ＧＯＰ及びクローズド（Closed）ＧＯＰと比較してみる。Ｉピクチャの平均符号量を１０００ｋｂｉｔ、Ｐピクチャの平均符号量を３００ｋｂｉｔ、Ｂピクチャの平均符号量を１００ｋｂｉｔとする。毎秒３０フレームの画像で、Ｐ（Ｉ）ピクチャの周期を３フレームとする通常ＧＯＰの場合、ＧＯＰの長さを１５フレームとすると、１秒中の各ピクチャ平均数から平均転送レートは６.４Ｍｂｐｓとなる。
【００４８】
一方、クローズド（Closed）ＧＯＰの場合は、ＧＯＰの大きさが通常ＧＯＰとは異なり、ＧＯＰの長さが１３フレームで平均転送レートが６.９２Ｍｂｐｓ、ＧＯＰの長さが１６フレームで平均転送レートが６.５６Ｍｂｐｓとなり、いずれも通常ＧＯＰに比べて平均転送レートが増加する。また、ＧＯＰの長さが１３フレームではアクセス性がやや向上するが、１６フレームの場合は低下する。両者から１５フレーム相当の符号量を得ると６.６８Ｍｂｐｓとなり、通常のＧＯＰに対して４．４％の符号量増加となる。
【００４９】
本実施の形態デ入力される符号列は、Ｉピクチャの平均符号量を通常のＧＯＰやクローズドＧＯＰと同じとすると平均転送レートは７.０Ｍｂｐｓとなるが、３０％落として７００ｋｂｉｔとすると平均転送レートが６.４Ｍｂｐｓとなり、通常ＧＯＰの場合と同じになる。これは通常ＧＯＰのＩピクチャの符号量を、ＩピクチャとＰピクチャに割り振った形となる。
【００５０】
次に、動画像符号列について説明する。図２に示した符号化装置で符号化された符号列の形成において、特定ピクチャのＰピクチャ符号列をＧＯＰ（画像群）の最後にし、ＩピクチャをＧＯＰの最初にする。従って、特定ピクチャにおいては、Ｐピクチャ、Ｉピクチャの順で符号列が配置され、一つのＧＯＰで見るとＩピクチャで始まり、Ｐピクチャで終わる。この本実施の形態のＧＯＰ構成を図７（ｃ）に示す。
【００５１】
一方、符号列ではＢピクチャとＰ（Ｉ）ピクチャは逆転するので、最後はＰピクチャにならず、その前のＢピクチャとなる。すなわち、形成されるＧＯＰ（画像群）の符号列は、図９（ｃ）に示すように、特定ピクチャのピクチャ内独立符号化されたＩピクチャ符号列Ｉ１で始まり、次の特定ピクチャの直前にある双方向予測符号化されたＢピクチャ符号列Ｂ１５で終了する。
【００５２】
このＧＯＰ構成は、特定フレームの重複は無視して１ＧＯＰだけを比較するとクローズド（Closed）ＧＯＰと同様であり、特定フレームでＩピクチャまたはＰピクチャの一方を削除すると、削除された方によりＧＯＰの構成は変化するが、ピクチャの並びは通常ＧＯＰの並びと同様になる。すなわち、本実施の形態のＧＯＰは、クローズド（Closed）ＧＯＰと通常ＧＯＰの両方の特性を兼ね備えることができる。
【００５３】
図１に戻って説明するに、図２の構成の動画像符号化装置により生成された符号列Ａは、入力端子３１を介して符号列バッファ３３に供給されて一時蓄積される一方、画像タイプ検出器３５に供給される。また、これと同時に、図２の構成の動画像符号化装置により生成された別の符号列Ｂは、入力端子３２を介して符号列バッファ３４に供給されて一時蓄積される一方、画像タイプ検出器３５に供給される。なお、入力符号列Ａ及びＢは、例えば異なる記録媒体から互いに独立に再生されて入力されてもよいし、配信された符号列でもよい。
【００５４】
画像タイプ検出器３５は、入力符号列Ａ、Ｂのヘッダから画像タイプ（Ｉ、Ｐ、Ｂ）をそれぞれ検出し、それらの検出情報を切替え制御器３６に供給する。切替え制御器３６は、両方の入力符号列Ａ、Ｂの画像タイプと、編集情報入力端子３０を介して外部から入力される編集タイミングの情報（編集情報）とに基づいて、スイッチ３７を切替え制御する。
【００５５】
スイッチ３７は、切替え制御器３６から与えられる制御情報に基づき、符号列バッファ３３又は符号列バッファ３４から切替えタイミングに合わせて出力されるピクチャを選択する。スイッチ３７により選択されたピクチャは、フラグ挿入器３８に供給され、ここで編集点を示す符号が挿入又は書き換えられる。すなわち、フラグ挿入器３８は、ブロークンリンク（Bloken Link）のフラグを立て、最終的な編集された符号列を符号列出力端子３９へ出力する。
【００５６】
この実施の形態では、クローズド（Closed）ＧＯＰの場合と同様にＧＯＰ単位で符号列の編集が可能になる。その様子の一例を図３に示す。すなわち、入力端子３１に入力される図３（ａ）に示す符号列ＡのあるＧＯＰとＧＯＰの間に、入力端子３２に入力される同図（ｃ）に示す符号列Ｂの１ＧＯＰが、スイッチ３７の切替えにより挿入されて、同図（ｂ）に示すような編集された符号列が得られ、出力端子３９へ出力される。
【００５７】
ここで、この実施の形態で編集する符号列の各ＧＯＰは、前述したようにＧＯＰの最初のピクチャと最後のピクチャが、図７（ｃ）に示すようにＩピクチャとＰピクチャの重複ピクチャとなっている。従って、従来の編集装置と処理が異なる。まず、画像の長さについて、ＧＯＰの最後のＰピクチャは、ＧＯＰの長さ（時間）には組み入れないで、編集時間の計算を行う。従って、本実施の形態のＧＯＰ構成の符号列が１６フレームであっても、１５フレームと見なす。
【００５８】
次に、特定ピクチャの再生制御で、ＧＯＰ単位で編集を行った場合、編集点となる特定ピクチャは、前のＧＯＰのＰピクチャ、後のＧＯＰのＩピクチャいずれもが復号化再生可能である。一方、編集が行われているので画像内容は異なる。符号列が重複する点を積極的に利用する方法としては、再生時にどちらの画像を出力するか、制御情報を入れておけば、同じ符号列で編集点を１ピクチャ前後させることができる。
【００５９】
また、従来クローズド（Closed）ＧＯＰでは復号化装置で処理変更がないので、編集が行われていることを示すフラグ（Bloken Link）を立てる必要はなかったが、本手法においては復号化処理を切り替える必要があるので、ブロークンリンク（Bloken Link）のフラグを立てる必要がある。このため、前述したように、フラグ挿入器３８でブロークンリンク（Bloken Link）のフラグを立てている。
【００６０】
次に、本発明になる動画像復号化装置の各実施の形態について説明する。図４は本発明になる動画像復号化装置の第１の実施の形態のブロック図を示す。この動画像復号化装置は、図２に示した動画像符号化装置の一例に対応する復号化装置の構成を示しており、これは編集が行われてない画像連続性が保たれた符号列を復号する通常再生の場合である。
【００６１】
図４において、符号入力端子４１より入来する符号列は、多重化分離器４２によりピクチャのヘッダに基づきＩピクチャの符号列とそれ以外の符号列に分離される。ＰピクチャやＢピクチャの符号列は、可変長復号化器４３に供給され、Ｉピクチャの符号列は可変長復号化器４４に供給される。
【００６２】
Ｐ（Ｂ）ピクチャの符号列は、可変長復号化器４３で予測残差の可変長符号が固定長の符号に戻され、逆量子化器４５に供給される。逆量子化器４５は、入力された固定長符号を、量子化パラメータに従って逆量子化して予測残差の再生ＤＣＴ係数値を得、これを逆ＤＣＴ４６に供給する。
【００６３】
逆ＤＣＴ４６は８×８個の係数を復号予測残差信号に変換し、加算器４７に供給する。加算器４７は上記の復号予測残差信号に、画像間予測器５５から与えられる予測信号を加算して復号画像信号を得る。この様にして得られたＰ（Ｂ）ピクチャの復号画像信号は、乗算器５２に供給される。
【００６４】
一方、多重化分離器４２で分離されたＩピクチャの符号列は、可変長復号化器４４で復号化され、逆量子化器４８で逆量子化され、逆ＤＣＴ４９で復号化されて再生画像信号とされた後、乗算器５１に入力される。可変長復号化器４４、逆量子化器４８、逆ＤＣＴ４９の動作は、可変長復号化器４３、逆量子化器４５、逆ＤＣＴ４６と同様であるが、パラメータはＩピクチャ用のものとなる。
【００６５】
また、多重分離器４２は入力された符号列中のピクチャヘッダからピクチャのＩＤを検出して、その結果情報を特定画像制御器５０に供給する。特定画像制御器５０は、特定ピクチャを検出し、その制御情報を乗算器５１及び５２にそれぞれ供給する。乗算器５１は、上記の制御情報に従って逆ＤＣＴ４９からのＩピクチャの復号画像信号に０から１の値を乗じて、加算器５３に与える。他方、乗算器５２は、上記の制御情報に従って加算器４７からのＰ（Ｂ）ピクチャの復号画像信号に０から１の値を乗じて、加算器５３に与える。
【００６６】
加算器５３は、乗算器５１及び５２から取り出された２種類の復号画像信号を加算して再生画像信号を得る。加算器５３による加算は特定ピクチャのみで行われ、このとき乗算器５１、乗算器５２共に係数０．５が乗算される。それ以外では、乗算器５２で係数１と復号画像信号との乗算が、乗算器５１で係数０と復号画像信号との乗算がそれぞれ行われるため、加算器５３からは加算器４７からのＰ（Ｂ）ピクチャの復号画像信号がそのまま出力される。
【００６７】
特定ピクチャでは再生画像信号は加算器５３での加算により、乗算器５１、５２から取り出された各復号画像信号よりＳ／Ｎが改善されたものとなる。このような復号化の様子を図５（ａ）に示す。すなわち、図５（ａ）において、ＩピクチャとＰピクチャの加算が行われている部分が、上記の特定ピクチャでの加算器５３での加算による復号化を模式的に示している。
【００６８】
加算器５３から出力された再生画像信号は、Ｂピクチャではスイッチ５６を介して再生画像出力端子５７よりそのまま出力される。一方、加算器５３から出力された再生画像信号は、Ｐ（Ｉ）ピクチャでは画像メモリ５４にいったん蓄えられ、画像間予測処理のための参照画像とされると共に遅延させられた後、画像間予測器５５に供給され、ここでこの参照画像を用いて予測信号とされて加算器４７に入力される。スイッチ５６は遅延されたＢピクチャと、画像メモリ５４で遅延されたＰ（Ｉ）ピクチャを選択して出力端子５７へ出力する。
【００６９】
次に、本発明になる動画像復号化装置の第２の実施の形態について説明する。図６は本発明になる動画像復号化装置の第２の実施の形態のブロック図を示す。同図中、図４と同一構成部分には同一符号を付し、その説明を省略する。図６の第２の実施の形態の復号化装置は、図１の動画像編集装置により符号列編集が行われ、画像連続性が保たれない場合の復号化を行う装置である。
【００７０】
図６において、加算器４７から出力されるＢピクチャの復号画像信号は、スイッチ６１を介して再生画像出力端子５７よりそのまま出力される。一方、加算器４７から出力されるＰピクチャの復号画像信号は、画像メモリ５８に一旦保持される。また、逆ＤＣＴ４９から出力されるＩピクチャの復号画像信号は、画像メモリ５９に一旦保持される。
【００７１】
ここで、ＧＯＰは編集が行われているので、特定ピクチャのＰピクチャとＩピクチャは形式的に同一ピクチャとなっているが、Ｐピクチャは前ＧＯＰのものであり、Ｉピクチャは後のＧＯＰのものである。そこで、スイッチ６０は、画像メモリ５８及び５９からの２種類の復号画像信号から次のように参照画像として適切な方を選択する。
【００７２】
特定ピクチャの復号化の次には、前ＧＯＰのＢピクチャの復号化が行われるが、それには画像メモリ５８に保持されているＰピクチャの復号画像を選択する。続けて、次のＧＯＰのＰピクチャ及びＢピクチャの復号化では、画像メモリ５９に保持されているＩピクチャの復号画像を選択する。この場合の復号化の様子を図５（ｂ）に示す。図で矢印は画像間予測の関係である。
【００７３】
図６に示した復号化装置の復号化では、画像間予測の参照画像が符号化装置の参照画像と若干異なることになるが、いずれも同一画像に対する復号画像であり、量子化雑音成分以外の元の画像は共通である。参照画像の変化は、編集点直前は２ピクチャのみ、編集点後は１ＧＯＰに影響する。しかし、編集点後は予測残差成分が順次加算されるので、参照画像変化の影響は次第に少なくなる。一方、視覚特性を考慮すると、編集でシーンが変わった場合、劣化にはかなり気付き難く、特に変化直後は０．１秒程度の間検知能力が大きく低下するといわれている。従って、劣化の視覚的影響は極めて小さい。
【００７４】
再生画像出力は、スイッチ６１で選択される。スイッチ６１の動作は特定ピクチャ以外は図４のスイッチ５６と同様である。特定フレームではＩピクチャとＰピクチャのいずれを出力することも可能であるので、どちらを選択するかあらかじめ決められていてもよいが、符号列編集装置にて符号列に制御情報が入れられている場合は、それに従って制御する。
【００７５】
図６はＧＯＰ編集が行われた符号列の復号化装置であるが、実際の復号化装置では、通常の復号とＧＯＰ編集が行われた符号列の復号の両方を行う必要がある。従って、図４の第１の実施の形態の復号化装置と、図６の第２の実施の形態の復号化装置とは一体化され、制御情報により処理方法をそれぞれの形態に切り替えて復号することになる。
【００７６】
【発明の効果】
以上説明したように、本発明の動画像編集装置及び方法によれば、特定ピクチャでは片方向予測符号化と共にピクチャ内独立でも符号化した符号列があり、特定ピクチャのピクチャ内独立符号化された符号列で始まり、特定ピクチャの直前のピクチャの双方向予測符号化された符号列で終了する符号列を一つの符号列群とし、この符号列群単位で連続された第１及び第２の符号列に対して編集を行うに際し、上記の符号列群の単位で符号列の入れ替えることにより、特定ピクチャに含まれるピクチャ内独立符号化ピクチャと片方向予測符号化ピクチャとの間で区切るようにしたため、符号列の群（ＧＯＰ）単位で符号列が編集された場合の不連続点では、復号化装置においてＧＯＰ終端は片方向予測符号化ピクチャを、ＧＯＰ始端はピクチャ内独立符号化ピクチャを参照画像として他ピクチャの画像間予測を行うようにしたため、通常ＧＯＰと同等の符号化効率で片方向予測符号化ピクチャの周期性を保ちながら、クローズド（Closed）ＧＯＰ同様に、ＧＯＰ単位の符号列編集ができる符号列を生成することができる。
【００７７】
また、本発明の動画像復号化装置及び方法によれば、復号化する符号列は、特定ピクチャでは片方向符号化ピクチャとピクチャ内独立符号化ピクチャを持ち、２種類のピクチャが重複することになるが、両者の局部復号画像を加算することで、再生画像のＳ／Ｎが改善されて画質が向上する。また、その再生画像を画像間予測の参照画像とすることで、画像間予測効率も改善することができ、これにより、上記の特定ピクチャではその分総符号量を減らすこともできる。
【００７８】
また、本発明の動画像復号化装置及び方法によれば、編集された符号列中の特定ピクチャより時間的に前のピクチャの復号化では、片方向予測符号化ピクチャの復号画像を参照画像とし、特定ピクチャより時間的に後のピクチャの復号化では、ピクチャ内独立符号化ピクチャの復号画像を参照画像とすることにより、視覚特性を考慮した場合、編集点での劣化の目立ちにくい復号化ができるため、再生画像の画質の劣化の視覚的影響が極めて小さい、画質の良好な動画像の復号ができる。
【図面の簡単な説明】
【図１】 本発明の動画像編集装置の一実施の形態のブロック図である。
【図２】 本発明で復号又は編集する符号列を生成する動画像符号化装置の一例のブロック図である。
【図３】 動画符号列の編集の様子の一例を示す図である。
【図４】 本発明の動画像復号化装置の第１の実施の形態のブロック図である。
【図５】 本発明の復号化の各例をピクチャ単位で示す図である。
【図６】 本発明の動画像復号化装置の第２の実施の形態のブロック図である。
【図７】 ＧＯＰ構成の各例を示す図である。
【図８】 従来の動画像符号化装置の一例のブロック図である。
【図９】 ＧＯＰ（画像群）の符号列構成の各例を示す図である。
【符号の説明】
３０ 編集情報入力端子
３１、３２ 符号列入力端子
３３、３４ 符号列バッファ
３５ 画像タイプ検出器
３６ 切替え制御器
３７、５６、６０、６１ スイッチ
３８ フラグ挿入器
４１ 符号入力端子
４２ 多重化分離器
４３、４４ 可変長復号化器
４５、４８ 逆量子化器
４６、４９ 逆ＤＣＴ
４７、５３ 加算器
５１、５２ 乗算器
５４、５８、５９ 画像メモリ
５５ 画像間予測器
５７ 復号画像出力端子

Claims (6)

1. ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列を編集する動画像編集装置において、
   前記片方向予測で符号化されるピクチャの一部を特定ピクチャとし、前記特定ピクチャでは前記片方向予測符号化と共に前記ピクチャ内独立でも符号化した第１の符号列と、前記第１の符号列とは異なる画像の、前記片方向予測で符号化されるピクチャの一部を特定ピクチャとし、前記特定ピクチャでは前記片方向予測符号化と共に前記ピクチャ内独立でも符号化した第２の符号列とを入力とし、この入力された第１及び第２の符号列の各ピクチャの画像タイプをそれぞれ検出する画像タイプ検出手段と、
   前記第１及び第２の符号列の一方を選択する選択手段と、
   前記画像タイプ検出手段により検出された前記第１及び第２の符号列の各ピクチャの画像タイプと、編集タイミングの情報とに基づいて、前記ピクチャ単位で前記第１の符号列のピクチャ又は前記第２の符号列のピクチャを前記選択手段により選択させて、前記特定ピクチャのピクチャ内独立符号化された符号列で始まり、前記特定ピクチャの直前のピクチャの双方向予測符号化された符号列で終了する符号列を一つの符号列群とし、この符号列群単位で符号列の入れ替えを行われた編集後の符号列を出力する切替え制御手段と
   を有することを特徴とする動画像編集装置。
2. ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列を編集する動画像編集方法において、
   前記片方向予測で符号化されるピクチャの一部を特定ピクチャとし、前記特定ピクチャでは前記片方向予測符号化と共に前記ピクチャ内独立でも符号化した第１の符号列と、前記第１の符号列とは異なる画像の、前記片方向予測で符号化されるピクチャの一部を特定ピクチャとし、前記特定ピクチャでは前記片方向予測符号化と共に前記ピクチャ内独立でも符号化した第２の符号列とを入力とし、この入力された第１及び第２の符号列の各ピクチャの画像タイプをそれぞれ検出する第１のステップと、
   前記第１及び第２の符号列の一方を選択する第２のステップと、
   前記第１及び第２の符号列の各ピクチャの画像タイプと、編集タイミングの情報とに基づいて、前記ピクチャ単位で前記第１の符号列のピクチャ又は前記第２の符号列のピクチャを前記選択手段により選択させて、前記特定ピクチャのピクチャ内独立符号化された符号列で始まり、前記特定ピクチャの直前のピクチャの双方向予測符号化された符号列で終了する符号列を一つの符号列群とし、この符号列群単位で符号列の入れ替えを行われた編集後の符号列を出力する第３のステップと
   を含むことを特徴とする動画像編集方法。
3. ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列であり、前記片方向予測で符号化されるピクチャの一部を特定ピクチャとし、前記特定ピクチャでは前記片方向予測符号化と共に前記ピクチャ内独立でも符号化した符号列を入力として受け、その入力符号列から前記特定ピクチャのピクチャ内独立符号化ピクチャと、片方向予測符号化ピクチャ及び双方向予測符号化ピクチャとに分離する多重化分離手段と、
   前記多重化分離手段により分離された、前記片方向予測符号化ピクチャの符号列を復号化して復号画像を得る第１の復号化手段と、
   前記特定ピクチャにおいて、前記ピクチャ内独立符号化ピクチャを復号化し、ピクチャ内独立符号化ピクチャの復号画像を得る第２の復号化手段と、
   前記特定ピクチャにおいて、前記第１の復号化手段により得られた前記片方向予測符号化ピクチャの復号画像と、前記第２の復号化手段により得られた前記ピクチャ内独立符号化ピクチャの復号画像とを加算して、前記第１の復号化手段で用いる他ピクチャの画像間予測処理の前記参照画像とする画像間予測手段と
   を有することを特徴とする動画像復号化装置。
4. ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列であり、前記片方向予測で符号化されるピクチャの一部を特定ピクチャとし、前記特定ピクチャでは前記片方向予測符号化と共に前記ピクチャ内独立でも符号化した符号列から前記特定ピクチャのピクチャ内独立符号化ピクチャと、片方向予測符号化ピクチャ及び双方向予測符号化ピクチャとに分離する第１のステップと、
   前記第１のステップで分離された、前記片方向予測符号化ピクチャの符号列を復号化して復号画像を得る第２のステップと、
   前記特定ピクチャにおいて、前記ピクチャ内独立符号化ピクチャを復号化し、ピクチャ内独立符号化ピクチャの復号画像を得る第３のステップと、
   前記特定ピクチャにおいて、前記第２のステップで得られた前記片方向予測符号化ピクチャの復号画像と、前記第３のステップで得られた前記ピクチャ内独立符号化ピクチャの復号画像とを加算して、前記第２のステップで用いる他ピクチャの画像間予測処理の前記参照画像とする第４のステップと
   を含むことを特徴とする動画像復号化方法。
5. ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列であり、前記片方向予測で符号化されるピクチャの一部を特定ピクチャとし、前記特定ピクチャでは前記片方向予測符号化と共に前記ピクチャ内独立でも符号化した符号列から前記特定ピクチャのピクチャ内独立符号化ピクチャと、片方向予測符号化ピクチャ及び双方向予測符号化ピクチャとに分離する多重化分離手段と、
   前記多重化分離手段により分離された、前記片方向予測符号化ピクチャの符号列を復号化して復号画像を得る第１の復号化手段と、
   前記特定ピクチャにおいて、前記ピクチャ内独立符号化ピクチャを復号化し、ピクチャ内独立符号化ピクチャの復号画像を得る第２の復号化手段と、
   前記特定ピクチャより時間的に前のピクチャの復号化では、前記第１の復号化手段により得られた前記片方向予測符号化ピクチャの復号画像を前記参照画像とし、前記特定ピクチャより時間的に後のピクチャの復号化では、前記第２の復号化手段により得られた前記ピクチャ内独立符号化ピクチャの復号画像を前記参照画像とする画像間予測手段と
   を有することを特徴とする動画像復号化装置。
6. ピクチャ内独立、片方向予測、双方向予測の３種類の符号化手法で動画像の各ピクチャを符号化して得た符号列であり、前記片方向予測で符号化されるピクチャの一部を特定ピクチャとし、前記特定ピクチャでは前記片方向予測符号化と共に前記ピクチャ内独立でも符号化した符号列から前記特定ピクチャのピクチャ内独立符号化ピクチャと、片方向予測符号化ピクチャ及び双方向予測符号化ピクチャとに分離する第１のステップと、
   前記第１のステップで分離された、前記片方向予測符号化ピクチャ及び前記双方向予測符号化ピクチャの符号列を復号化して復号画像を得る第２のステップと、
   前記特定ピクチャにおいて、前記ピクチャ内独立符号化ピクチャを復号化し、ピクチャ内独立符号化ピクチャの復号画像を得る第３のステップと、
   前記特定ピクチャより時間的に前のピクチャの復号化では、前記第２のステップで得られた前記片方向予測符号化ピクチャの復号画像を前記参照画像とし、前記特定ピクチャより時間的に後のピクチャの復号化では、前記第３のステップで得られた前記ピクチャ内独立符号化ピクチャの復号画像を前記参照画像とする第４のステップと
   を含むことを特徴とする動画像復号化方法。

Images