JP3188081B2

JP3188081B2 - 画像符号化方法および画像符号化装置

Info

Publication number: JP3188081B2
Application number: JP30178293A
Authority: JP
Inventors: 俊也 ▲高▼橋
Original assignee: Panasonic Corp; Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Corp; Panasonic Holdings Corp
Priority date: 1993-12-01
Filing date: 1993-12-01
Publication date: 2001-07-16
Anticipated expiration: 2016-07-16
Also published as: JPH07154802A

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、圧縮した画像データを
編集する際に用いる画像符号化方法および画像符号化装
置に関するものである。

【０００２】

【従来の技術】デジタル画像信号は膨大な情報量を有
し、伝送，記録のためには高能率符号化が不可欠であ
る。近年、様々な画像圧縮符号化技術が開発され、一部
は画像符号化，復号化装置として製品化されている。

【０００３】以下、図面を参照しながら、上述した従来
の画像符号化装置の一例であるＭＰＥＧ方式について説
明する。

【０００４】図８は従来の画像符号化装置の構成を示す
ブロック図である。図８において、80は伝送路、81は動
き検出回路、82はＤＣＴモード判定回路、83はＤＣＴ変
換回路、84は量子化回路、85は可変長符号化回路、86は
逆量子化回路、87は逆ＤＣＴ変換回路、88はフレームバ
ッファ、89は動き補償回路であり、図中、実線は信号ラ
イン、破線は制御ラインを示す。また、図９は動き補償
予測方法の説明図、図10は図８におけるフレームバッフ
ァ88および動き補償回路89の構成例のブロック図であ
る。

【０００５】以上のように構成された従来の画像符号化
装置について、以下その動作を説明する。映像信号はイ
ンターレース走査されており、フレーム単位に区切って
入力するものとする。符号化の最初のフレーム、すなわ
ち図９におけるフレームｔの画像は、差分をとることな
く、フレーム内符号化する。まず、入力画像データは、
２次元ブロック単位でライン間の差分をとるなどして動
きの大小をＤＣＴモード判定回路82で検出し、フレーム
単位あるいはフィールド単位でＤＣＴを行うかの判定を
行い、その結果をＤＣＴモード情報として出力する。Ｄ
ＣＴ変換回路83は前記ＤＣＴモード情報を入力し、フレ
ーム単位あるいはフィールド単位でＤＣＴを行い、画像
データを変換係数に変換する。変換係数は量子化回路84
で量子化した後、可変長符号化回路85で可変長符号化し
伝送路80に送出する。量子化後の変換係数は、同時に逆
量子化回路86，逆ＤＣＴ変換回路87を経て実時間データ
に戻し、フレームバッファ88に蓄える。

【０００６】一般的に画像は相関が高いため、ＤＣＴを
行うと、低い周波数成分に対応する変換係数にエネルギ
ーが集中する。したがって、視覚的に目立たない高い周
波数成分を粗く、重要な成分である低い周波数成分を細
かく量子化を行うことで、画質劣化を最小限に留め、か
つデータ量を減らすことが可能となる。また、インター
レース走査した画像は、動きが小さいときはフレーム内
の相関が大きく、動きが大きいときは、フレーム間の相
関は小さく、逆にフィールド内の相関が大きい。前記し
たインターレース走査の特性を利用し、フレーム単位あ
るいはフィールド単位でＤＣＴを切り換えることによ
り、インターレース画像も効率良く符号化することが可
能となる。

【０００７】一方、図９におけるｔ＋１フレーム以降の
画像は、フレームごとに予測値を計算し、前記予測値と
の差分、すなわち予測誤差を符号化する。

【０００８】ここで、フレーム単位に構成した映像信号
を時間的に前のフレームから予測する予測値の計算方法
に前方予測，後方予測および双方向予測がある。図９が
予測方法の説明図である。時刻ｔのフレームはフレーム
内符号化(以下、フレーム内符号化したフレームをＩフ
レームという)し、次に符号化，復号化済みのＩフレー
ムを用いて、時刻ｔ＋３のフレームをＩフレームと動き
補償した後の差分をとり、その差分を符号化する。この
ように時間的に前のフレームを予測に用いることを前方
予測という(以下、前方予測を用いて符号化したフレー
ムをＰフレームという)。また、時刻ｔ＋１，ｔ＋２の
フレームは、符号化，復号化済みのＩ，Ｐフレームを用
いて同様に動き補償した後、差分符号化する。この際、
予測画像は、Ｉフレーム(前方予測)，Ｐフレーム(後方
予測)，ＩフレームとＰフレームの平均値(双方向予測)
のうちから誤差最小のものをブロック単位に選択して構
成する(以下、双方向予測をフレーム内の一部もしくは
全部に用いて符号化したフレームをＢフレームとい
う)。Ｂフレームは、時間的に前後のフレームから予測
するため、新たに現われた物体なども正確に予測するこ
とが可能となり、符号化効率が向上する。

【０００９】符号化装置としては、まず予測に用いる動
きベクトルを動き検出回路81において、例えば、よく知
られた全探索方法を用いて前記２次元ブロック単位に求
める。次に、フレームバッファ88および動き補償回路89
は前記検出した動きベクトルを用いて、次のフレームの
動き補償した予測値を前記２次元ブロック単位で生成す
る。

【００１０】図10の動き補償回路89では双方向予測の予
測値生成について説明する。動き検出回路81で計算され
た動きベクトルは、フレームバッファ88中のアドレス発
生回路882に入力し、フレームメモリ881に記憶した図９
におけるＩおよびＰフレームの画像を読み出す。この
際、ＤＣＴと同様にインターレース画像に対応するた
め、２次元ブロックをフレーム単位、あるいはフィール
ド単位に構成し、それぞれについてベクトルおよび予測
画像を生成する。各２次元ブロックでは、予測誤差とし
て、フレームベクトルを用いた前方予測，双方向予測，
後方予測と、フィールドベクトルを用いた前方予測，双
方向予測，後方予測との計６種類をフレーム間差分２乗
誤差計算回路893〜898で計算し、誤差が最も少ないもの
を誤差比較回路899で選択して、予測値および予測モー
ド情報900を出力する。前記した予測モード情報，動き
ベクトル，ＤＣＴモード情報は、図８における可変長符
号化回路85で可変長符号化し、ＤＣＴ変換係数とともに
伝送路80に送出する。ここで、前記フレーム間差分２乗
誤差計算回路894および897は、フレームメモリ881から
の出力を入力とする平均値計算回路891，892の出力を入
力として処理される。

【００１１】以上の符号化装置によれば、予測誤差を最
適に符号化することになるので、フレーム内符号化のよ
うに画像データを直接符号化する場合に比べ、エネルギ
ーが減少し、さらに高効率な符号化が可能となる(例え
ば、ISO/IEC JTC1/SC29/WG11N0502，“Ｇeneric Ｃodin
g of Ｍoving Ｐictures and Ａssociated Ａudio”，1
993.7)。

【００１２】

【発明が解決しようとする課題】しかしながら、上記の
画像符号化方法で符号化された圧縮画像データを編集す
る場合、差分を符号化しているため種々の問題が生ず
る。図11は従来の圧縮画像データの編集方法を示す説明
図である。以下、図11を用いて上記問題点を説明する。
今、図11(a)と(b)の圧縮画像データを破線部分(ア)でつ
なぐことを説明する。図11に数字で示したのはフレーム
番号である。Ｂフレームは、ＩおよびＰフレームを符号
化した後、符号化するので、圧縮画像データ中では表示
するフレーム順序と番号が入れ替わっている。図11(a)
と(b)の圧縮画像データをつないだ図11(c)の場合、編集
点直後のＰおよびＢフレーム、すなわち圧縮画像データ
(b)におけるフレーム番号８のＰフレームおよびフレー
ム番号６，７のＢフレームは、予測に用いたフレーム番
号５のＩフレームが失われるため復号不能となる。それ
に伴いフレーム番号11のＰフレームを予測に用いるフレ
ーム９以降の画像も復号できないという問題点を有して
いた。

【００１３】本発明は上記問題点に鑑み、簡易な構成
で、フレーム間差分符号化を用いた圧縮画像でも編集を
可能とする画像符号化方法および画像符号化装置を提供
するものである。

【００１４】

【課題を解決するための手段】本発明は上記問題点を解
決するために、フレーム単位に構成した映像信号を時間
的に前のフレームから予測する前方予測、および時間的
に後ろのフレームから予測する後方予測、並びに前方予
測および後方予測の両方を同時に用いた双方向予測の少
なくとも１種類の予測を用いて予測符号化して得た圧縮
画像データＡと、前記と同様に予測符号化して得た圧縮
画像データＢを入力し、前記圧縮画像データＢを復号部
で復号し、前記復号して得た復号画像のうち編集点に該
当するフレームを符号化部でフレーム内符号化し、その
他のフレームの一部あるいは全部を、圧縮画像データＢ
を復号して得た動き補償，動きベクトル，直交変換モー
ド情報を利用して再予測符号化し、編集圧縮画像データ
を作成し、前記圧縮画像データＡと前記編集圧縮画像デ
ータをつなぐことを特徴とする。

【００１５】

【作用】本発明によれば、圧縮画像データを一旦復号
し、編集点直後のフレームをＩフレームに再符号化する
ので、編集によって予測画像が失われることがない。ま
た、Ｐ，Ｂフレームの再符号化には、復号して得た動き
補償，動きベクトル，ＤＣＴモード情報を用いるため、
従来の画像符号化装置で大量の計算が必要であった動き
検出回路，ＤＣＴモード判定回路が不要になり、動き補
償回路も簡易化でき、簡単な構成で圧縮画像データの編
集が可能となる。

【００１６】

【実施例】以下、本発明の各実施例における画像符号化
方法とその装置について図面を参照しながら説明する。

【００１７】図１は本発明の第１の実施例における画像
符号化方法を実施する画像符号化装置の構成を示すブロ
ック図である。図１において、１は画像復号化部で、可
変長復号化回路11，逆量子化回路12，逆ＤＣＴ変換回路
13，フレームバッファ14，簡易動き補償回路15から構成
される。また、２は画像符号化部で、21はＤＣＴ変換回
路、22は量子化回路、23は可変長符号化回路、24は逆量
子化回路、25は逆ＤＣＴ変換回路、26はフレームバッフ
ァ、27は簡易動き補償回路である。３は制御部で、ＣＰ
Ｕを用いている。図中、実線は信号ライン、破線は制御
ラインを示す。

【００１８】図２は図１のフレームバッファ14および簡
易動き補償回路15の構成例図、図３はＣＰＵ３の動作の
一例を示すアルゴリズムの説明図、図４は圧縮画像デー
タの編集方法を示す説明図である。図４において添字′
をつけたフレームは、再符号化することを表している
(以下、図５，図６，図７も同様である)。

【００１９】以上のように構成された画像符号化装置に
ついて、以下図１，図２，図３，図４を用いて説明す
る。

【００２０】今、図４(a)，(b)の圧縮画像データを(c)
のようにつなぐことを説明する。なお、簡単のため編集
点はＰフレームとする。図４(a)の圧縮画像データは、
図１の画像符号化部２に入力すると、図４の破線(ア)で
示す編集点にくるまでは、そのままの状態で出力する。
一方、図４(b)の圧縮画像データは、画像復号化部１お
よび画像符号化部２に入力しているが、画像符号化部２
の出力は、編集点まではスイッチ４の切り換えによって
外部に出力しない。図４(b)の圧縮画像データは、画像
復号化部１で復号する。すなわち、可変長復号化回路11
で可変長逆復号し、逆量子化回路12で逆量子化し、逆Ｄ
ＣＴ変換回路13で復号したＤＣＴモード情報に応じて、
フレームあるいはフィールド単位に逆ＤＣＴして実時間
画像データに戻し、復号する。また、差分符号化してい
るため、復号した動きベクトルおよび動き補償モード情
報を用いて、フレームバッファ14，簡易動き補償回路15
で予測画像を生成し、逆ＤＣＴ変換回路13の出力データ
と加算回路16で加算して復号画像データを作成する。従
来例の画像符号化装置と比較し、図２におけるフレーム
バッファ14の構成は同様であるが、簡易動き補償回路15
が大きく異なる。すなわち、画像符号化部２で動き補償
モードが既に決定しているため、画像復号化部１では、
前記図10で説明したフレーム間差分２乗誤差計算回路89
3〜898を持つ必要がなく、図２のように双方向予測が選
択された場合に必要な平均値計算回路151と、動き補償
モード情報に応じて予測画像を出力するセレクタ152の
みでよい。

【００２１】まず、編集点であることを示す信号が入力
すると、図４(c)に示すように図４(b)の圧縮画像データ
のうち、編集点直後のＰフレームはＩフレームに符号化
し、図４(a)の圧縮画像データに変えて出力する。図４
(b)の圧縮画像データにおけるフレーム番号６，７のＢ
フレームは、前方予測に必要なフレーム番号５のＩフレ
ームが編集によって失われたため、後方予測を用いて符
号化し直す。図４(b)の圧縮画像データのフレーム番号
８以降のＰフレームは、予測に用いた画像が再符号化さ
れたため、予測画像を正しいものに設定し直して、Ｐフ
レームはＰフレームに、ＢフレームはＢフレームに再符
号化(添字′)する。再符号化方法は、従来例とほぼ同様
であるが、動き補償モード情報や動きベクトル，ＤＣＴ
切り換え情報は、図４(b)の圧縮画像データを復号して
得た情報を用いる。したがって、画像符号化部２は、前
記図８に示す従来例の画像符号化装置から多大な計算を
必要とする動き検出回路81，ＤＣＴモード判定回路82を
削除し、簡易動き補償回路27を画像復号化部１と同じ簡
易動き補償回路15に置き換えることが可能になる。以上
の制御を行うのがＣＰＵ３で、そのアルゴリズムを示し
たのが図３である。

【００２２】図３において、(1)は図１の画像符号化装
置の全体を動作を示すメインルーチン、(2)は(1)のＰフ
レームをＩフレームに符号化する部分Ｓ₃のルーチン、
(3)は(1)のＢフレームをＰフレームに符号化する部分Ｓ
₅，Ｓ₇のルーチン、(4)は(1)のＰフレームをＰフレーム
に符号化する部分Ｓ₁₂のルーチン、(5)は(1)のＢフレー
ムをＢフレームに符号化する部分Ｓ₁₃のルーチン、(6)
は(3)のフレーム内符号化ブロック符号化する部分Ｓ₃₅
のルーチン、(7)は(3)の後方予測ブロック符号化する部
分Ｓ₃₆，Ｓ₃₇のルーチンである。

【００２３】本実施例によれば、編集する圧縮画像デー
タを簡単な構成の画像符号化装置で再符号化するため、
フレーム間差分符号化を用いた圧縮画像データであって
も、つないだ後の圧縮画像データが失われることなく編
集が可能となる。

【００２４】図５は本発明の第２の実施例における圧縮
画像データの編集方法の説明図である。図５(b)の圧縮
画像データは編集点(ア)以降にＩフレームを含んでい
る。編集点からフレーム番号11の前までは第１の実施例
と同様の方法で再符号化する。フレーム番号11のＩフレ
ームはフレーム内で符号化しているので、編集しても影
響を受けることはない。したがって、Ｉフレームは再符
号化しない。フレーム番号９，10のＢフレームは編集に
よって、フレーム番号８のＰフレームがＩフレームに再
符号化したため、再符号化(添字′)する。フレーム番号
14以降のフレームは、フレーム番号11のＩフレームを再
符号化していないため、影響はないので再符号化する必
要がなく、図５(b)の圧縮画像データのまま出力する。
以上の動作は、第１の実施例におけるＣＰＵ３のプログ
ラム変更により実現可能である。

【００２５】本実施例によれば、再符号化するフレーム
を少なくでき、再符号化に伴う画質劣化を最小限に留め
ることができる。

【００２６】また、第２の実施例において、フレーム番
号14以降のフレームは、フレーム番号11のＩフレームを
再符号化しないので再符号化しないとしたが、図５(d)
に示したようにＩフレーム直後のＢフレームだけでな
く、すべてのＰ，Ｂフレームを再符号化(添字′)し直し
てもよい。通常、伝送容量等の制約から、転送レートを
一定に範囲に保つように符号化する。本実施例のように
異なった圧縮画像データをつなぐと、転送レートが予め
設定した範囲を越える場合がある。ＣＰＵ３が、圧縮画
像データのデータ量を測定しておき、編集点においてあ
る範囲を越えそうなときは、図５(d)に示すようにフレ
ーム番号14以降のフレームを所定の転送レートに収まる
よう再符号化する。また、転送レートの問題がないとき
は、図５(c)のように再符号化しないように制御する。

【００２７】以上の手法によれば、再符号化するフレー
ムを少なく保ちつつ、編集後の圧縮画像データを所望の
転送レートに収めることが可能となる。

【００２８】図６および図７は本発明の第３の実施例に
おける圧縮画像データの編集方法の説明図である。本実
施例では、接続する図６(b)，図７(b)の圧縮画像データ
の編集点(ア)をＢフレームとしている。編集点をＢフレ
ームに選んだ場合、編集点および、この編集点に連続し
たＢフレームは、符号化の際に予測に用いたＩまたはＰ
フレームが失われるので復号不能となる。本実施例で
は、図６(c)あるいは図７(c)に示したように、予測に用
いた編集点直前の図６(b)のＩまたは図７(b)のＰフレー
ムを復号不能となるＢフレーム数だけ挿入する。予測に
用いた編集点直前のフレームがＰフレームの場合は、図
６(c)のようにＩフレームに再符号化(添字′)する。Ｉ
フレームの場合は、図７(c)に示したように基本的には
そのまま挿入する。転送レートが問題になる場合には、
第２の実施例と同様に、Ｉフレームの場合でも、転送レ
ートが所定の範囲に収まるよう粗く量子化し、再符号化
することも可能である。

【００２９】以上の実施例によれば、接続する圧縮画像
データの編集点がＢフレームであっても、再符号化に伴
う画質劣化を最小限に留め、かつ編集可能である。

【００３０】本実施例では、Ｂフレームが２枚の場合に
ついてのみ説明したが、これに限るものではなく、３枚
以上あるいは１枚の場合にも適用可能である。

【００３１】また、以上の各実施例において、簡単のた
め、各ブロックの動き補償モードでフレーム内符号化ブ
ロックについての説明は省略したが、一般にフレーム内
の２次元ブロック単位にフレーム内符号化ブロックモー
ドを選択することが可能である。Ｂフレームを後方予測
のみで構成したＰフレームに変える際、前方予測ブロッ
ク等の動き補償モードは動きベクトルが圧縮画像データ
の中に含まれず、同じ動き補償モードで再符号化不能な
場合がある。その際には、フレーム内符号化ブロックを
選択することにより再符号化することができる。

【００３２】

【発明の効果】以上説明したように本発明は、圧縮画像
データを一旦復号し、復号して得た編集点直後のフレー
ムをＩフレームに再符号化するので、編集によって予測
画像が失われることがない。また、Ｐ，Ｂフレームの再
符号化には復号して得た動き補償，動きベクトル，ＤＣ
Ｔモード情報を用いるため、簡単な構成で圧縮画像デー
タの編集が可能となる。

【図面の簡単な説明】

【図１】本発明の第１の実施例における画像符号化方法
を実施する画像符号化装置の構成を示すブロック図であ
る。

【図２】本発明の第１の実施例における簡易動き補償回
路およびフレームバッファの構成例図である。

【図３】本発明の第１の実施例におけるＣＰＵの動作の
一例を示すアルゴリズムの説明図である。

【図４】本発明の第１の実施例における圧縮画像データ
の編集方法を示す説明図である。

【図５】本発明の第２の実施例における圧縮画像データ
の編集方法を示す説明図である。

【図６】本発明の第３の実施例における圧縮画像データ
の編集方法を示す説明図である。

【図７】本発明の第３の実施例における他の圧縮画像デ
ータの編集方法を示す説明図である。

【図８】従来の画像符号化装置の構成を示すブロック図
である。

【図９】従来の動き補償予測方法の説明図である。

【図１０】図８のフレームバッファおよび動き補償回路
の構成を示すブロック図である。

【図１１】従来の圧縮画像データの編集方法を示す説明
図である。

【符号の説明】

１…画像復号化部、２…画像符号化部、３…制御部
(ＣＰＵ)、４…スイッチ、 11…可変長復号化回路、
12，24…逆量子化回路、 13，25…逆ＤＣＴ変換回
路、 14，26…フレームバッファ、 15，27…簡易動き
補償回路、 21…ＤＣＴ変換回路、 22…量子化回路、
23…可変長符号化回路。

Claims

(57)【特許請求の範囲】

【請求項１】フレーム単位に構成した映像信号を時間
的に前のフレームから予測する前方予測、および時間的
に後ろのフレームから予測する後方予測、並びに前方予
測および後方予測の両方を同時に用いた双方向予測の少
なくとも１種類の予測を用いて予測符号化して得た圧縮
画像データＡと、前記と同様に予測符号化して得た圧縮
画像データＢを入力し、前記圧縮画像データＡと前記圧
縮画像データＢを編集点にてつなぐとき、前記圧縮画像
データＢのうち編集点に該当するフレームを復号部で復
号し、前記復号して得た復号画像を符号化部でフレーム
内符号化し編集圧縮画像データを作成し、前記圧縮画像
データＡと前記編集圧縮画像データをつなぐことを特徴
とする画像符号化方法。
【請求項２】前記圧縮画像データＢを入力し、復号部
で復号し、前記復号して得た復号画像を、前記同様に復
号して得た動き補償の情報を利用して圧縮画像データＢ
の一部あるいは全部を再予測符号化し、編集点以外のフ
レームの編集圧縮画像データを作成することを特徴とす
る請求項１記載の画像符号化方法。
【請求項３】前記圧縮画像データＢを入力し、復号部
で復号し、前記復号して得た復号画像を、前記同様に復
号して得た動きベクトルの情報を利用して再予測符号化
し、編集点以外のフレームの編集圧縮画像データを作成
することを特徴とする請求項１記載の画像符号化方法。
【請求項４】前記圧縮画像データＢを入力し、復号部
で復号し、前記復号して得た復号画像を更に符号化する
際に、双方向予測フレームは前方予測フレームあるいは
後方予測フレームのうちいずれか一方に変更して圧縮画
像データＢの一部あるいは全部を符号化することを特徴
とする請求項１記載の画像符号化方法。
【請求項５】前記圧縮画像データＢを入力し、復号部
で復号し、前記復号して得た復号画像を更に符号化する
際に、前記圧縮画像データＢのうちフレーム内符号化し
たフレームの一部あるいは全部を再符号化しないことを
特徴とする請求項１記載の画像符号化方法。
【請求項６】前記圧縮画像データＢを入力し、復号部
で復号し、前記復号して得た復号画像を更に符号化する
際に、前記圧縮画像データＢのうち前方予測符号化した
フレーム、後方予測符号化したフレームおよび双方向予
測符号化したフレームの一部あるいは全部をフレーム内
符号化フレームに変更して符号化することを特徴とする
請求項１記載の画像符号化方法。
【請求項７】前記圧縮画像データＢを入力し、復号部
で復号し、前記復号して得た復号画像を更に符号化する
場合において、前記圧縮画像データＢのうち双方向予測符号化した一部
あるいは全部のフレームをフレーム内符号化フレームに
再符号化して置き換える際に、前記フレーム内符号化フ
レームを、前記圧縮画像データＢ中で前記双方向予測符
号化フレームの予測値として用いたフレーム内符号化フ
レームもしくは前方予測符号化フレームを再符号化する
ことにより生成することを特徴とする請求項１記載の画
像符号化方法。
【請求項８】フレーム単位に構成した映像信号を時間
的に前のフレームから予測する前方予測、および時間的
に後ろのフレームから予測する後方予測、並びに前方予
測および後方予測の両方を同時に用いた双方向予測の少
なくとも１種類の予測を用いて予測符号化するととも
に、前記映像信号を２次元ブロックに分割し、前記ブロ
ック単位で、フレーム単位あるいはフィールド単位の直
交変換を切り換えて符号化した圧縮画像データＡと、前
記と同様に符号化して得た圧縮画像データＢを入力し、
前記圧縮画像データＡと前記圧縮画像データＢを編集点
にてつなぐ場合において、前記圧縮画像データＢを復号部で復号し、復号画像およ
び各２次元ブロックがフレーム単位あるいはフィールド
単位の直交変換であることを示す直交変換モード情報を
得て、前記復号画像を更に符号化する際に、前記直交変換モード情報を利用して符号化するととも
に、前記復号画像のうち編集点に該当するフレームを符
号化部でフレーム内符号化して編集圧縮画像データを作
成し、前記圧縮画像データＡと前記編集圧縮画像データ
をつなぐことを特徴とする画像符号化方法。
【請求項９】フレーム単位に構成した映像信号を時間
的に前のフレームから予測する前方予測、および時間的
に後ろのフレームから予測する後方予測、並びに前方予
測および後方予測の両方を同時に用いた双方向予測の少
なくとも１種類の予測を用いて予測符号化して得た圧縮
画像データＡと、前記と同様に予測符号化して得た圧縮
画像データＢを入力し、前記圧縮画像データＢを復号す
る復号部と、前記復号部で復号して得た動き補償，動きベクトル，前
記圧縮画像データＢの各フレーム内の２次元ブロック単
位がフレーム単位あるいはフィールド単位の直交変換で
あることを示す直交変換モード情報を入力し、前記動き
補償，前記動きベクトル，前記直交変換モード情報の少
なくとも一種類を利用して前記復号して得た復号画像を
更に符号化し編集圧縮画像データを作成する符号化部
と、編集点を示す信号および前記動き補償，前記動きベクト
ル，前記直交変換モード情報を入力し、前記編集圧縮画
像データの符号化方法を制御する制御部とからなり、前記圧縮画像データＢのうち編集点に該当するフレーム
を復号部で復号し、前記復号して得た復号画像を前記符
号化部でフレーム内符号化し編集圧縮画像データを作成
し、前記圧縮画像データＡと前記編集圧縮画像データを
つなぐことを特徴とする画像符号化装置。