JPH11341435A

JPH11341435A - 編集方法および編集装置

Info

Publication number: JPH11341435A
Application number: JP14115098A
Authority: JP
Inventors: Shinya Iki; 信弥伊木; Koji Obata; 功史小幡; Motoki Kato; 元樹加藤
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1998-05-22
Filing date: 1998-05-22
Publication date: 1999-12-10
Also published as: KR100615340B1; CN1169369C; CN1239856A; KR19990088476A; US6414999B1

Abstract

(57)【要約】【課題】動きベクトルを求めるための計算量を減少さ
せ、また、編集処理による画質劣化を抑える。【解決手段】前のＧＯＰ１では、編集点がＩ２２より
後ろにあり、編集点がＩまたはＰピクチャの直後にはな
いので、ＧＯＰ１を復号する。編集点以降（Ｐ２８以
降）を破棄し、Ｐ２５の後のＢ２６、Ｂ２７を順方向動
きベクトルＦｗを使用して再符号化する。Ｂ２６、Ｂ２
７以外の残りの画像の再符号化は、復号時に使用した符
号化情報を使用して行う。次に、後のＧＯＰ２では、編
集点がＩ２以前ではないので、ＧＯＰ２を復号して、編
集点以前（Ｂ０〜Ｐ５）を破棄し、最初のＰ８をＩピク
チャとして、再符号化する。それ以外のピクチャは、編
集前と同じピクチャタイプで再符号化する。Ｐ８の前に
あるＢ６およびＢ７は、Ｉピクチャに変更したＰ８を予
測参照画像として逆方向動きベクトルＢｋを求め、動き
ベクトルＢｋのみによって再符号化する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、圧縮符号化例え
ばＭＰＥＧで符号化された画像信号を編集するのに適用
される編集方法および編集装置に関する。

【０００２】

【従来の技術】近年、画像間圧縮符号化方式の一つであ
るＭＰＥＧ(Moving Picture ExpertsGroup)が広く実用
化されつつある。ＭＰＥＧのような圧縮符号化を利用す
ることによって、記録媒体を有効活用することができ
る。ＭＰＥＧにより符号化された画像信号を編集する場
合、復号された画像信号と、外部からの画像信号をつな
げて、再びＭＰＥＧで符号化し、ストリームを記録媒体
に記録するような編集システムが構成できる。さらに、
他の記録媒体に記録されているビデオ信号をレコーダに
より記録するダビングの場合でも、他の記録媒体の再生
信号が復号され、再符号化される。

【０００３】ＭＰＥＧの場合では、ピクチャタイプとし
て、Ｉ、Ｐ、Ｂの３種類が存在する。Ｉピクチャ(Intra
-coded picture：イントラ符号化画像) は、符号化され
るときその画像１枚の中だけで閉じた情報を使用するも
のである。従って、復号時には、Ｉピクチャ自身の情報
のみで復号できる。Ｐピクチャ(Predictive-coded pict
ure ：順方向予測符号化画像）は、予測画像（差分をと
る基準となる画像）として、時間的に前の既に復号され
たＩピクチャまたはＰピクチャを使用するものである。
動き補償された予測画像との差を符号化するか、差分を
取らずに符号化するか、効率の良い方をマクロブロック
単位で選択する。Ｂピクチャ(Bidirectionally predict
ive-coded picture ：両方向予測符号化画像）は、予測
画像（差分をとる基準となる画像）として、時間的に前
の既に復号されたＩピクチャまたはＰピクチャ、時間的
に後ろの既に復号されたＩピクチャまたはＰピクチャ、
並びにこの両方から作られた補間画像の３種類を使用す
る。この３種類のそれぞれの動き補償後の差分の符号化
と、イントラ符号化の中で、最も効率の良いものをマク
ロブロック単位で選択する。

【０００４】従って、マクロブロックタイプとしては、
フレーム内符号化(Intra) マクロブロックと、過去から
未来を予測する順方向(Foward)フレーム間予測マクロブ
ロックと、未来から過去を予測する逆方向(Backward)フ
レーム間予測マクロブロックと、前後両方向から予測す
る両方向マクロブロックとがある。Ｉピクチャ内の全て
のマクロブロックは、フレーム内符号化マクロブロック
である。また、Ｐピクチャ内には、フレーム内符号化マ
クロブロックと順方向フレーム間予測マクロブロックと
が含まれる。Ｂピクチャ内には、上述した４種類の全て
のタイプのマクロブロックが含まれる。

【０００５】そして、ＭＰＥＧでは、ランダムアクセス
を可能とするために、複数枚のピクチャのまとまりであ
るＧＯＰ(Group Of Picture)構造が規定されている。Ｇ
ＯＰに関するＭＰＥＧの規則では、第１にビットストリ
ーム上で、ＧＯＰの最初がＩピクチャであること、第２
に、原画像の順で、ＧＯＰの最後がＩまたはＰピクチャ
であることが規定されている。また、ＧＯＰとしては、
以前のＧＯＰの最後のＩまたはＰピクチャからの予測を
必要とする構造も許容されている。以前のＧＯＰの画像
を使用しないで復号できるＧＯＰは、クローズドＧＯＰ
と称される。編集を重視する場合には、クローズドＧＯ
Ｐの構造とされることが多い。

【０００６】ＭＰＥＧでは、ＧＯＰ単位のフレーム相関
を用いてコーディングを行なっているので、ＭＰＥＧビ
ットストリームを編集する時には、制約が発生する。す
なわち、ＧＯＰの切れ目と編集点を一致させれば、クロ
ーズドＧＯＰであれば、特に問題が生じない。しかしな
がら、通常、一つのＧＯＰの長さは、０．５秒程度のこ
とが多く、編集点としては、期間が長くなりすぎる。そ
こで、一般的には、フレーム（ピクチャ）単位の精度で
編集を行うことが好ましい。

【０００７】二つのＭＰＥＧのビデオストリームが編集
点で切り換えられたストリームを考えると、フレーム単
位の場合では、どのような位相で二つのストリームが接
続されるかが分からない。編集点が含まれず、ＧＯＰ構
造が完全に保存されているＧＯＰの場合では、編集点処
理を行わないで、そのまま出力しても復号することがで
きる。

【０００８】編集点が含まれるために、ＧＯＰ構造が保
存されない場合に問題が生じる。編集点より時間的に前
のストリームでは、ＧＯＰの編集点から後のデータが破
棄される。また、時間的に後のストリームでは、編集点
から前のデータが破棄される。編集点をはさんで残った
二つのストリームを復号する場合には、これらの二つの
ストリームの編集点近傍のデータを新たなＧＯＰとして
扱う。従って、新たなＧＯＰに予測参照画像としてのＩ
ピクチャが含まれていないと、そのＧＯＰが復号不可能
となってしまう。この場合には、編集後のビットストリ
ームの復号を可能とするために、ビットストリームをＭ
ＰＥＧ復号で一度ベースバンドに戻し、再度符号化を行
なってビットストリームを得る必要がある。

【０００９】従来では、新たなＧＯＰの先頭のピクチャ
のピクチャタイプをＩピクチャに変更し、このＩピクチ
ャを基準としてピクチャタイプを規定するようにしてい
た。すなわち、編集前のＧＯＰを復号し、先頭のピクチ
ャタイプをＩピクチャとしてピクチャタイプを再度規定
して再符号化することによって、新たなＧＯＰを形成し
ていた。

【００１０】

【発明が解決しようとする課題】しかしながら、かかる
編集点の処理方法では、編集点の位相によっては、元々
Ｂピクチャであった画像をＩピクチャに変更する場合が
生じる。一般的に、Ｂピクチャは、Ｉピクチャと比較し
て、発生データ量は少ないが、復号画像の画質が悪い。
従って、画質が劣化した画像をＩピクチャとして使用す
る再符号化は、元の画質より劣化する。

【００１１】また、ピクチャタイプのシーケンスが元の
ストリームと異なるので、再符号化では、元のストリー
ムを復号した時の符号化情報を再利用できない。一般的
に、スイッチングを含め編集作業のたびに、復号、符号
化を繰り返すことになる。通常、ベースバンド−ビット
ストリーム間の復号、符号化処理は、大きな画質劣化を
伴う。ストリームを復号する際に取り出した符号化、復
号に必要な符号化情報を再利用して再符号化を行うこと
によって、編集点の近傍の復号−符号化による画質劣化
を最小限とすることができる。符号化情報には、ピクチ
ャタイプ、動きベクトル、量子化スケールの情報が含ま
れる。編集作業の前後において、ピクチャタイプの変化
のシーケンスが変わってしまうと、符号化情報を再符号
化に利用することができず、画質劣化が大きくなる。

【００１２】従って、この発明の目的は、符号化データ
（ストリーム）上で編集を行う時に、画質の劣化を最小
限に抑えることが可能な編集方法および編集装置を提供
することにある。

【００１３】

【課題を解決するための手段】請求項１の発明は、上述
した課題を達成するために、画像間予測符号化により符
号化された符号化データを編集する編集方法において、
編集点以降に最初に現れる参照画像の予測方式を画像内
符号化方式に変更する以外は、編集点より時間的に前の
第１の符号化データと、編集点より時間的に後の第２の
符号化データとに関して、編集後において、予測参照画
像の現れる周期を編集前のものと同一の周期とすること
を特徴とする編集方法である。

【００１４】請求項２の発明は、画像間予測符号化によ
り符号化された符号化データを編集する編集方法におい
て、編集点以降に最初に現れる参照画像の予測方式を画
像内符号化方式に変更する以外は、編集点より時間的に
前の第１の符号化データと、編集点より時間的に後の第
２の符号化データとに関して、編集後において、予測参
照画像の現れる周期を編集前のものと同一の周期とし、
編集のために復号および再符号化を行わないようにした
第１の編集方法と、第１および第２の符号化データを編
集点で接続するような編集を行う際に、編集点の前また
は後の不要な符号化データを破棄すると共に、編集後の
符号化データを復号するのに必要とされる予測参照画像
を保存するようにした第２の編集方法とを組み合わせ、
第１および第２の符号化データの一方に第１の編集方法
を適用し、その他方に第２の編集方法を適用することを
特徴とする編集方法である。

【００１５】請求項６の発明は、画像間予測符号化によ
り符号化された符号化データを編集する編集装置におい
て、編集点以降に最初に現れる参照画像の予測方式を画
像内符号化方式に変更する以外は、編集点より時間的に
前の第１の符号化データと、編集点より時間的に後の第
２の符号化データとに関して、編集後において、予測参
照画像の現れる周期を編集前のものと同一の周期とする
ことを特徴とする編集装置である。

【００１６】編集処理前とその後で、符号化データの予
測参照画像の現れる周期を変えないので、復号、再符号
化に際して、動きベクトルの計算量を少なくすることが
でき、また、復号時の符号化情報を再利用できる。それ
によって、編集後の画質を良好とできる。

【００１７】

【発明の実施の形態】以下、この発明の一実施形態につ
いて図面を参照して説明する。図１および図２は、この
発明の一実施形態における編集点処理方法を示すフロー
チャートである。図１および図２は、一連の処理を作図
スペース上の制約から二つのフローチャートに分割した
ものである。最初のステップＳＴ１から編集点処理を開
始する。次のステップＳＴ２では、編集により接続する
２個のビットストリームで、時間的に先になるストリー
ムの編集点（ＯＵＴ点）を含むＧＯＰ（ＧＯＰ１）の処
理を開始する。ＧＯＰ１より前のＧＯＰに関しては、編
集点処理が不要である。

【００１８】ステップＳＴ３では、ＧＯＰ１において、
編集点がＩピクチャよりも前にあるかどうかが決定され
る。編集点がＩピクチャよりも前でない、すなわち、後
ろであると決定されると、ステップＳＴ４において、編
集点がＩまたはＰピクチャの直後にあるかどうかが決定
される。編集点がＩまたはＰピクチャの直後にある場合
には、ステップＳＴ５において、編集点以降のビットス
トリームを破棄し、ステップＳＴ６において、ＧＯＰ１
の残りの部分をそのまま出力する。すなわち、編集点よ
り前のストリームには、予測参照画像であるＩまたはＰ
ピクチャが残るので、特別な処理をしないでも、編集処
理後のストリーム中のこの部分を復号することができ
る。

【００１９】ステップＳＴ４において、編集点がＩまた
はＰピクチャの直後にない場合には、ステップＳＴ７に
おいて、ＧＯＰ１を一旦復号して、ステップＳＴ８にお
いて編集点以降のピクチャを破棄し、ステップＳＴ９に
おいて、第１の再符号化処理を行う。第１の再符号化処
理は、ＩまたはＰピクチャと編集点の間にあるＢピクチ
ャをＩまたはＰピクチャを予測参照画像として順方向動
きベクトルＦｗのみで再符号化する処理である。

【００２０】上述したように、Ｂピクチャ内には、フレ
ーム内符号化マクロブロックと、過去から未来を予測す
る順方向フレーム間予測マクロブロックと、未来から過
去を予測する逆方向フレーム間予測マクロブロックと、
前後両方向から予測する両方向マクロブロックとが含ま
れる。従って、順方向動きベクトルＦｗのみで再符号化
する場合、順方向フレーム間予測マクロブロックおよび
両方向マクロブロックの場合では、復号時に使用した動
きベクトルＦｗを再利用できる。一方、逆方向フレーム
間予測マクロブロックについては、順方向動きベクトル
Ｆｗを再計算する必要がある。

【００２１】マクロブロックタイプは、マクロブロック
単位の動きベクトルに基づいて検出できる。動きベクト
ルがないものは、フレーム内符号化マクロブロックであ
り、順方向動きベクトルのみがあるマクロブロックは、
順方向フレーム間予測マクロブロックであり、逆方向動
きベクトルのみがあるマクロブロックは、逆方向フレー
ム間予測マクロブロックであり、両方向の動きベクトル
があるマクロブロックは、両方向マクロブロックであ
る。動きベクトル以外に、ストリーム中に挿入される情
報から直接的にマクロブロックタイプを検出することも
できる。

【００２２】ステップＳＴ３において、編集点がＩピク
チャより前にあると決定されると、編集点以降を破棄し
た時に、Ｉピクチャが残らない。従って、ＧＯＰ１を一
旦復号して、次に、編集点以降のピクチャを破棄し、そ
して、再符号化する。この再符号化の処理は、ＧＯＰ１
（ＧＯＰ１が含まれるビットストリーム）がクローズド
ＧＯＰか否かによって影響を受ける。この点を考慮し
て、ステップＳＴ１０においてＧＯＰ１がクローズドＧ
ＯＰかどうかが決定される。ストリーム中のＧＯＰヘッ
ダには、符号化時に設定されたクローズドＧＯＰフラグ
が挿入されているので、このフラグからクローズドＧＯ
Ｐかどうかを決定できる。フラグがクローズドＧＯＰで
あることを示している時には、そのＧＯＰの最初の複数
のＢピクチャが以前のＧＯＰに依存しない。

【００２３】ＧＯＰ１がクローズドＧＯＰであると決定
されると、ステップＳＴ１１において、ＧＯＰ１を一旦
復号して、ステップＳＴ１２において編集点以降のピク
チャを破棄する。そして、ステップＳＴ１３において、
第２の再符号化処理がなされる。第２の再符号化処理で
は、最初に現れるＢピクチャをＩピクチャとして再符号
化し、そのＢピクチャ以外の他のＢピクチャがある場合
には、そのＢピクチャを予測参照画像（Ｉピクチャ）と
して、順方向動きベクトルＦｗのみを用いて他のＢピク
チャを再符号化する。順方向動きベクトルＦｗは、復号
画像から求める。

【００２４】ＧＯＰ１がクローズドＧＯＰでない場合で
は、ステップＳＴ１０からステップＳＴ１４に処理が移
る。ステップＳＴ１４で、ＧＯＰ１が復号され、編集点
以降が破棄される（ステップＳＴ１５）。そして、ステ
ップＳＴ１６において、第３の再符号化処理がなされ
る。つまり、クローズドＧＯＰではないので、直前のＧ
ＯＰの最後のＰピクチャを予測参照画像として用い、順
方向動きベクトルＦｗのみでＢピクチャを符号化する。
順方向動きベクトルＦｗとしては、復号に使用された順
方向動きベクトルを再利用できる。

【００２５】次に、ステップＳＴ１７（図２）におい
て、編集により接続する二つのストリームの内で、時間
的に後になるストリームの編集点（ＩＮ点）を含むＧＯ
Ｐ（ＧＯＰ２）の処理を開始する。それ以外の後のＧＯ
Ｐに関しては、特別な処理をしないでビットストリーム
のまま出力する。

【００２６】ステップＳＴ１８では、ＧＯＰ２におい
て、編集点がＩピクチャより前にあるかどうかが決定さ
れる。編集点がＩピクチャよりも前でなく、すなわち、
後ろにあるならば、編集点より前のストリームを破棄し
た時に、Ｉピクチャが失われる。この点を考慮して、Ｇ
ＯＰ２を一旦復号し、次に、編集点以前を破棄し、そし
て、再符号化を行う。また、ステップＳＴ１９では、Ｇ
ＯＰ１の場合と同様に、ＧＯＰ２に関して、クローズド
ＧＯＰか否かが決定される。クローズドＧＯＰか否か
は、再符号化の処理に影響を与える。

【００２７】クローズドＧＯＰであると決定されると、
ステップＳＴ２０においてＧＯＰ２が復号され、次に、
編集点以前が破棄され（ステップＳＴ２１）、そして、
ステップＳＴ２２において、第４の再符号化処理がなさ
れる。ステップＳＴ２２の第４の再符号化処理では、最
初に現れるＰピクチャをＩピクチャとして再符号化す
る。そのＰピクチャと編集点の間にＢピクチャがある場
合は、そのＰピクチャを予測参照画像として、逆方向予
測のみによって、すなわち、逆方向動きベクトルＢｋの
みで再符号化する。そのＰピクチャより後は、編集作業
前と同じピクチャタイプの関係でもって再符号化を行
う。その結果、ＰピクチャをＩピクチャに変更し、ステ
ップＳＴ２０の復号時に使用した符号化情報、例えば動
きベクトルを用いて再符号化を行う。再符号化出力を出
力して編集点処理を終了する（ステップＳＴ２９）。

【００２８】ステップＳＴ１９において、クローズドＧ
ＯＰでないと決定されると、ステップＳＴ２３において
ＧＯＰ２が復号され、次に、編集点以前が破棄され（ス
テップＳＴ２４）、その次のステップＳＴ２５におい
て、直後のＧＯＰのＩピクチャ以前を復号し、そして、
ステップＳＴ２６において、第５の再符号化処理がなさ
れる。

【００２９】ステップＳＴ２６の第５の再符号化処理で
は、第４の再符号化処理と同様に、最初のＰピクチャを
Ｉピクチャとして再符号化し、以降のピクチャは編集前
と同じピクチャタイプで再符号化する。Ｂピクチャの再
符号化は、第４の再符号化処理と異なる。つまり、ＧＯ
Ｐ２の最後のＰピクチャを直後のＧＯＰのＩピクチャか
ら、直後のＩピクチャより前にあるＢピクチャを再符号
化して出力する。このＢピクチャの再符号化のために、
ステップＳＴ２３、ＳＴ２５の復号時に使用した順方向
動きベクトルおよび逆方向動きベクトルを使用できる。
再符号化出力を出力して編集点処理を終了する（ステッ
プＳＴ２９）。

【００３０】ステップＳＴ１８において、編集点がＩピ
クチャより前にある場合には、ステップＳＴ２７におい
て、編集点より前のビットストリームを破棄する。残り
のビットストリームにＩピクチャが残る。そして、ステ
ップＳＴ２８において、ＧＯＰ２の残りのビットストリ
ームを出力し、編集点処理を終了する（ステップＳＴ２
９）。

【００３１】図１および図２に示す編集点処理につい
て、図３を参照してより具体的に説明する。図３は、時
間的に前のストリームに含まれると共に、編集点が含ま
れるＧＯＰ１と、時間的に後のストリームに含まれると
共に、編集点が含まれるＧＯＰ２とを編集点でスイッチ
ングする例を示している。何れのストリームのＧＯＰ
も、ピクチャ数Ｎ＝１５で、予測参照画像（ＩまたはＰ
ピクチャ）の現れる周期Ｍ＝３である。一例として、ク
ローズドＧＯＰの場合について説明するが、クローズド
ＧＯＰでない場合でも、再符号化処理を除いてほぼ同様
の処理がなされる。また、図３に示すピクチャの順序
は、再生画像の順序である。再生画像の順序は、原画像
および復号画像の順序と一致する。

【００３２】最初にＧＯＰ１の編集点処理がなされる。
編集点がＩピクチャ（Ｉ２２）より後ろにあり、編集点
がＩまたはＰピクチャの直後にはないので、ステップＳ
Ｔ３、ステップＳＴ４を通って、ステップＳＴ７におい
て、ＧＯＰ１が復号される。この復号に使用した符号化
情報を保存する。保存する必要がある符号化情報は、ピ
クチャタイプ（この情報は、必ず必要）、動きベクト
ル、ピクチャ毎の量子化スケールである。

【００３３】そして、ステップＳＴ８において、編集点
以降（ＰピクチャＰ２８以降）が破棄されてから、ステ
ップＳＴ９の第１の再符号化処理がなされる。すなわ
ち、ＰピクチャＰ２５の後のＢピクチャＢ２６およびＢ
２７を順方向動きベクトルＦｗのみを使用して再符号化
する。順方向動きベクトルＦｗは、マクロブロックタイ
プによって、復号時に保存しているもの、または再計算
して求めたものが使用される。Ｂ２６およびＢ２７以外
のＧＯＰ１の残りの画像の再符号化は、ステップＳＴ７
における復号時に使用した符号化情報をそのまま使用し
て行う。

【００３４】ＢピクチャＢ２６内およびＢ２７内には、
フレーム内符号化マクロブロックと、過去から未来を予
測する順方向フレーム間予測マクロブロックと、未来か
ら過去を予測する逆方向フレーム間予測マクロブロック
と、前後両方向から予測する両方向マクロブロックとが
含まれる。従って、順方向動きベクトルＦｗのみで再符
号化する場合、順方向フレーム間予測マクロブロックお
よび両方向マクロブロックの場合では、復号時に使用し
た動きベクトルＦｗを再利用できる。一方、逆方向フレ
ーム間予測マクロブロックについては、順方向動きベク
トルＦｗを再計算する必要がある。

【００３５】次に、時間的に後のＧＯＰ２（Ｂ０〜Ｐ１
４）の処理を開始する。編集点がＩピクチャＩ２以前で
はないので、編集点以前を破棄した時には、Ｉ２が失わ
れてしまう。そこで、ＧＯＰ２を復号して、編集点以前
（Ｂ０〜Ｐ５）を破棄する（ステップＳＴ１８、ＳＴ１
９、ＳＴ２０、ＳＴ２１）。そして、ステップＳＴ２２
の第４の再符号化処理がなされる。すなわち、最初のＰ
ピクチャＰ８をＩピクチャとして、再符号化する。それ
以外のピクチャは、編集前と同じピクチャタイプで再符
号化する。Ｐ８の前にあるＢピクチャＢ６およびＢ７
は、Ｉピクチャに変更されるＰ８を予測参照画像として
逆方向動きベクトルＢｋを求め、この逆方向動きベクト
ルＢｋのみによって再符号化する。

【００３６】ＢピクチャＢ２６およびＢ２７について説
明したのと同様に、Ｂ６およびＢ７にそれぞれ含まれる
マクロブロックの内で、逆方向フレーム間予測マクロブ
ロックと、両方向マクロブロックとに関しては、復号時
に使用した動きベクトルＢｋを再利用できる。一方、順
方向フレーム間予測マクロブロックについては、逆方向
動きベクトルＢｋを再計算する必要がある。

【００３７】上述した図３に示すような編集後のビット
ストリームを復号し、再符号化する場合の処理について
図４を参照して説明する。ＭＰＥＧエンコーダ内の順序
並び替え処理によって、編集後のビットストリームは、
図４に示すように、ＩおよびＰピクチャを先に符号化
し、次にＢピクチャを符号化するような順序に並び替え
られる。

【００３８】編集点より前側のＧＯＰでは、Ｉピクチャ
Ｉ２２を予測参照画像として用い、順方向予測によって
ＰピクチャＰ２５を符号化する。次に、Ｉ２２を予測参
照画像として用いて、逆方向予測によって、Ｂピクチャ
Ｂ２０、Ｂ２１をそれぞれ符号化する。Ｂ２０およびＢ
２１の各ピクチャの符号化は、Ｉ２２からの逆方向動き
ベクトルＢｋのみを使用する。また、Ｉ２２およびＰ２
５を予測参照画像として用いて、ＢピクチャＢ２３、Ｂ
２４を符号化する。ＢピクチャＢ２３、Ｂ２４の各ピク
チャの符号化は、順方向動きベクトルＦｗおよび逆方向
動きベクトルＢｋの両者使用する。さらに、Ｐ２５を予
測参照画像として用いして、ＢピクチャＢ２６、Ｂ２７
を符号化する。Ｂ２６およびＢ２７の各ピクチャの符号
化は、Ｐ２５からの順方向動きベクトルＦｗのみを使用
する。

【００３９】編集点より後側のＧＯＰでは、Ｐピクチャ
からＩピクチャに変更されたＩ８を予測参照画像として
用い、順方向予測によって、Ｐ１１を符号化し、Ｐ１１
を予測参照画像として用い、順方向予測によって、Ｐ１
４を符号化する。そして、Ｉ８を予測参照画像として用
い、逆方向動きベクトルのみを使用してＢピクチャＢ
６、Ｂ７をそれぞれ符号化する。また、ＢピクチャＢ９
およびＢ１０は、Ｉ８を予測参照画像として用いる順方
向予測と、Ｐ１１を予測参照画像として用いる逆方向予
測とを組み合わせた両方向予測によって符号化される。
さらに、ＢピクチャＢ１２およびＢ１３は、Ｐ１１を予
測参照画像として用いる順方向予測と、Ｐ１４を予測参
照画像として用いる逆方向予測とを組み合わせた両方向
予測によって符号化される。

【００４０】なお、図３および図４の例では、Ｐ２５を
予測参照画像とするＢ６、Ｂ７への順方向ベクトルを使
用しない。また、Ｉ８からＢ２６、Ｂ２７への逆方向ベ
クトルも使用しない。通常、編集点の前後では、画像の
相関がないからである。

【００４１】編集点が図３に示す位置以外の位置に存在
する場合について説明する。ＧＯＰ１の処理において、
編集点がＩ２２より前、例えばＢ２１とＩ２２との間に
ある場合には、編集点以降のデータを破棄すると、Ｂ２
０およびＢ２１の予測参照画像であるＩ２２も破棄され
てしまう。そのため、ステップＳＴ１１において、ＧＯ
Ｐ１を復号してから、ステップＳＴ１２において編集点
以降のピクチャが破棄される。そして、最初のＢピクチ
ャＢ２０をＩピクチャとして再符号化する第２の再符号
化処理がなされる。すなわち、他のＢピクチャＢ２１
は、Ｂ２０（Ｉピクチャへ変更される）から順方向動き
ベクトルＦｗのみで、再符号化される（ステップＳＴ１
３）。

【００４２】また、ＧＯＰ１の処理において、編集点が
Ｉ２２より後ろで、Ｉ２２の直後（Ｂ２３の直前）にあ
る場合は、ステップＳＴ５において、編集点以降が破棄
される。つまり、Ｂ２０およびＢ２１の予測参照画像で
あるＩ２２が残っているので、ＧＯＰ１を復号する必要
がない。

【００４３】次に、ＧＯＰ２の処理について、編集点が
図３に示す位置と異なる位置にある場合について説明す
る。編集点がＩピクチャＩ２以前、例えばＢ１とＩ２の
間にある時は、ステップＳＴ２７において、編集点以前
のＢ０およびＢ１が破棄される。この場合では、破棄後
に、ＩピクチャＩ２が残るので、ＧＯＰ２の復号が不要
である。

【００４４】以上の説明では、ＧＯＰ１の編集点処理を
行ってからＧＯＰ２の編集点処理を行うようにしている
が、その順序を逆としても良い。また、ＧＯＰ１の編集
点処理とＧＯＰ２の編集信号処理とを並列に行うように
しても良い。

【００４５】上述したように、この発明の一実施形態で
は、時間的に前のストリームのＧＯＰ１では、編集点が
Ｉピクチャより前の時では、ＧＯＰ１を復号して、最初
のＢピクチャをＩピクチャとして、再符号化を行う。ま
た、時間的に後のストリームのＧＯＰ２では、編集点が
Ｉピクチャより前の時では、最初のＰピクチャをＩピク
チャとして再符号化を行う。従って、Ｉピクチャへ変更
する点を除いて、編集点の前後のＧＯＰ１およびＧＯＰ
２のピクチャタイプを編集前と編集後とで、同じものと
している。それによって、再符号化を行う時に、復号時
と同じ符号化情報（動きベクトル、量子化スケール）を
再利用することができる。また、Ｂピクチャの復号画像
と比して画質の良いＰピクチャをＩピクチャとして使用
するので、再符号化による画質の劣化を少なくすること
ができる。

【００４６】この発明の理解を容易とするために、この
発明と異なり、元のストリームのピクチャタイプの情報
を使用しないでなされる編集点処理について図５を参照
して説明する。図５は、図３の場合と同様に、時間的に
前のストリームの編集点が含まれるＧＯＰ１と、時間的
に後のストリームの編集点が含まれるＧＯＰ２とを編集
点でスイッチングする例を示している。何れのストリー
ムのＧＯＰも、ピクチャ数Ｎ＝１５で、ＩまたはＰピク
チャの現れる周期Ｍ＝３である。

【００４７】ＧＯＰ１の編集点以降（ＰピクチャＰ２８
以降に対応する画像）は、不要であるので破棄される。
ＧＯＰ２では、編集点以前（ＰピクチャＰ５以前に対応
する画像）は、不要であるので破棄される。そして、編
集点で、ＧＯＰ１からＧＯＰ２へ切り替えがなされ、図
５の中段に示されるような編集後のストリームが得られ
る。

【００４８】編集後の信号を再符号化する時に、編集点
の直前のＢピクチャＢ２６、Ｂ２７は、その後の画像が
相関のない他の信号であるので、これらのＢ２６、Ｂ２
７に含まれる、逆方向フレーム間予測マクロブロックに
関しては、順方向動きベクトルＦｗを再計算し、求まっ
た順方向動きベクトルＦｗのみを使用して再符号化す
る。

【００４９】ＧＯＰ２に関しては、編集点の後のＢピク
チャＢ６から次のＧＯＰの直前のＰピクチャＰ１４まで
は、新たなＧＯＰとして処理するために、図示のよう
に、Ｂ６→Ｉ６、Ｐ８→Ｂ８、Ｂ９→Ｐ９、Ｐ１１→Ｂ
１１、Ｂ１２→Ｐ１２、Ｐ１４→Ｂ１４に変更して再符
号化する。従って、新たなＧＯＰは、Ｎ＝９、Ｍ＝３と
なる。次のＧＯＰは、Ｎ＝１５、Ｍ＝３である。このよ
うに、予測参照画像が変わってしまうので、再符号化の
ために、予測の必要な全てのピクチャに関して動きベク
トルを再計算する必要がある。

【００５０】この図５に示す編集点処理は、編集後のビ
デオ信号を再符号化するために、Ｉ６の後のＢ７〜Ｂ１
４の全てのピクチャに関して、動きベクトルを求めるこ
とが必要となり、ストリームを復号する際に取り出した
符号化情報を再利用して再符号化を行うことができな
い。その結果、動きベクトルを求めるための計算量が多
くなる。のみならず、元々は、Ｂピクチャであった復号
画像（一般的に画質がＩピクチャに比して悪い）をＩピ
クチャとして使用して、再符号化するために、画質の劣
化が大きくなる。上述したこの発明によれば、かかる問
題を解決することができる。

【００５１】この発明の一実施形態においては、図３に
示すように、Ｐ８をＩ８に変換して再符号化を行ってい
る。この処理において、さらに演算量を削減するため
に、Ｐ８の劣化を最小限にとどめてＩ８へ変換し、再符
号化するフレームをＢ６、Ｂ７、Ｂ２６、Ｂ２７とＰ８
とし、それ以外のフレーム（すなわち、ピクチャタイプ
および予測参照画像が変わらないフレーム）を再符号化
しない方法も可能である。この方法では、Ｐ８との誤差
が少ないように、Ｉ８を再符号化することが重要であ
る。しかしながら、この方法は、演算量を削減できる
が、レートのコントロールができないので、厳密に編集
点近傍でＧＯＰ当たりのレートを一定に保つことが難し
い。

【００５２】ＧＯＰ当たりのレート（発生データ量）を
一定とする場合、編集後の新たなＧＯＰで使用可能なビ
ット量は、元のＧＯＰのフレーム数をＮ、ＧＯＰ当たり
のビット量をＰ_gopとし、新たなＧＯＰのフレーム数を
Ｐ_n（図３の例では、Ｐ_n＝９）とすると、（Ｐ_gop／
Ｎ）×Ｐ_nとなる。従って、厳密にＧＯＰ当たりで一定
のレートを保とうとする場合には、編集によりフレーム
数の少なくなった新たなＧＯＰでは、Ｉピクチャに使用
できるビット量が少なくなる。

【００５３】次に、編集点処理のより具体的な例につい
て説明する。図６に示すように、書き換え可能な光ディ
スク２０上には、ＭＰＥＧビットストリームＳＴ１およ
びＳＴ２が記録されている。例えばストリームＳＴ１の
ＯＵＴ点に対してストリームＳＴ２のＩＮ点から後を接
続する編集を行う。このために、編集点処理装置によっ
て、ＩＮ点およびＯＵＴ点の付近の処理がされたストリ
ームＳＴ３を生成し、このストリームＳＴ３を光ディス
ク２０上に記録する。このように記録された光ディスク
２０を再生する時に、ストリームＳＴ１、ＳＴ３および
ＳＴ２を順に再生することによって、編集処理されたス
トリームを再生することができる。このように、記録済
のストリームを編集したように再生すれば、コマーシャ
ルのような不要な部分をカットして再生することができ
る。

【００５４】光ディスク２０は、ランダムアクセス可能
な媒体であり、図６に示すように、元から記録されてい
るストリームＳＴ１およびＳＴ２、編集点付近の処理が
されたストリームＳＴ３は、空き領域に記録され、連続
的に記録される必要がなく、光ディスク２０の例えば最
内周領域に設けられた管理領域にストリームＳＴ１の後
にストリームＳＴ３を接続し、ストリームＳＴ３の後に
ストリームＳＴ２を接続することを指示するリンク情報
を記録することによって、編集後のストリームを再生す
ることができる。リンク情報をストリーム中の記録する
ようにしても良い。なお、ストリームＳＴ３を記録せず
に、ストリームＳＴ１、ＳＴ２をそれぞれ再生し、編集
点処理の方法を決定しておき、リアルタイムで恰も編集
したようにストリームを再生することもできる。

【００５５】図７は、一連の処理を示すものである。最
初にストリームＳＴ１のＯＵＴ点が含まれるＧＯＰ１の
編集点処理がなされ、処理後のストリームがストリーム
ＳＴ３の前側のストリームとして記録される。次に、ス
トリームＳＴ２のＩＮ点が含まれるＧＯＰ２の編集点処
理がなされ、処理後のストリームがストリームＳＴ３の
後側のストリームとして記録される。この場合、必要に
応じて、ＧＯＰ１の前のストリームの一部およびＧＯＰ
２の後のストリームの一部も、ストリームＳＴ３として
記録しても良い。そして、図７の一番下に示すように、
ストリームＳＴ１、ＳＴ３、ＳＴ２を順に再生すれば、
ストリームＳＴ１とＳＴ３とをスイッチングしたような
再生ビットストリームが得られる。

【００５６】図６および図７は、編集処理の一例の概略
であって、この編集処理以外の他の編集処理に対しても
この発明を適用することができる。例えば光ディスク上
に記録されているビットストリームと外部から供給され
るビットストリームとをスイッチングし、スイッチング
されたビットスイッチを光ディスクに記録するようにし
てもよい。さらに、光ディスク上に記録されていない二
つのビットストリームをスイッチングしたストリームを
形成し、そのストリームを光ディスクに記録するように
しても良い。

【００５７】図８は、光ディスク２０に対してＭＰＥＧ
ビットストリームを記録すると共に、光ディスク２０か
らＭＰＥＧビットストリームを再生するディスクレコー
ダの一例を示す。図８において、２１で示す入力端子に
は、ディジタル映像信号が直接供給される。２２で示す
入力端子には、アナログ映像信号が供給される。アナロ
グ映像信号は、撮像信号、アンテナで受信した放送映像
信号等である。アナログ映像信号は、Ａ／Ｄ変換部２３
によりディジタル映像信号へ変換される。入力端子２１
からのディジタル映像信号およびＡ／Ｄ変換部２３から
のディジタル映像信号の一方が入力選択スイッチ２４に
よって選択される。選択されたディジタル映像信号がＭ
ＰＥＧエンコーダ２５に供給される。

【００５８】ＭＰＥＧエンコーダ２５は、ディジタル映
像信号に対してＭＰＥＧによる圧縮符号化を施す。ＭＰ
ＥＧエンコーダ２５の出力がスイッチ回路２６の一方の
入力端子に供給される。スイッチ回路２６の他方の入力
端子には、端子２７からＭＰＥＧビットストリームが供
給される。ＭＰＥＧエンコーダ２５または外部からのビ
ットストリームは、バスを介して統合バッファメモリ２
８の記録系用バッファメモリ部２８ａに格納される。統
合バッファメモリ２８は、システムコントロ−ラ３７に
よって制御されるメモリ制御部２９によりアドレスが指
定され、ＭＰＥＧエンコーダ２５は、動きベクトルを検
出する動き予測部、ピクチャ順序並び替え部、入力映像
信号とローカル復号映像信号間の予測誤差を形成する減
算部、減算出力をＤＣＴ変換するＤＣＴ部、ＤＣＴ部の
出力を量子化する量子化部、量子化出力を可変長符号化
する可変長符号化部、一定レートで符号化データを出力
するバッファメモリとから構成される。ピクチャ順序並
び替え部は、ピクチャの順序を符号化処理に適したもの
に並び替える。つまり、ＩおよびＰピクチャを先に符号
化し、その後Ｂピクチャを符号化するのに適した順序に
ピクチャを並び替える。ローカル復号部は、逆量子化
部、逆ＤＣＴ部、加算部、フレームメモリおよび動き補
償部で構成される。動き補償部では、順方向予測、逆方
向予測、両方向予測が可能とされている。イントラ符号
化の場合では、減算部は、減算処理を行わず、単にデー
タが通過する。

【００５９】記録系用バッファメモリ部２８ａに格納さ
れたビットストリームは、バス、デ−タ処理部３０およ
び記録再生切り替えスイッチ３１を介して光ディスクド
ライブに供給される。デ−タ処理部３０は、記録信号処
理部３０ａと再生信号処理部３０ｂからなる。記録信号
処理部３０ａは、エラー訂正符号化、ディジタル変調等
の処理を行い、再生信号処理部３０ｂは、エラー訂正、
ディジタル変調の復調等の処理を行う。

【００６０】光ディスクドライブは、光ディスク２０に
記録用のレ−ザ光を照射して信号を記録すると共に、再
生用のレ−ザ光を照射して信号を再生するための光ヘッ
ド３２と、光ディスク２０を回転駆動するスピンドルモ
−タ３３とを備えている。ヘッド３２とスピンドルモ−
タ３３は、ディスク／ヘッド制御部３４により制御され
る。光ヘッド３２によって、記録信号処理部３０ａの出
力信号が光ディスク２０に記録される。光ディスク２０
は、書き換え可能なもので、ＭＯ（光磁気）ディスク、
相変化型ディスク等を使用できる。

【００６１】システムコントロ−ラ３７は、光ディスク
ドライブの制御をディスク／ヘッド制御部３４を介して
行うと共に、光ディスクドライブの状態も管理してお
り、その情報をメモリ制御部２９に伝え、統合バッファ
メモリ２８からのデ−タの供給の制御を行う。

【００６２】次に、再生処理系について説明する。バス
を介して統合バッファメモリ２８の再生系用バッファメ
モリ部２８ｂから供給される再生ビットストリームは、
スイッチ回路３８に供給される。スイッチ回路３８は、
再生ビットストリームをＭＰＥＧデコーダ３９または端
子４０に選択的に出力する。ＭＰＥＧデコーダ３９は、
再生ビットストリームを復号し、ＭＰＥＧデコーダ３９
からの復号映像信号は、Ｄ／Ａ変換部４１によりアナロ
グ映像信号に変換され、アナログ出力端子４２に取り出
される。また、ディジタル復号映像信号が出力されるデ
ィジタル出力端子４３が設けられている。

【００６３】ＭＰＥＧデコーダ３９は、バッファメモ
リ、可変長符号復号部、逆ＤＣＴ部、逆量子化部、逆量
子化部の出力とローカル復号出力を加算する加算部、ピ
クチャ順序並び替え部並びにフレームメモリおよび動き
補償部からなるローカル復号部によって構成されてい
る。イントラ符号化の場合では、加算部での加算処理が
なされず、データが加算部を通過する。加算部からの復
号データがピクチャ順序並び替え部によって元の画像の
順序とされる。

【００６４】再生モ−ド時、光ディスクドライブは、デ
ィスク／ヘッド制御部３４によりサ−ボ、ヘッド移動等
が制御され、再生信号をデ−タ処理部３０の再生信号処
理部３０ｂ、バスを介して再生系用バッファメモリ部２
８ｂに出力する。再生系用バッファメモリ部２８ｂは、
再生信号の書き込みと読み出しのバランスを取りなが
ら、再生ビットストリームをスイッチ回路３８に供給す
る。スイッチ回路３８で選択されたビットストリーム
は、ＭＰＥＧデコーダ３９によって復号されるか、また
は出力端子４０に取り出される。ＭＰＥＧデコーダ３９
からの復号映像信号は、Ｄ／Ａ変換部４１または出力端
子４３に出力される。Ｄ／Ａ変換部４１は、ディジタル
映像信号をアナログ映像信号に変換し、出力端子４２に
出力する。

【００６５】なお、上述したディスクレコーダは、記録
系用と再生系用の記憶領域の割り当てを可変する統合バ
ッファメモリ２８と、記録モードまたは再生モ−ドに応
じて統合バッファメモリ２８の記憶領域割り当て処理が
システムコントロ−ラ３７により制御される。すなわ
ち、記録系用バッファメモリ部２８ａと再生系用バッフ
ァメモリ部２８ｂは、メモリ制御部２９を介したシステ
ムコントロ−ラ３７の制御により、そのエリアを可変と
する。例えば、記録時には、記録系用バッファメモリ部
２８ａは、統合バッファメモリ２８の全てを占める。ま
た、再生時には、再生系用バッファメモリ部２８ｂが全
てを占める。また、同時記録再生時には、半分ずつメモ
リ容量を確保するようにしてもよい。

【００６６】上述したディスクレコーダと接続され、こ
の発明による編集点処理を行うことができる編集点処理
装置の一実施形態について、図９を参照して説明する。
５１で示す入力端子には、ディスクレコーダから再生さ
れ、出力端子４０に取り出されるＭＰＥＧビットストリ
ームが供給される。入力ストリームには、何らかの手段
により予め編集点（ＯＵＴ点、ＩＮ点）が設定されてい
る。例えばビットストリーム中に編集点の位置を示す情
報が挿入されている。編集点の位置情報は、ビットスト
リームと同期するようにされたビットストリーム以外の
信号経路で伝送することも可能である。

【００６７】入力ビットストリームがスイッチ回路５２
の入力端子ａおよび制御部５３に供給される。制御部５
３は、編集点情報とＭＰＥＧビットストリームに付随す
る符号化情報（ピクチャタイプ、動きベクトル、量子化
スケール）とから上述した編集点処理（図１および図２
参照）を行う。すなわち、編集点の位置によって、スト
リームの復号が必要か否かが決定され、その結果に基づ
いて制御信号Ｓ１およびＳ２を発生する。

【００６８】制御信号Ｓ１は、入力側のスイッチ回路５
２を制御し、制御信号Ｓ２は、出力側のスイッチ回路５
５を制御する。ストリームの復号が必要と決定される
と、スイッチ回路５２の入力端子ａおよび出力端子ｂを
通って入力ストリームがビットストリーム編集部５４に
供給され、ビットストリーム編集部５４の出力がスイッ
チ回路５５の入力端子ｄおよび出力端子ｆを通って出力
端子５６に取り出される。

【００６９】制御部５３がビットストリームの復号を不
要と決定すると、スイッチ回路５２の入力端子ａおよび
出力端子ｃを通って入力ストリームがＭＰＥＧデコーダ
５７に供給される。ＭＰＥＧデコーダ５７には、画像信
号を編集する画像編集部５８が接続される。画像編集部
５８の編集後の出力がＭＰＥＧエンコーダ５９に供給さ
れる。ＭＰＥＧエンコーダ５９は、編集後の画像信号を
再符号化する。ＭＰＥＧエンコーダ５９の出力（ビット
ストリーム）がスイッチ回路５５の入力端子ｅおよび出
力端子ｆを通って出力端子５６に取り出される。

【００７０】図１を参照して説明したように、例えばＧ
ＯＰ１の処理では、編集点の位置とＩピクチャとの関係
（ステップＳＴ３）と、編集点の位置がＩ／Ｐピクチャ
の直後か否か（ステップＳＴ４）とによって、ＧＯＰ１
の復号が必要か否かが決定される。復号が不要な場合に
は、編集点以降のストリームが破棄され（ステップＳＴ
５）、ビットストリームが出力される（ステップＳＴ
６）。制御部５３からの制御信号Ｓ３に応答して、ビッ
トストリームの破棄の処理をビットストリーム編集部５
４が行う。

【００７１】復号が必要な場合には、ＭＰＥＧデコーダ
５７がビットストリームを復号し（ステップＳＴ７、Ｓ
Ｔ１１またはＳＴ１４）、復号出力を受け取って、画像
編集部５８が不要な画像信号の破棄の処理（ステップＳ
Ｔ８、ＳＴ１２またはＳＴ１５）を行い、ＭＰＥＧエン
コーダ５９が第１、第２または第３の再符号化処理（ス
テップＳＴ９、ＳＴ１３またはＳＴ１６）を行う。画像
編集部５８に対しては、制御部５３から編集点位置情報
に基づく制御信号Ｓ４が供給され、この制御信号Ｓ４に
応答して画像信号が破棄される。

【００７２】また、ＭＰＥＧデコーダ５７で復号に使用
した符号化情報が画像編集部５８に供給され、さらに、
画像編集部５８からの符号化情報がＭＰＥＧエンコーダ
５９に供給される。従って、画像編集部５８において、
制御信号Ｓ４に基づいてピクチャタイプの変更が可能と
なり、ＭＰＥＧエンコーダ５９において、符号化情報の
再利用が可能となる。ＧＯＰ１に限らず、ＧＯＰ２に対
する処理も同様にしてなされる。

【００７３】図６および図７を参照して説明した編集点
処理の場合では、ディスクレコーダが最初に光ディスク
２０からストリームＳＴ１を再生し、ストリームＳＴ１
の編集点（ＯＵＴ点）の近傍のストリームを編集点処理
装置の入力端子５１に供給する。図１のフローチャート
に示される編集点が含まれるＧＯＰ１の処理を編集点処
理装置が行う。その結果の出力ストリームがストリーム
ＳＴ３の前側の部分としてディスクレコーダにより光デ
ィスク２０上に記録される。

【００７４】次に、ディスクレコーダがストリームＳＴ
２を光ディスク２０から再生し、ストリームＳＴ２の編
集点（ＩＮ点）の近傍のストリームを編集点処理装置の
入力端子５１に供給する。図２のフローチャートに示さ
れる編集点が含まれるＧＯＰ２の処理を編集点処理装置
が行う。その結果の出力ストリームがストリームＳＴ３
の後側の部分としてディスクレコーダにより光ディスク
２０上に記録される。そして、光ディスク２０に記録さ
れているリンク情報に基づいてストリームＳＴ１、ＳＴ
３およびＳＴ２を順に再生することによって、編集後の
ストリームを再生できる。

【００７５】なお、上述した説明では、ディスクレコー
ダと編集点処理装置とが別々の構成とされている。しか
しながら、ディスクレコーダに編集点処理装置を内蔵す
るようにしても良い。その場合には、ディスクレコーダ
のＭＰＥＧデコーダおよびＭＰＥＧエンコーダを編集点
処理のためにも使用することが可能となる。

【００７６】以上説明したように、この発明の一実施形
態は、編集点処理が復号処理および再符号化処理を含
む。しかしながら、復号処理および再符号化処理を行な
わないう編集点処理と組み合わせる複合編集点処理も可
能である。

【００７７】復号処理および再符号化処理を行わない編
集点処理の一例について、図１０および図１１を参照し
て説明する。この編集点処理方法を図１０のフローチャ
ートに示す。最初のステップＳＴ３１から編集点処理を
開始する。次のステップＳＴ３２では、編集により接続
する２個のビットストリームで、時間的に先になるスト
リームの編集点（ＯＵＴ点）を含むＧＯＰ（ＧＯＰ１）
の処理を開始する。

【００７８】ステップＳＴ３３では、ＧＯＰ１におい
て、編集点がＩまたはＰピクチャの直後にあるかどうか
が決定される。編集点がＩまたはＰピクチャの直後にあ
る場合には、ステップＳＴ３４において、編集点以降の
ビットストリームを破棄し、ステップＳＴ３５におい
て、ＧＯＰ１以前の部分をそのまま出力する。すなわ
ち、編集点より前のストリームには、予測参照画像であ
るＩまたはＰピクチャが残るので、特別な処理をしない
でも、編集処理後のストリーム中のこの部分を復号する
ことができる。

【００７９】ステップＳＴ３３において、編集点がＩま
たはＰピクチャの直後にない場合には、ステップＳＴ３
６において、編集点の直後のＩまたはＰピクチャ以外の
編集点以降のピクチャを破棄する。次のステップＳＴ３
７において、編集点より前のピクチャと編集点直後のＩ
またはＰピクチャを出力する。

【００８０】次に、ステップＳＴ３８において、編集に
より接続する二つのストリームの内で、時間的に後にな
るストリームの編集点（ＩＮ点）を含むＧＯＰ（ＧＯＰ
２）の処理を開始する。ステップＳＴ３９では、編集点
以前のＢピクチャを全て破棄する。そして、ステップＳ
Ｔ４０では、編集点以前のＩピクチャおよびＰピクチャ
と、編集点以降のピクチャを出力し、編集点処理を終了
する（ステップＳＴ４１）。編集点以前のＩピクチャお
よびＰピクチャは、表示しないが保存する必要のあるピ
クチャである。

【００８１】上述した編集点処理について、図１１を参
照してより具体的に説明する。図１１は、時間的に前の
ストリームに含まれると共に、編集点が含まれるＧＯＰ
１と、時間的に後のストリームに含まれると共に、編集
点が含まれるＧＯＰ２とを編集点でスイッチングする例
を示している。何れのストリームのＧＯＰも、ピクチャ
数Ｎ＝１５で、予測参照画像（ＩまたはＰピクチャ）の
現れる周期Ｍ＝３である。また、図１１に示すピクチャ
の順序は、再生画像の順序である。再生画像の順序は、
原画像および復号画像の順序と一致している。

【００８２】最初にＧＯＰ１の編集点処理がなされる。
編集点がＩピクチャ（Ｉ２２）またはＰピクチャ（Ｐ２
５、Ｐ２８、Ｐ３１、Ｐ３４）の直後にはないので、ス
テップＳＴ３３を通って、ステップＳＴ３６において、
編集点の直後のＰピクチャＰ２８以外の編集点以降のピ
クチャを破棄する。そして、編集点以前のピクチャと編
集点直後のＰピクチャＰ２８を出力する（ステップＳＴ
３７）。ＰピクチャＰ２８を保存するのは、編集後のス
トリームに含まれるＢピクチャＢ２６およびＢ２７をＰ
２８を予測参照画像として復号するためである。

【００８３】次に、時間的に後のＧＯＰ２（Ｂ０〜Ｐ１
４）の処理を開始する（ステップＳＴ３８）。編集点以
前のＢピクチャＢ０、Ｂ１、Ｂ３およびＢ４を全て破棄
する（ステップＳＴ３９）。そして、編集点以前のＩピ
クチャＩ２およびＰピクチャＰ５と編集点以降のピクチ
ャを出力し（ステップＳＴ４０）、編集点の処理を終了
する（ステップＳＴ４１）。ＩピクチャＩ２およびＰピ
クチャＰ５を保存するのは、ＰピクチャＰ５をＩ２を予
測参照画像として復号し、復号されたＰ５を予測参照画
像として編集後のストリームに含まれるＢピクチャＢ６
およびＢ７を復号するためである。

【００８４】上述した編集点処理において、保存される
ＩまたはＰピクチャは、編集後のストリームに含まれる
Ｂピクチャを復号するために必要なものであり、編集後
のストリームの復号出力としては扱われない。言い換え
ると、編集後の映像信号としては表示されない。保存す
るための方法の一例は、記録媒体上の所定の領域に記録
する方法である。

【００８５】ＧＯＰ１の場合では、編集点がＩまたはＰ
ピクチャの直後に存在する時では、何らピクチャを保存
する必要がない。一方、編集点がＩまたはＰピクチャの
直後に存在しない時では、一つのＩまたはＰピクチャを
保存する必要がある。ＧＯＰ２の場合では、編集点の位
置によって保存する必要があるピクチャの量が異なる。
編集点の位置がＧＯＰ２の後の方になると、保存するピ
クチャ数が徐々に増加し、最大で、Ｐ１４以外の４枚の
ピクチャ（Ｉ２、Ｐ５、Ｐ８、Ｐ１１）を保存する必要
が生じる。このように、一つの編集点について最大で５
個のピクチャを保存するために、例えば記録媒体上で冗
長度が増加する問題が生じる。さらに、ＧＯＰ当たりの
データ発生量を一定に制御することができない。

【００８６】上述したように、復号および再符号化を伴
わない編集点処理方法は、編集後のビットストリームを
復号するのに必要な予測参照画像（ＩまたはＰピクチ
ャ）を保存することによって、編集処理後の新たなＧＯ
Ｐを形成するための復号処理と、復号データの再符号化
処理とを不要とできる。従って、復号および再符号化に
よって生じる画質劣化を防止することができる。そし
て、このような復号処理および再符号化処理を行なわな
い編集点処理と、これらの処理を行うこの発明の一実施
形態を組み合わせた複合編集方法が可能である。

【００８７】複合編集方法としては、例えば時間的に先
に現れるストリーム（ＧＯＰ１）は、復号処理および再
符号化処理を行わない方式で処理し、時間的に後に現れ
るストリーム（ＧＯＰ２）は、復号処理および再符号化
処理を行う方式で処理するものが可能である。また、時
間的に後に現れるＧＯＰ２内の編集点より後のピクチャ
数が多い場合には、表示しないが保存するピクチャ数が
少なくて済むので、復号および再符号化処理を行なわな
い方式で処理し、ＧＯＰ２内の編集点より後のピクチャ
数が少ない合には、表示しないが保存するピクチャ数が
多くなるので、復号および再符号化処理を行なう方式で
処理する。このように、表示しないが、保存する必要の
あるピクチャ数に適応して、編集処理方式を選択するよ
うになされる。さらに、編集後のストリームを復号した
画像の画質に基づいて、編集方法を選択する複合編集方
法も可能である。

【００８８】

【発明の効果】この発明に依れば、編集点近傍のビット
ストリームを復号および再符号化する場合に、予測参照
画像の現れる周期を編集前とその後とで同一としている
ので、再符号化時に動きベクトルを求める演算量を減少
でき、また、再符号化により画質が劣化することを抑え
ることができる。

【図面の簡単な説明】

【図１】この発明による編集点処理方法の一実施形態を
説明するためのフローチャートである。

【図２】この発明による編集点処理方法の一実施形態を
説明するためのフローチャートである。

【図３】この発明による編集点処理方法の一実施形態を
説明するためのタイミングチャートである。

【図４】この発明による編集点処理方法の一実施形態に
おける再符号化処理を説明するためのタイミングチャー
トである。

【図５】この発明の説明の参考とした編集点処理方法の
他の方法を説明するためのフローチャートである。

【図６】この発明による編集点処理の説明に使用する光
ディスク上の記録状態の一例を示す略線図である。

【図７】この発明による編集点処理の一例を説明するた
めの略線図である。

【図８】この発明を適用できるディスクレコーダの一例
のブロック図である。

【図９】この発明による編集点処理装置の一実施形態の
ブロック図である。

【図１０】この発明と組み合わせることが可能な編集点
処理方法を説明するためのフローチャートである。

【図１１】この発明と組み合わせることが可能な編集点
処理方法を説明するためのタイミングチャートである。

【符号の説明】

５３・・・制御部、５４・・・ビットストリーム編集
部、５７・・・ＭＰＥＧデコーダ、５８・・・画像編集
部、５９・・・ＭＰＥＧエンコーダ

Claims

【特許請求の範囲】

【請求項１】画像間予測符号化により符号化された符
号化データを編集する編集方法において、上記編集点以降に最初に現れる参照画像の予測方式を画
像内符号化方式に変更する以外は、編集点より時間的に
前の第１の符号化データと、上記編集点より時間的に後
の第２の符号化データとに関して、編集後において、予
測参照画像の現れる周期を編集前のものと同一の周期と
することを特徴とする編集方法。
【請求項２】画像間予測符号化により符号化された符
号化データを編集する編集方法において、上記編集点以降に最初に現れる参照画像の予測方式を画
像内符号化方式に変更する以外は、編集点より時間的に
前の第１の符号化データと、上記編集点より時間的に後
の第２の符号化データとに関して、編集後において、予
測参照画像の現れる周期を編集前のものと同一の周期と
し、編集のために復号および再符号化を行わないように
した第１の編集方法と、第１および第２の符号化データを編集点で接続するよう
な編集を行う際に、上記編集点の前または後の不要な符
号化データを破棄すると共に、編集後の符号化データを
復号するのに必要とされる予測参照画像を保存するよう
にした第２の編集方法とを組み合わせ、上記第１および第２の符号化データの一方に上記第１の
編集方法を適用し、その他方に上記第２の編集方法を適
用することを特徴とする編集方法。
【請求項３】請求項１または２において、画像間予測符号化がＭＰＥＧ方式であり、第１および第２の符号化データが第１および第２のＧＯ
Ｐであり、上記第２のＧＯＰにおいて、編集点がＩピクチャより後
ろであるときに、第２のＧＯＰを復号し、編集点以降に
最初に現れるＰピクチャのピクチャタイプをＩピクチャ
に変更し、上記第２のＧＯＰの編集点より後の画像を再
符号化することを特徴とする編集方法。
【請求項４】請求項１または２において、記録媒体に記録されている第１および第２の符号化デー
タを接続するように、再生する編集を行うことを特徴と
する編集方法。
【請求項５】請求項１または２において、記録媒体に記録されている第１の符号化データと外部か
らの第２の符号化データとを接続するように、編集を行
うことを特徴とする編集方法。
【請求項６】請求項１または２において、外部から到来する第１および第２の符号化データを接続
するように、編集を行うことを特徴とする編集方法。
【請求項７】画像間予測符号化により符号化された符
号化データを編集する編集装置において、上記編集点以降に最初に現れる参照画像の予測方式を画
像内符号化方式に変更する以外は、編集点より時間的に
前の第１の符号化データと、上記編集点より時間的に後
の第２の符号化データとに関して、編集後において、予
測参照画像の現れる周期を編集前のものと同一の周期と
することを特徴とする編集装置。