JPH09238347A - 画像データ処理方法およびその装置 - Google Patents
画像データ処理方法およびその装置Info
- Publication number
- JPH09238347A JPH09238347A JP4298096A JP4298096A JPH09238347A JP H09238347 A JPH09238347 A JP H09238347A JP 4298096 A JP4298096 A JP 4298096A JP 4298096 A JP4298096 A JP 4298096A JP H09238347 A JPH09238347 A JP H09238347A
- Authority
- JP
- Japan
- Prior art keywords
- picture
- gop
- cut
- pictures
- sequence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/142—Detection of scene cut or scene change
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/87—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving scene cut or scene change detection in combination with video compression
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2537—Optical discs
- G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
(57)【要約】
【課題】 ＭＰＥＧに代表されるような動画像に対する
高能率画像圧縮においては、フレームの前後の二次元画
像の差分情報と動き情報をもとに予測符号化の手法を用
いるため、フレーム同士は独立しておらず、通常のビデ
オ信号のように毎フレームごとに任意に編集できない。
本発明はＧＯＰ単位で編集可能な画像データ処理方法を
提供する。 【解決手段】 Ｉピクチャ、Ｐピクチャ、Ｂピクチャが
ＧＯＰに収容されていくピクチャシーケンスを符号化す
る信号処理方法において、連続するＧＯＰのうち、ある
ＧＯＰのピクチャが差し替えられたとき、先行するＧＯ
Ｐ内のピクチャの存在なしに符号が可能なように、その
差し替えられたＧＯＰのピクチャのシーケンスの最初の
ピクチャを、差し替え位置に応じて規定されるピクチャ
番号のＩピクチャに置き換えて符号化する。
高能率画像圧縮においては、フレームの前後の二次元画
像の差分情報と動き情報をもとに予測符号化の手法を用
いるため、フレーム同士は独立しておらず、通常のビデ
オ信号のように毎フレームごとに任意に編集できない。
本発明はＧＯＰ単位で編集可能な画像データ処理方法を
提供する。 【解決手段】 Ｉピクチャ、Ｐピクチャ、Ｂピクチャが
ＧＯＰに収容されていくピクチャシーケンスを符号化す
る信号処理方法において、連続するＧＯＰのうち、ある
ＧＯＰのピクチャが差し替えられたとき、先行するＧＯ
Ｐ内のピクチャの存在なしに符号が可能なように、その
差し替えられたＧＯＰのピクチャのシーケンスの最初の
ピクチャを、差し替え位置に応じて規定されるピクチャ
番号のＩピクチャに置き換えて符号化する。
Description
【０００１】
【発明の属する技術分野】本発明は画像符号化方法とそ
の装置に関するものであり、特に、動画像の符号化・復
号化方法とその装置に関する。
の装置に関するものであり、特に、動画像の符号化・復
号化方法とその装置に関する。
【０００２】
【従来の技術】画像信号帯域圧縮技術のうち動画像信号
帯域圧縮方式として、Ｈ．２６１、ＭＰＥＧ（Motion P
icture Eepert Group)などの国際標準化実用技術が知ら
れている。特に高能率画像圧縮技術であるＭＰＥＧはマ
ルチメディアにおける動画像信号帯域圧縮方式としてと
して、コンピュータ、通信、放送、情報家電、エンター
テイメントなど多くの分野での適用が試みられている。
以下、動画像圧縮符号化技術のＭＰＥＧについて述べ
る。ＭＰＥＧについては、概略として下記の分類による
提案がされている。 ＭＰＥＧ１：1.5 Ｍｂｐｓ前後で許容限度を上回る品質
の動画像符号化 ＭＰＥＧ２：１６Ｍｂｐｓ前後で高品質動画像符号化 ＭＰＥＧ３：５０〜８０Ｍｂｐｓでハイビジョンテレビ
（ＨＤＴＶ）信号符号化
帯域圧縮方式として、Ｈ．２６１、ＭＰＥＧ（Motion P
icture Eepert Group)などの国際標準化実用技術が知ら
れている。特に高能率画像圧縮技術であるＭＰＥＧはマ
ルチメディアにおける動画像信号帯域圧縮方式としてと
して、コンピュータ、通信、放送、情報家電、エンター
テイメントなど多くの分野での適用が試みられている。
以下、動画像圧縮符号化技術のＭＰＥＧについて述べ
る。ＭＰＥＧについては、概略として下記の分類による
提案がされている。 ＭＰＥＧ１：1.5 Ｍｂｐｓ前後で許容限度を上回る品質
の動画像符号化 ＭＰＥＧ２：１６Ｍｂｐｓ前後で高品質動画像符号化 ＭＰＥＧ３：５０〜８０Ｍｂｐｓでハイビジョンテレビ
（ＨＤＴＶ）信号符号化
【０００３】本発明において主としてＭＰＥＧ１とＭＰ
ＥＧ２について言及するものとし、本明細書においてＭ
ＰＥＧと記した場合はＭＰＥＧ１またはＭＰＥＧ２を意
味する。またＭＰＥＧによる符号化・復号化方式をＭＰ
ＥＧと略称する。
ＥＧ２について言及するものとし、本明細書においてＭ
ＰＥＧと記した場合はＭＰＥＧ１またはＭＰＥＧ２を意
味する。またＭＰＥＧによる符号化・復号化方式をＭＰ
ＥＧと略称する。
【０００４】ＭＰＥＧにおいては、ピクチャ（画像）を
複数まとめた「ＧＯＰ（GROUP OF PICTURE）」と呼ぶ、
複数のピクチャごとに符号化または復号化を行う。ＧＯ
Ｐは画像伝送の単位であり、ＭＰＥＧにおける符号化・
復号化の単位でもある。たとえば、フレームごと（また
はフィールドごと）の画像データ（ビデオデータまたは
ピクチャ）が連続するＴＶ画像を例示すると、ＧＯＰに
おけるピクチャは単純なフレームごとのピクチャ、つま
り、Ｉ(Intra) ピクチャ（画面内符号化ピクチャ）の連
続ではなく、符号化効率を高めてデータの伝送量を減少
させるために動き補償などの技法を用いて予測したピク
チャを用いる。予測ピクチャとしては、Ｐ(Prediction)
ピクチャ（前方予測符号化ピクチャ）、Ｂ(Bidirectio
n)-ピクチャ（双方向予測（外挿・内挿）符号化ピクチ
ャ）が知られている。したがって、ＧＯＰには、複数の
Ｉピクチャ、Ｐピクチャ、Ｂピクチャが混在したピクチ
ャの集合が収容されている。ＧＯＰ、Ｉピクチャ、Ｐピ
クチャ、Ｂピクチャの詳細およびこれらの関連について
は後述する。
複数まとめた「ＧＯＰ（GROUP OF PICTURE）」と呼ぶ、
複数のピクチャごとに符号化または復号化を行う。ＧＯ
Ｐは画像伝送の単位であり、ＭＰＥＧにおける符号化・
復号化の単位でもある。たとえば、フレームごと（また
はフィールドごと）の画像データ（ビデオデータまたは
ピクチャ）が連続するＴＶ画像を例示すると、ＧＯＰに
おけるピクチャは単純なフレームごとのピクチャ、つま
り、Ｉ(Intra) ピクチャ（画面内符号化ピクチャ）の連
続ではなく、符号化効率を高めてデータの伝送量を減少
させるために動き補償などの技法を用いて予測したピク
チャを用いる。予測ピクチャとしては、Ｐ(Prediction)
ピクチャ（前方予測符号化ピクチャ）、Ｂ(Bidirectio
n)-ピクチャ（双方向予測（外挿・内挿）符号化ピクチ
ャ）が知られている。したがって、ＧＯＰには、複数の
Ｉピクチャ、Ｐピクチャ、Ｂピクチャが混在したピクチ
ャの集合が収容されている。ＧＯＰ、Ｉピクチャ、Ｐピ
クチャ、Ｂピクチャの詳細およびこれらの関連について
は後述する。
【０００５】
【発明が解決しようとする課題】ＭＰＥＧにおいては基
本的に、ＧＯＰ単位で符号化・復号化を行うから、通信
系統における画像符号化・復号化、画像編集系統におけ
る符号化・復号化、その他の系統における符号化・復号
化などの画像データの処理を行うのには、それぞれのＧ
ＯＰが完全に独立していることが望ましい。本願発明者
は、上記ＭＰＥＧとＧＯＰについて考察した結果、ＧＯ
Ｐが完全に独立していないため、編集作業などでピクチ
ャの差し替えを行うと正確な画像の再生が行えないとい
う問題に気付いた。つまり、あるＧＯＰ内のＢピクチャ
の処理には前のＧＯＰに含まれるＩピクチャまたはピク
チャを参照しないと処理できない。換言すれば、それぞ
れのＧＯＰは完全には独立していない。換言すれば、Ｍ
ＰＥＧに代表されるような動画像に対する高能率画像圧
縮においては、フレームの前後の二次元画像の差分情報
と動き情報をもとに予測符号化の手法を用いるため、フ
レーム同士は独立しておらず、通常のビデオ信号のよう
に毎フレームごとに任意に編集できるわけではない。Ｇ
ＯＰの不完全独立に関して、ＧＯＰには、「Broken Lin
k 」、「Closed Gop」などの措置が講じられてはいる
が、ピクチャの編集を行うのには解決策にならない。な
お、上述した問題の詳細およびに具体的内容について
は、ＧＯＰ、Ｉピクチャ、Ｐピクチャ、Ｂピクチャの具
体的な内容を参照して後述する。
本的に、ＧＯＰ単位で符号化・復号化を行うから、通信
系統における画像符号化・復号化、画像編集系統におけ
る符号化・復号化、その他の系統における符号化・復号
化などの画像データの処理を行うのには、それぞれのＧ
ＯＰが完全に独立していることが望ましい。本願発明者
は、上記ＭＰＥＧとＧＯＰについて考察した結果、ＧＯ
Ｐが完全に独立していないため、編集作業などでピクチ
ャの差し替えを行うと正確な画像の再生が行えないとい
う問題に気付いた。つまり、あるＧＯＰ内のＢピクチャ
の処理には前のＧＯＰに含まれるＩピクチャまたはピク
チャを参照しないと処理できない。換言すれば、それぞ
れのＧＯＰは完全には独立していない。換言すれば、Ｍ
ＰＥＧに代表されるような動画像に対する高能率画像圧
縮においては、フレームの前後の二次元画像の差分情報
と動き情報をもとに予測符号化の手法を用いるため、フ
レーム同士は独立しておらず、通常のビデオ信号のよう
に毎フレームごとに任意に編集できるわけではない。Ｇ
ＯＰの不完全独立に関して、ＧＯＰには、「Broken Lin
k 」、「Closed Gop」などの措置が講じられてはいる
が、ピクチャの編集を行うのには解決策にならない。な
お、上述した問題の詳細およびに具体的内容について
は、ＧＯＰ、Ｉピクチャ、Ｐピクチャ、Ｂピクチャの具
体的な内容を参照して後述する。
【０００６】したがって、本発明の目的は、ＧＯＰの不
完全独立性に起因する問題を克服する画像符号化方法と
その装置を提供することにある。
完全独立性に起因する問題を克服する画像符号化方法と
その装置を提供することにある。
【０００７】
【課題を解決するための手段】本発明は基本的には、Ｉ
ピクチャ、Ｐピクチャ、ＢピクチャがＧＯＰに収容され
ているピクチャシーケンスを符号化する信号処理方法に
おいて、連続するＧＯＰのうち、あるＧＯＰのピクチャ
が差し替えられたとき、先行するＧＯＰ内のピクチャの
存在なしに符号が可能なように、その差し替えられたＧ
ＯＰのピクチャのシーケンスの最初のピクチャを、差し
替え位置に応じて規定されるピクチャ番号のＩピクチャ
に置き換えて符号化することを特徴とする画像データ処
理方法を提供する。ピクチャが差し替えられたとき、新
たなＧＯＰはＩピクチャから始まるので、前のＧＯＰの
ピクチャを必要としない。
ピクチャ、Ｐピクチャ、ＢピクチャがＧＯＰに収容され
ているピクチャシーケンスを符号化する信号処理方法に
おいて、連続するＧＯＰのうち、あるＧＯＰのピクチャ
が差し替えられたとき、先行するＧＯＰ内のピクチャの
存在なしに符号が可能なように、その差し替えられたＧ
ＯＰのピクチャのシーケンスの最初のピクチャを、差し
替え位置に応じて規定されるピクチャ番号のＩピクチャ
に置き換えて符号化することを特徴とする画像データ処
理方法を提供する。ピクチャが差し替えられたとき、新
たなＧＯＰはＩピクチャから始まるので、前のＧＯＰの
ピクチャを必要としない。
【０００８】本発明は、特に、ＧＯＰ単位での編集は可
能であるＭＰＥＧの持っているオリジナルの特質は保ち
ながら、それに加えて、編集などにおける「カット」単
位では原理的に画質に影響を与えない編集方法を提供す
る。すなわち、本発明によれば、ＭＰＥＧを用いて、Ｉ
ピクチャ、Ｐピクチャ、ＢピクチャがＧＯＰに収容され
ている連続するＧＯＰごとにそのピクチャシーケンスを
符号化する信号処理方法において、任意の位置でカット
可能にしておき、ＧＯＰ内のカット位置でピクチャが差
し替えられたとき、全てのカット位置に対して、通常の
シーケンスのＧＯＰ内のピクチャ枚数とピクチャの周期
で規定される、カットされたＧＯＰのピクチャ枚数Ｎと
最初のＩピクチャの番号、カットシーケンスの前のＧＯ
Ｐのピクチャ、遅延量を規定した全てのカットシーケン
スを準備しておき、ある位置でカットが行われたとき該
当するカットシーケンスを読み出して、カットの対象と
なるＧＯＰの最初のＩピクチャとピクチャ枚数、カット
の対象となる前のＧＯＰのピクチャ枚数とカットの対象
となる新しいＩピクチャに先行するピクチャを設定し、
前記設定されたピクチャとピクチャ枚数に応じてピクチ
ャを並べ替えてＧＯＰを構成し、前記構成されたピクチ
ャシーケンスと前記遅延量に基づいて符号化することを
特徴とする画像データ処理方法が提供される。前記カッ
トとしては、編集段階において作成された編集決定リス
トに基づいて行う、定期的に行う、映像シーンの状況に
応じて行うなど任意に設定できる。好適には、上記カッ
トされたＧＯＰのピクチャは、ＩピクチャまたはＰピク
チャが指示されたら必ずＢピクチャが２枚続き、またＢ
ピクチャが２枚続いたらその次は必ずＩピクチャまたは
Ｐピクチャを置くように設定する。
能であるＭＰＥＧの持っているオリジナルの特質は保ち
ながら、それに加えて、編集などにおける「カット」単
位では原理的に画質に影響を与えない編集方法を提供す
る。すなわち、本発明によれば、ＭＰＥＧを用いて、Ｉ
ピクチャ、Ｐピクチャ、ＢピクチャがＧＯＰに収容され
ている連続するＧＯＰごとにそのピクチャシーケンスを
符号化する信号処理方法において、任意の位置でカット
可能にしておき、ＧＯＰ内のカット位置でピクチャが差
し替えられたとき、全てのカット位置に対して、通常の
シーケンスのＧＯＰ内のピクチャ枚数とピクチャの周期
で規定される、カットされたＧＯＰのピクチャ枚数Ｎと
最初のＩピクチャの番号、カットシーケンスの前のＧＯ
Ｐのピクチャ、遅延量を規定した全てのカットシーケン
スを準備しておき、ある位置でカットが行われたとき該
当するカットシーケンスを読み出して、カットの対象と
なるＧＯＰの最初のＩピクチャとピクチャ枚数、カット
の対象となる前のＧＯＰのピクチャ枚数とカットの対象
となる新しいＩピクチャに先行するピクチャを設定し、
前記設定されたピクチャとピクチャ枚数に応じてピクチ
ャを並べ替えてＧＯＰを構成し、前記構成されたピクチ
ャシーケンスと前記遅延量に基づいて符号化することを
特徴とする画像データ処理方法が提供される。前記カッ
トとしては、編集段階において作成された編集決定リス
トに基づいて行う、定期的に行う、映像シーンの状況に
応じて行うなど任意に設定できる。好適には、上記カッ
トされたＧＯＰのピクチャは、ＩピクチャまたはＰピク
チャが指示されたら必ずＢピクチャが２枚続き、またＢ
ピクチャが２枚続いたらその次は必ずＩピクチャまたは
Ｐピクチャを置くように設定する。
【０００９】また本発明によれば、Ｉピクチャ、Ｐピク
チャ、ＢピクチャがＧＯＰに収容されている連続するＧ
ＯＰごとにその画像データを提供する手段と、ＧＯＰ内
のカット位置でピクチャが差し替えられたとき、全ての
カット位置に対して、通常のシーケンスのＧＯＰ内のピ
クチャ枚数とピクチャの周期で規定される、カットされ
たＧＯＰのピクチャ枚数Ｎと最初のＩピクチャの番号、
カットシーケンスの前のＧＯＰのピクチャ、遅延量を規
定した全てのカットシーケンスを準備するカットシーケ
ンス準備手段と、前記画像データ提供手段から提供され
た画像データについて、ある位置でカットが行われたと
き、前記カットシーケンス準備手段から該当するカット
シーケンスを読み出して、カットの対象となるＧＯＰの
最初のＩピクチャとピクチャ枚数、カットの対象となる
前のＧＯＰのピクチャ枚数とカットの対象となる新しい
Ｉピクチャに先行するピクチャを設定して設定されたピ
クチャとピクチャ枚数Ｎに応じてピクチャを並べ替え新
たなＧＯＰを構成するカット処理手段と、前記遅延量に
応じて前記画像データ提供手段から出力された画像デー
タを遅延する手段と、前記並べ替えられたＧＯＰのピク
チャシーケンスと前記遅延された画像データとをＭＰＥ
Ｇに基づいて符号化する符号化手段とを有することを特
徴とする画像データ処理装置が提供される。
チャ、ＢピクチャがＧＯＰに収容されている連続するＧ
ＯＰごとにその画像データを提供する手段と、ＧＯＰ内
のカット位置でピクチャが差し替えられたとき、全ての
カット位置に対して、通常のシーケンスのＧＯＰ内のピ
クチャ枚数とピクチャの周期で規定される、カットされ
たＧＯＰのピクチャ枚数Ｎと最初のＩピクチャの番号、
カットシーケンスの前のＧＯＰのピクチャ、遅延量を規
定した全てのカットシーケンスを準備するカットシーケ
ンス準備手段と、前記画像データ提供手段から提供され
た画像データについて、ある位置でカットが行われたと
き、前記カットシーケンス準備手段から該当するカット
シーケンスを読み出して、カットの対象となるＧＯＰの
最初のＩピクチャとピクチャ枚数、カットの対象となる
前のＧＯＰのピクチャ枚数とカットの対象となる新しい
Ｉピクチャに先行するピクチャを設定して設定されたピ
クチャとピクチャ枚数Ｎに応じてピクチャを並べ替え新
たなＧＯＰを構成するカット処理手段と、前記遅延量に
応じて前記画像データ提供手段から出力された画像デー
タを遅延する手段と、前記並べ替えられたＧＯＰのピク
チャシーケンスと前記遅延された画像データとをＭＰＥ
Ｇに基づいて符号化する符号化手段とを有することを特
徴とする画像データ処理装置が提供される。
【００１０】
【発明の実施の形態】本発明の好適実施例を述べる前
に、ＭＰＥＧが適用されるシステムの例、および、ＭＰ
ＥＧの処理の対象とするピクチャ（画像）について述べ
る。
に、ＭＰＥＧが適用されるシステムの例、および、ＭＰ
ＥＧの処理の対象とするピクチャ（画像）について述べ
る。
【００１１】画像伝送系統における符号化・復号化シス
テム 図１はＭＰＥＧが適用されるシステム構成の１例として
画像伝送系統における画像符号化装置と画像復号化装置
とのシステム構成を示した図である。このシステムは、
たとえば、ＶＯＤ(Video On Demand: ビデオ・オン・デ
マンド）に代表されるような通信サービスに用いられ
る。またこのシステムは、図７を参照して後述するシス
テムにおいてＤＶＤに記録された映像信号を、ＤＶＤを
蓄積メディア３として復号するシステムにも適用でき
る。この画像符号化・復号化システムにおいては、ビデ
オテープ記録再生装置（ＶＴＲ）１において再生された
フレームごとのオリジナルのディジタルビデオ信号（フ
レーム画像データまたはフレーム・ピクチャ）を画像符
号化装置２においてフレームのピクチャごとに帯域圧縮
・符号化して蓄積メディア３（または伝送経路）に送出
する。蓄積メディア３としては、たとえば、ＤＶＤ（デ
ィジタル・ビデオ・ディスク）、ＨＤＤ（ハードディス
ク装置）などが例示され、これらの記録媒体を用いた場
合は、帯域圧縮・符号化された画像データが記録され、
読み出される。伝送経路３の場合は伝送経路の上をビッ
トストリームとして帯域圧縮・符号化された画像データ
が伝送されていく。画像復号化装置４は蓄積メディア３
（または伝送経路）を経由して入力された帯域圧縮・符
号化された画像データを、画像符号化装置２における符
号化と逆の復号処理を行ってＶＴＲ１から出力されたと
同等の画像データを再生し、ＴＶモニタ５にその再生画
像を表示させる。画像符号化装置２においてＭＰＥＧに
基づく画像データの圧縮・符号化を行われ、画像復号化
装置４において帯域伸長・復号処理が行われる。
テム 図１はＭＰＥＧが適用されるシステム構成の１例として
画像伝送系統における画像符号化装置と画像復号化装置
とのシステム構成を示した図である。このシステムは、
たとえば、ＶＯＤ(Video On Demand: ビデオ・オン・デ
マンド）に代表されるような通信サービスに用いられ
る。またこのシステムは、図７を参照して後述するシス
テムにおいてＤＶＤに記録された映像信号を、ＤＶＤを
蓄積メディア３として復号するシステムにも適用でき
る。この画像符号化・復号化システムにおいては、ビデ
オテープ記録再生装置（ＶＴＲ）１において再生された
フレームごとのオリジナルのディジタルビデオ信号（フ
レーム画像データまたはフレーム・ピクチャ）を画像符
号化装置２においてフレームのピクチャごとに帯域圧縮
・符号化して蓄積メディア３（または伝送経路）に送出
する。蓄積メディア３としては、たとえば、ＤＶＤ（デ
ィジタル・ビデオ・ディスク）、ＨＤＤ（ハードディス
ク装置）などが例示され、これらの記録媒体を用いた場
合は、帯域圧縮・符号化された画像データが記録され、
読み出される。伝送経路３の場合は伝送経路の上をビッ
トストリームとして帯域圧縮・符号化された画像データ
が伝送されていく。画像復号化装置４は蓄積メディア３
（または伝送経路）を経由して入力された帯域圧縮・符
号化された画像データを、画像符号化装置２における符
号化と逆の復号処理を行ってＶＴＲ１から出力されたと
同等の画像データを再生し、ＴＶモニタ５にその再生画
像を表示させる。画像符号化装置２においてＭＰＥＧに
基づく画像データの圧縮・符号化を行われ、画像復号化
装置４において帯域伸長・復号処理が行われる。
【００１２】符号化装置 図２は画像符号化装置２における符号化処理を示す構成
の１例を示す図である。この画像符号化装置２は、信号
減算器２１、離散的コサイン変換（ＤＣＴ：Discrete C
osine Transform)回路２２、量子化器（Ｑ）２３、逆量
子化器（ＩＱ）２４、離散的逆コサイン変換回路（ＩＤ
ＣＴ回路）２５、信号加算器２６、フレームメモリ２
７、動き補償回路２８、動き推定回路２９、可変長符号
化回路（ＶＬＣ）３０、並替回路３１、バッファメモリ
３２、レート制御回路３３から構成されている。画像符
号化装置によっては、信号減算器２１の前段において、
入力されたビデオ信号（画像データ）の画面を並べ替え
る回路が設けられることもあるが、この例においては、
バッファメモリ３２の前段に並替回路３１を設置してい
る例を示す。フレーム内ピクチャ（画面内ピクチャ）の
符号化処理について述べる。図１に図解したＶＴＲ１か
ら入力された時間領域の信号形態のディジタル・ビデオ
信号（画像データ）は、図示しないフォーマット変換回
路でＭＰＥＧ１またはＭＰＥＧ２に適応した、輝度信号
Ｙ、第１の色差信号Ｃｂ、第２の色差信号Ｃｒのフォー
マットに変換された後、信号減算器２１を経由してＤＣ
Ｔ回路２２において、たとえば、８×８画素または１６
×１６画素のブロック単位でフレームＤＣＴモードまた
はフィールドＤＣＴモードで離散的コサイン変換処理が
行われ入力された時間領域の画像データから周波数領域
の画像データに変換される。すなわち、直交変換回路の
１種であるＤＣＴ回路２２において画像データを周波数
変換して空間的な冗長度を低減する。周波数変換された
画像データは量子化器２３において量子化される。入力
された画像データは動き推定回路２９において動画像に
ついての動きが推定されている。量子化された画像デー
タは可変長符号化回路３０において動き推定結果（動き
ベクトルＭＶ）に基づいて可変長符号化が行われる。す
なわち、可変長符号化によって、出現頻度の高いものに
短符号を割当て、出現頻度の低いものに長符号を割り当
てて全体の伝送レートを低減させる。可変長符号化され
た画像データが並替回路３１において並べ替えられてバ
ッファメモリ３２に記憶され、図１に図解した蓄積メデ
ィア３（または伝送経路）に出力される。Ｉピクチャ、
Ｐピクチャ、Ｂピクチャの３種類のピクチャが存在する
ＭＰＥＧの符号化においては、単一のバッファメモリの
容量を基準として量子化スケールを負帰還する方法は適
用できないので、レート制御回路３３を用いて各ピクチ
ャへのビット配分、仮想バッファメモリを用いたレート
制御、人間の視覚特性を考慮した適応量子化を行う。こ
のように、ＤＣＴ回路２２における変換処理、量子化器
２３および可変長符号化回路３０における符号化によっ
て、入力された画像データが帯域圧縮された符号化画像
データとしてビット量の少ないデータとなる。
の１例を示す図である。この画像符号化装置２は、信号
減算器２１、離散的コサイン変換（ＤＣＴ：Discrete C
osine Transform)回路２２、量子化器（Ｑ）２３、逆量
子化器（ＩＱ）２４、離散的逆コサイン変換回路（ＩＤ
ＣＴ回路）２５、信号加算器２６、フレームメモリ２
７、動き補償回路２８、動き推定回路２９、可変長符号
化回路（ＶＬＣ）３０、並替回路３１、バッファメモリ
３２、レート制御回路３３から構成されている。画像符
号化装置によっては、信号減算器２１の前段において、
入力されたビデオ信号（画像データ）の画面を並べ替え
る回路が設けられることもあるが、この例においては、
バッファメモリ３２の前段に並替回路３１を設置してい
る例を示す。フレーム内ピクチャ（画面内ピクチャ）の
符号化処理について述べる。図１に図解したＶＴＲ１か
ら入力された時間領域の信号形態のディジタル・ビデオ
信号（画像データ）は、図示しないフォーマット変換回
路でＭＰＥＧ１またはＭＰＥＧ２に適応した、輝度信号
Ｙ、第１の色差信号Ｃｂ、第２の色差信号Ｃｒのフォー
マットに変換された後、信号減算器２１を経由してＤＣ
Ｔ回路２２において、たとえば、８×８画素または１６
×１６画素のブロック単位でフレームＤＣＴモードまた
はフィールドＤＣＴモードで離散的コサイン変換処理が
行われ入力された時間領域の画像データから周波数領域
の画像データに変換される。すなわち、直交変換回路の
１種であるＤＣＴ回路２２において画像データを周波数
変換して空間的な冗長度を低減する。周波数変換された
画像データは量子化器２３において量子化される。入力
された画像データは動き推定回路２９において動画像に
ついての動きが推定されている。量子化された画像デー
タは可変長符号化回路３０において動き推定結果（動き
ベクトルＭＶ）に基づいて可変長符号化が行われる。す
なわち、可変長符号化によって、出現頻度の高いものに
短符号を割当て、出現頻度の低いものに長符号を割り当
てて全体の伝送レートを低減させる。可変長符号化され
た画像データが並替回路３１において並べ替えられてバ
ッファメモリ３２に記憶され、図１に図解した蓄積メデ
ィア３（または伝送経路）に出力される。Ｉピクチャ、
Ｐピクチャ、Ｂピクチャの３種類のピクチャが存在する
ＭＰＥＧの符号化においては、単一のバッファメモリの
容量を基準として量子化スケールを負帰還する方法は適
用できないので、レート制御回路３３を用いて各ピクチ
ャへのビット配分、仮想バッファメモリを用いたレート
制御、人間の視覚特性を考慮した適応量子化を行う。こ
のように、ＤＣＴ回路２２における変換処理、量子化器
２３および可変長符号化回路３０における符号化によっ
て、入力された画像データが帯域圧縮された符号化画像
データとしてビット量の少ないデータとなる。
【００１３】次いで動画像データの動き推定および動き
補償について述べる。量子化器２３で量子化された画像
データは、逆量子化器２４でＤＣＴ回路２２の出力に相
当する画像データに逆量子化される。逆量子化された画
像データがＩＤＣＴ回路２５においてＤＣＴ回路２２と
逆の変換が行われて、ＤＣＴ回路２２に入力される前に
相当する画像データに逆変換され（復元され）、信号加
算器２６を経由してフレームメモリ２７に記憶される。
フレームメモリ２７に記憶された画像データは信号減算
器２１に入力された画像データを復元したデータに相当
している。フレームメモリ２７に記憶された復元画像デ
ータについて動き補償回路２８において動き推定回路２
９からの動きベクトルＭＶを参照して動き補償画像デー
タを生成する。動き補償画像データは信号減算器２１に
印加された信号減算器２１に印加された入力画像データ
から減じられ、入力画像データに対する差分の画像デー
タを算出するのに用いられる。信号減算器２１からの差
分画像データはを用いれば、ＤＣＴ回路２２以降の信号
処理のデータ量が減少する。その結果、量子化器２３お
よび可変長符号化回路３０、並替回路３１で処理するデ
ータ量が減少する。動き補償画像データは信号加算器２
６に印加されてＩＤＣＴ回路２５からの復元画像データ
に加算されて元の画像データを復元するのに使用され
る。
補償について述べる。量子化器２３で量子化された画像
データは、逆量子化器２４でＤＣＴ回路２２の出力に相
当する画像データに逆量子化される。逆量子化された画
像データがＩＤＣＴ回路２５においてＤＣＴ回路２２と
逆の変換が行われて、ＤＣＴ回路２２に入力される前に
相当する画像データに逆変換され（復元され）、信号加
算器２６を経由してフレームメモリ２７に記憶される。
フレームメモリ２７に記憶された画像データは信号減算
器２１に入力された画像データを復元したデータに相当
している。フレームメモリ２７に記憶された復元画像デ
ータについて動き補償回路２８において動き推定回路２
９からの動きベクトルＭＶを参照して動き補償画像デー
タを生成する。動き補償画像データは信号減算器２１に
印加された信号減算器２１に印加された入力画像データ
から減じられ、入力画像データに対する差分の画像デー
タを算出するのに用いられる。信号減算器２１からの差
分画像データはを用いれば、ＤＣＴ回路２２以降の信号
処理のデータ量が減少する。その結果、量子化器２３お
よび可変長符号化回路３０、並替回路３１で処理するデ
ータ量が減少する。動き補償画像データは信号加算器２
６に印加されてＩＤＣＴ回路２５からの復元画像データ
に加算されて元の画像データを復元するのに使用され
る。
【００１４】復号化装置 図３は画像復号化装置４における復号処理を示す構成を
示す１例としての構成図である。画像復号化装置４は、
バッファメモリ４１、並替回路４２、可変長復号化回路
（ＶＬＤ）４３、逆量子化器（ＩＱ）４４、離散コサイ
ン逆変換回路（ＩＤＣＴ回路）４５、信号減算器４６、
フレームメモリ４７、動き補償回路４８、レート制御回
路４９から構成されている。画像復号化装置４は画像符
号化装置２の逆の処理を行うから、バッファメモリ４１
は図２のバッファメモリ３２、並替回路４２は並替回路
３１、可変長復号化回路４３は可変長符号化回路３０と
位置が逆になっており、逆量子化器４４は図２の逆量子
化器２４、ＩＤＣＴ回路４５はＩＤＣＴ回路２５、信号
加算器４６は信号加算器２６、フレームメモリ４７はフ
レームメモリ２７、動き補償回路４８は動き補償回路２
８と実質的に同じ回路である。バッファメモリ４１は蓄
積メディア３（または伝送経路）を経由して伝送されて
きた帯域圧縮・符号化画像データを一旦記憶し、並替回
路４２でバッファメモリ３２に入力された順序の画像デ
ータの順序を並べ替えて、可変長復号化回路４３で画像
符号化装置２の可変長符号化回路３０と逆の復号を行
う。その結果が逆量子化器４４で逆量子化され、ＩＤＣ
Ｔ回路４５で周波数領域の画像データが時間領域の画像
データに変換されて、信号減算器４６を介してフレーム
メモリ４７に記憶される。フレームメモリ４７に記憶さ
れた画像データが動き補償回路４８で可変長復号化回路
４３の結果を参照して動き補償されてその結果が信号減
算器４６においてＩＤＣＴ回路４５の変換結果に加算さ
れる。信号減算器４６から再生された画像データがＴＶ
モニタ５に出力される。復号時もレート制御回路４９
は、各ピクチャへのビット配分、仮想バッファメモリを
用いたレート制御、人間の視覚特性を考慮した適応量子
化を行う。
示す１例としての構成図である。画像復号化装置４は、
バッファメモリ４１、並替回路４２、可変長復号化回路
（ＶＬＤ）４３、逆量子化器（ＩＱ）４４、離散コサイ
ン逆変換回路（ＩＤＣＴ回路）４５、信号減算器４６、
フレームメモリ４７、動き補償回路４８、レート制御回
路４９から構成されている。画像復号化装置４は画像符
号化装置２の逆の処理を行うから、バッファメモリ４１
は図２のバッファメモリ３２、並替回路４２は並替回路
３１、可変長復号化回路４３は可変長符号化回路３０と
位置が逆になっており、逆量子化器４４は図２の逆量子
化器２４、ＩＤＣＴ回路４５はＩＤＣＴ回路２５、信号
加算器４６は信号加算器２６、フレームメモリ４７はフ
レームメモリ２７、動き補償回路４８は動き補償回路２
８と実質的に同じ回路である。バッファメモリ４１は蓄
積メディア３（または伝送経路）を経由して伝送されて
きた帯域圧縮・符号化画像データを一旦記憶し、並替回
路４２でバッファメモリ３２に入力された順序の画像デ
ータの順序を並べ替えて、可変長復号化回路４３で画像
符号化装置２の可変長符号化回路３０と逆の復号を行
う。その結果が逆量子化器４４で逆量子化され、ＩＤＣ
Ｔ回路４５で周波数領域の画像データが時間領域の画像
データに変換されて、信号減算器４６を介してフレーム
メモリ４７に記憶される。フレームメモリ４７に記憶さ
れた画像データが動き補償回路４８で可変長復号化回路
４３の結果を参照して動き補償されてその結果が信号減
算器４６においてＩＤＣＴ回路４５の変換結果に加算さ
れる。信号減算器４６から再生された画像データがＴＶ
モニタ５に出力される。復号時もレート制御回路４９
は、各ピクチャへのビット配分、仮想バッファメモリを
用いたレート制御、人間の視覚特性を考慮した適応量子
化を行う。
【００１５】図１に示した信号伝送系統においては以上
のように画像データの符号化とその復号が行われるが、
さらにピクチャとの関連においてその処理を述べる。
のように画像データの符号化とその復号が行われるが、
さらにピクチャとの関連においてその処理を述べる。
【００１６】ピクチャの構成 図４はＭＰＥＧにおける符号化順序を示したグラフであ
る。図５は図４に示したピクチャの意味とのその関連を
示したグラフである。符号「Ｉ」はＩ(Intra) ピクチャ
（画面内符号化ピクチャ）を示し、符号「Ｐ」はＰ(Pre
diction)ピクチャ（前方予測符号化ピクチャ）を示し、
符号「Ｂ」はＢ(Bidirection) ピクチャ（双方向予測
（外挿・内挿）符号化ピクチャ）を示す。Ｉピクチャと
はある画面、たとえば、フレームでそれ自身独立して再
生が可能な画像のことである。たとえば、画像符号化装
置２から符号化されたＩピクチャが送出されてきた場
合、画像復号化装置４においてはそのＩピクチャのみで
そのＩピクチャについて復号ができる。Ｐピクチャとは
それよりも前方（過去）にあるＩピクチャまたはＰピク
チャからの予測を使った符号化画像である。そのため、
画像復号化装置４において動き補償を行ってピクチャの
予測を行ってＰピクチャを得る。Ｂピクチャとは、それ
自身よりも前方（過去）にあるＩピクチャまたはＰピク
チャからの予測と後方（未来）にあるＩピクチャまたは
Ｐピクチャからの予測の両方を使用した画像のことであ
る。この場合も画像復号化装置４においてピクチャの予
測を行ってＢピクチャを得る。
る。図５は図４に示したピクチャの意味とのその関連を
示したグラフである。符号「Ｉ」はＩ(Intra) ピクチャ
（画面内符号化ピクチャ）を示し、符号「Ｐ」はＰ(Pre
diction)ピクチャ（前方予測符号化ピクチャ）を示し、
符号「Ｂ」はＢ(Bidirection) ピクチャ（双方向予測
（外挿・内挿）符号化ピクチャ）を示す。Ｉピクチャと
はある画面、たとえば、フレームでそれ自身独立して再
生が可能な画像のことである。たとえば、画像符号化装
置２から符号化されたＩピクチャが送出されてきた場
合、画像復号化装置４においてはそのＩピクチャのみで
そのＩピクチャについて復号ができる。Ｐピクチャとは
それよりも前方（過去）にあるＩピクチャまたはＰピク
チャからの予測を使った符号化画像である。そのため、
画像復号化装置４において動き補償を行ってピクチャの
予測を行ってＰピクチャを得る。Ｂピクチャとは、それ
自身よりも前方（過去）にあるＩピクチャまたはＰピク
チャからの予測と後方（未来）にあるＩピクチャまたは
Ｐピクチャからの予測の両方を使用した画像のことであ
る。この場合も画像復号化装置４においてピクチャの予
測を行ってＢピクチャを得る。
【００１７】図６（Ａ）はＧＯＰの構成を示したＭＰＥ
Ｇのビットストリームの構成を示すグラフであり、図６
（Ｂ）はＧＯＰヘッダの内容を示す図であり、図６
（Ｃ）はピクチャヘッダの内容を示す図である。ＭＰＥ
Ｇのビットストリームは、最上層にシーケンス層があ
り、複数のＧＯＰが連続している。それぞれのＧＯＰ
は、図６（Ａ）に示した内容を格納するＧＯＰヘッダ、
複数のピクチャ層が連続して構成されている。それぞれ
のピクチャ層は、図６（Ｃ）に示した内容を格納するピ
クチャヘッダと、複数のスライス層が連続している。そ
れぞれのスライス層は、スライス情報を記憶する部分
と、複数のマクロブロックが連続している。それぞれの
マクロブロック層は、マクロブロック情報を格納する部
分と、複数のブロックが連続している。それぞれのブロ
ック層は、上述したＤＣＴ符号化された画像データが格
納されている。
Ｇのビットストリームの構成を示すグラフであり、図６
（Ｂ）はＧＯＰヘッダの内容を示す図であり、図６
（Ｃ）はピクチャヘッダの内容を示す図である。ＭＰＥ
Ｇのビットストリームは、最上層にシーケンス層があ
り、複数のＧＯＰが連続している。それぞれのＧＯＰ
は、図６（Ａ）に示した内容を格納するＧＯＰヘッダ、
複数のピクチャ層が連続して構成されている。それぞれ
のピクチャ層は、図６（Ｃ）に示した内容を格納するピ
クチャヘッダと、複数のスライス層が連続している。そ
れぞれのスライス層は、スライス情報を記憶する部分
と、複数のマクロブロックが連続している。それぞれの
マクロブロック層は、マクロブロック情報を格納する部
分と、複数のブロックが連続している。それぞれのブロ
ック層は、上述したＤＣＴ符号化された画像データが格
納されている。
【００１８】図７はＤＶＤ用編集システムの構成図であ
る。図８は図７に示したオーサリングシステムの構成図
である。ＤＶＤ用編集システムは、編集部５０、オーサ
リングシステム６０、符号化部７０、マスタリング部８
０から構成されている。編集部５０において、映画、Ｔ
Ｖ番組などの映像内容についてのビデオ信号とオーディ
オ信号を編集して、エデットマスターとして、ビデオ信
号をカセットビデオテープ５１に記録したもの、オーデ
ィオマスターとしてオーディオ信号を磁気テープ５２に
記録したもの、字幕マスターとしてカセットテープ５３
に記録してものを作成する。編集記録状況をディスク５
４とデータシート５５に記しておく。オーサリングシス
テム６０および符号化部７０においては、上記エデット
マスターから、ビデオ信号を読みだしビデオ符号化装置
７５においてＭＰＥＧ２のビット列になるようにビデオ
信号を符号化する。また、オーディオ信号がオーディオ
符号化装置７１で圧縮符号化されてＨＤＤ７２に記憶さ
れており、字幕データが字幕符号化装置７３で符号化さ
れていてＨＤＤ７４に記憶されているので、これらＨＤ
Ｄ７２，７４に記憶されている符号化オーディオ信号と
符号化字幕データがビデオ符号化装置７５において同期
が取られてＭＰＥＧ２のビット列に並べられてＨＤＤ７
７に記憶される。上記の処理はＴＯＣマスター記憶ディ
スク７６から読み出したＴＯＣを用いて行われる。その
結果が完パケットテープ７８に記憶される。これらの処
理はコントローラ７９によって制御される。符号化部７
０とマスタリング部８０において、誤り訂正符号（ＥＣ
Ｃ）が付加されて変調されてカッティングマシンに送出
されてスタンパディスクが製造される。このスタンパデ
ィスクからＤＶＤが複製されていく。このようにして生
成されたＤＶＤは図１に示した蓄積メディア３の１つと
して用いることができる。
る。図８は図７に示したオーサリングシステムの構成図
である。ＤＶＤ用編集システムは、編集部５０、オーサ
リングシステム６０、符号化部７０、マスタリング部８
０から構成されている。編集部５０において、映画、Ｔ
Ｖ番組などの映像内容についてのビデオ信号とオーディ
オ信号を編集して、エデットマスターとして、ビデオ信
号をカセットビデオテープ５１に記録したもの、オーデ
ィオマスターとしてオーディオ信号を磁気テープ５２に
記録したもの、字幕マスターとしてカセットテープ５３
に記録してものを作成する。編集記録状況をディスク５
４とデータシート５５に記しておく。オーサリングシス
テム６０および符号化部７０においては、上記エデット
マスターから、ビデオ信号を読みだしビデオ符号化装置
７５においてＭＰＥＧ２のビット列になるようにビデオ
信号を符号化する。また、オーディオ信号がオーディオ
符号化装置７１で圧縮符号化されてＨＤＤ７２に記憶さ
れており、字幕データが字幕符号化装置７３で符号化さ
れていてＨＤＤ７４に記憶されているので、これらＨＤ
Ｄ７２，７４に記憶されている符号化オーディオ信号と
符号化字幕データがビデオ符号化装置７５において同期
が取られてＭＰＥＧ２のビット列に並べられてＨＤＤ７
７に記憶される。上記の処理はＴＯＣマスター記憶ディ
スク７６から読み出したＴＯＣを用いて行われる。その
結果が完パケットテープ７８に記憶される。これらの処
理はコントローラ７９によって制御される。符号化部７
０とマスタリング部８０において、誤り訂正符号（ＥＣ
Ｃ）が付加されて変調されてカッティングマシンに送出
されてスタンパディスクが製造される。このスタンパデ
ィスクからＤＶＤが複製されていく。このようにして生
成されたＤＶＤは図１に示した蓄積メディア３の１つと
して用いることができる。
【００１９】以下、図９を参照してビデオ信号の編集に
関連してＧＯＰおよびピクチャの詳細について述べる。
図９は一般的なＭＰＥＧの画像列の様子を示すグラフで
ある。この図面に図解したものは、連続した長い画像
（ピクチャ列）のうちの途中を切り出して示したもの
で、原画像（符号化前のオリジナル・ピクチャ）がどの
ような種類の画像に圧縮符号化（エンコード）されて、
どのような順番に並べられるのかを代表的な例を用いて
表したものである。Ｉピクチャ、Ｂピクチャ、Ｐピクチ
ャに添えられた数字、たとえば、B3は原画像（符号化前
のオリジナル・ピクチャ）の３番目のピクチャに関連す
るＢピクチャを示している。なお、値の小さい数字が過
去を示し、大きい数字が未来を表している。実線の矢印
はどのピクチャからどのピクチャが予測されているかの
関係を示す。
関連してＧＯＰおよびピクチャの詳細について述べる。
図９は一般的なＭＰＥＧの画像列の様子を示すグラフで
ある。この図面に図解したものは、連続した長い画像
（ピクチャ列）のうちの途中を切り出して示したもの
で、原画像（符号化前のオリジナル・ピクチャ）がどの
ような種類の画像に圧縮符号化（エンコード）されて、
どのような順番に並べられるのかを代表的な例を用いて
表したものである。Ｉピクチャ、Ｂピクチャ、Ｐピクチ
ャに添えられた数字、たとえば、B3は原画像（符号化前
のオリジナル・ピクチャ）の３番目のピクチャに関連す
るＢピクチャを示している。なお、値の小さい数字が過
去を示し、大きい数字が未来を表している。実線の矢印
はどのピクチャからどのピクチャが予測されているかの
関係を示す。
【００２０】ＧＯＰが完全に独立していないことの説明 図９に示した原画像Ａは、たとえば、図１および図２に
示した画像符号化装置２または図７または図８に示した
符号化装置（エンコーダという）において、下記の順番
で順次圧縮符号化されている。 『B3−B2−P1−B0−B1−I2−B3−B4−P5−B6−B7−P8−
B9−B10−I11 −B12 −B13 −P14 』
示した画像符号化装置２または図７または図８に示した
符号化装置（エンコーダという）において、下記の順番
で順次圧縮符号化されている。 『B3−B2−P1−B0−B1−I2−B3−B4−P5−B6−B7−P8−
B9−B10−I11 −B12 −B13 −P14 』
【００２１】このピクチャ列について述べる。実線の矢
印で示されるように、例えば、位置５（かっこ内に示し
た数字は、ピクチャ（画像）などの位置を示す）のI2−
ピクチャは、位置６のB3−ピクチャ、位置７のB4−ピク
チャ、位置８のP5−ピクチャの３画像の前方予測にに使
用される。位置６のB3−ピクチャおよび位置７のB4−ピ
クチャは、位置８のP5−ピクチャからの後方予測に使用
される。
印で示されるように、例えば、位置５（かっこ内に示し
た数字は、ピクチャ（画像）などの位置を示す）のI2−
ピクチャは、位置６のB3−ピクチャ、位置７のB4−ピク
チャ、位置８のP5−ピクチャの３画像の前方予測にに使
用される。位置６のB3−ピクチャおよび位置７のB4−ピ
クチャは、位置８のP5−ピクチャからの後方予測に使用
される。
【００２２】エンコーダで圧縮エンコードされたピクチ
ャは、画像復号化装置（デコーダ）におけるデコード時
に便利なように、エンコーダ出力Ｂとして示したよう
に、並べ替えが行なわれる。例えば、原画像Ａの位置５
のI2- ピクチャは、エンコード出力時には位置９に置か
れるが、位置６のB3- ピクチャおよび位置７のB4- ピク
チャは、後ろにずれた位置１０のP5- ピクチャの後ろの
位置１１と位置１２に置かれる。こうすることによりデ
コーダ入力Ｃとして示したように、たとえば、位置１６
のB3- ピクチャと位置１７のB4- ピクチャを再生するの
に必要な位置１４のI2- ピクチャと位置１５のP5- ピク
チャを先にデコードすることができる。エンコーダ出力
Ｂにおいて、Ｉピクチャ（たとえば、I2- ピクチャ）か
ら次のＩピクチャ（たとえば、I11 ピクチャ）の手前ま
で、つまり、B7- ピクチャまで、１つのＧＯＰと呼ぶ。
ＧＯＰは図６（Ａ）に図解した構成になっているが、以
下の記述においては、ピクチャのみを簡略化して示す。
位置１３に示したＧＯＰは、僅か９のピクチャしか示し
ていないが、簡略化して示したためである。
ャは、画像復号化装置（デコーダ）におけるデコード時
に便利なように、エンコーダ出力Ｂとして示したよう
に、並べ替えが行なわれる。例えば、原画像Ａの位置５
のI2- ピクチャは、エンコード出力時には位置９に置か
れるが、位置６のB3- ピクチャおよび位置７のB4- ピク
チャは、後ろにずれた位置１０のP5- ピクチャの後ろの
位置１１と位置１２に置かれる。こうすることによりデ
コーダ入力Ｃとして示したように、たとえば、位置１６
のB3- ピクチャと位置１７のB4- ピクチャを再生するの
に必要な位置１４のI2- ピクチャと位置１５のP5- ピク
チャを先にデコードすることができる。エンコーダ出力
Ｂにおいて、Ｉピクチャ（たとえば、I2- ピクチャ）か
ら次のＩピクチャ（たとえば、I11 ピクチャ）の手前ま
で、つまり、B7- ピクチャまで、１つのＧＯＰと呼ぶ。
ＧＯＰは図６（Ａ）に図解した構成になっているが、以
下の記述においては、ピクチャのみを簡略化して示す。
位置１３に示したＧＯＰは、僅か９のピクチャしか示し
ていないが、簡略化して示したためである。
【００２３】本願発明者は、上記ＭＰＥＧのＧＯＰにつ
いて考察した結果、下記に述べる問題があることを見出
した。それは、ＧＯＰが完全に独立していないため、編
集作業などでピクチャの差し替えを行うと正確な画像の
再生が行えないということである。以下、その詳細をＭ
ＰＥＧおよびＧＯＰの内容を具体的な述べて明らかにす
る。
いて考察した結果、下記に述べる問題があることを見出
した。それは、ＧＯＰが完全に独立していないため、編
集作業などでピクチャの差し替えを行うと正確な画像の
再生が行えないということである。以下、その詳細をＭ
ＰＥＧおよびＧＯＰの内容を具体的な述べて明らかにす
る。
【００２４】図９においてデコーダによって再生された
再生画像Ｄとして示した位置１８のB0- ピクチャと位置
１９のB1- ピクチャの再生に留意されたい。ＧＯＰの構
成の観点から見れば、B0- ピクチャとB1- ピクチャは、
I2- ピクチャと同一のＧＯＰ、すなわち、「ＧＯＰ Ｎ
（位置１３）」に含まれるが、その再生のためには、一
つ手前のＧＯＰ、すなわち、「ＧＯＰ N-1 」に含まれ
るＰピクチャ（P1- ピクチャ）とＩピクチャ（I2- ピク
チャ）からの予測（位置２０）が必要となる。つまり、
「ＧＯＰ Ｎ（位置１３）」は、1 つ前の「ＧＯＰN-1
」内のP1- ピクチャを用いるから、「ＧＯＰ N-1 」
と関連を持っており、『ＧＯＰは完全には独立していな
い』。
再生画像Ｄとして示した位置１８のB0- ピクチャと位置
１９のB1- ピクチャの再生に留意されたい。ＧＯＰの構
成の観点から見れば、B0- ピクチャとB1- ピクチャは、
I2- ピクチャと同一のＧＯＰ、すなわち、「ＧＯＰ Ｎ
（位置１３）」に含まれるが、その再生のためには、一
つ手前のＧＯＰ、すなわち、「ＧＯＰ N-1 」に含まれ
るＰピクチャ（P1- ピクチャ）とＩピクチャ（I2- ピク
チャ）からの予測（位置２０）が必要となる。つまり、
「ＧＯＰ Ｎ（位置１３）」は、1 つ前の「ＧＯＰN-1
」内のP1- ピクチャを用いるから、「ＧＯＰ N-1 」
と関連を持っており、『ＧＯＰは完全には独立していな
い』。
【００２５】ＧＯＰが完全に独立していないことに起因
する編集の問題 通常、ＧＯＰは独立しており、編集はＧＯＰごと独立し
て行えると言われているが、正確には独立していない。
もちろん、ＧＯＰ内のピクチャを連続的に処理している
場合は問題がＧＯＰの非独立性が問題になることは少な
いが、あるシーンでカットして編集するとか、ＧＯＰの
伝送が中断したあとのピクチャの復号などの場合にはこ
のＧＯＰの非独立性が問題になる。以下、図７および図
８に示した編集の場合を例示してその問題を詳述する。
図１０は、たとえば、図７および図８に示した編集シス
テムにおいて、ＧＯＰ単位での画像編集を行なったとき
に起こる問題を説明するための図である。原画像Ａは図
９に図解したものと同じ構成である。エンコーダで連続
的に圧縮エンコードされたＧＯＰの列を「編集前のＧＯ
Ｐ列Ｂ」とする。この編集前のＧＯＰ例Ｂは図９に示し
たエンコーダ出力ＢのＧＯＰ例と同じ構成である。この
例では、「ＧＯＰ Ｎ（位置２３）」のピクチャ列：I
2,B0,B1,P5,B3,B4,P8,B6,B7を「ＧＯＰ N'（位置２
４）」に示した、ピクチャ列：I2',B0',B1',P5',B3',B
4',P8',B6',B7'に差し替える( 並べ替える) 編集を行な
って、「編集後のＧＯＰ列Ｅ」にしたとする。この編集
後のＧＯＰ列Ｅは、Ｉピクチャ、Ｂピクチャ、Ｐピクチ
ャの順序は同じであるが、「’」をつけない編集前のピ
クチャが「’」をつけたピクチャに差し替えられたこと
を示している。
する編集の問題 通常、ＧＯＰは独立しており、編集はＧＯＰごと独立し
て行えると言われているが、正確には独立していない。
もちろん、ＧＯＰ内のピクチャを連続的に処理している
場合は問題がＧＯＰの非独立性が問題になることは少な
いが、あるシーンでカットして編集するとか、ＧＯＰの
伝送が中断したあとのピクチャの復号などの場合にはこ
のＧＯＰの非独立性が問題になる。以下、図７および図
８に示した編集の場合を例示してその問題を詳述する。
図１０は、たとえば、図７および図８に示した編集シス
テムにおいて、ＧＯＰ単位での画像編集を行なったとき
に起こる問題を説明するための図である。原画像Ａは図
９に図解したものと同じ構成である。エンコーダで連続
的に圧縮エンコードされたＧＯＰの列を「編集前のＧＯ
Ｐ列Ｂ」とする。この編集前のＧＯＰ例Ｂは図９に示し
たエンコーダ出力ＢのＧＯＰ例と同じ構成である。この
例では、「ＧＯＰ Ｎ（位置２３）」のピクチャ列：I
2,B0,B1,P5,B3,B4,P8,B6,B7を「ＧＯＰ N'（位置２
４）」に示した、ピクチャ列：I2',B0',B1',P5',B3',B
4',P8',B6',B7'に差し替える( 並べ替える) 編集を行な
って、「編集後のＧＯＰ列Ｅ」にしたとする。この編集
後のＧＯＰ列Ｅは、Ｉピクチャ、Ｂピクチャ、Ｐピクチ
ャの順序は同じであるが、「’」をつけない編集前のピ
クチャが「’」をつけたピクチャに差し替えられたこと
を示している。
【００２６】「ＧＯＰ N'」のピクチャは、Ｉピクチ
ャ、Ｂピクチャ、Ｐピクチャの順序は同じであるから、
フォーマット的には問題がない。しかし、これをデコー
ダ入力Ｆとして見てみると、差し替えたB0'-ピクチャ
（位置２７）とB1'-ピクチャ（位置２８）を再生するた
めには、差し替えていないP1- ピクチャ（位置２６）か
らの前方予測が必要になる。ところが、すでに編集をし
てピクチャを差し替えてしまったので、「ＧＯＰ N-1
」の差し替えていないP1- ピクチャ（位置２６）と、
「ＧＯＰ Ｎ」の差し替えたB0'-ピクチャ（位置２７）
とB1'-ピクチャ( 位置２８）とのあいだの相関関係はな
い。その結果、B0'-ピクチャ（位置２７）とB1'-ピクチ
ャ( 位置２８）の復号には、P1- ピクチャ( 位置２６）
からの予測（位置２９）は使えなくなる。同様の問題
が、「ＧＯＰ N'」の最後のピクチャと、「ＧＯＰ N+
1」のピクチャとの関係においても発生し、「ＧＯＰ N+
1」の最初の２枚のＢピクチャ（B9,B10) への予測（位
置３０）も意味のないものとなる。以上のごとく、画像
編集すると、一つ前のＧＯＰの最後のＰピクチャから次
のＧＯＰの始めのＢピクチャの予測ができなくなるた
め、編集処理後の再生画像Ｇは、ＧＯＰ内の最初にある
いくつかのＢピクチャ（位置３２、３３）は正しくない
ピクチャを含むことになる。これまで、再生できないＢ
ピクチャは飛ばされるか、あるいは、直前のＧＯＰ内の
Ｐピクチャで代用されることになるが、当然、再生画像
のその部分の動きは不自然にならざるをえない。
ャ、Ｂピクチャ、Ｐピクチャの順序は同じであるから、
フォーマット的には問題がない。しかし、これをデコー
ダ入力Ｆとして見てみると、差し替えたB0'-ピクチャ
（位置２７）とB1'-ピクチャ（位置２８）を再生するた
めには、差し替えていないP1- ピクチャ（位置２６）か
らの前方予測が必要になる。ところが、すでに編集をし
てピクチャを差し替えてしまったので、「ＧＯＰ N-1
」の差し替えていないP1- ピクチャ（位置２６）と、
「ＧＯＰ Ｎ」の差し替えたB0'-ピクチャ（位置２７）
とB1'-ピクチャ( 位置２８）とのあいだの相関関係はな
い。その結果、B0'-ピクチャ（位置２７）とB1'-ピクチ
ャ( 位置２８）の復号には、P1- ピクチャ( 位置２６）
からの予測（位置２９）は使えなくなる。同様の問題
が、「ＧＯＰ N'」の最後のピクチャと、「ＧＯＰ N+
1」のピクチャとの関係においても発生し、「ＧＯＰ N+
1」の最初の２枚のＢピクチャ（B9,B10) への予測（位
置３０）も意味のないものとなる。以上のごとく、画像
編集すると、一つ前のＧＯＰの最後のＰピクチャから次
のＧＯＰの始めのＢピクチャの予測ができなくなるた
め、編集処理後の再生画像Ｇは、ＧＯＰ内の最初にある
いくつかのＢピクチャ（位置３２、３３）は正しくない
ピクチャを含むことになる。これまで、再生できないＢ
ピクチャは飛ばされるか、あるいは、直前のＧＯＰ内の
Ｐピクチャで代用されることになるが、当然、再生画像
のその部分の動きは不自然にならざるをえない。
【００２７】ＭＰＥＧ２においては、このように圧縮エ
ンコード後にＧＯＰ単位で編集してしまった場合発生す
る問題点については、編集点前後のＧＯＰには使用不可
能なＢピクチャが含まれていることを表すために、図６
（Ｂ）に示したように、ＧＯＰヘッダの中に「Broken l
ink 」フラグを設けて、Ｂピクチャの正当性を示しては
いるが、ピクチャそのもののその修復は講じていない。
ンコード後にＧＯＰ単位で編集してしまった場合発生す
る問題点については、編集点前後のＧＯＰには使用不可
能なＢピクチャが含まれていることを表すために、図６
（Ｂ）に示したように、ＧＯＰヘッダの中に「Broken l
ink 」フラグを設けて、Ｂピクチャの正当性を示しては
いるが、ピクチャそのもののその修復は講じていない。
【００２８】しかし、ＭＰＥＧにおいては、図６（Ｂ）
に示すように、ＧＯＰの独立性を示す「CLOSED GOP」が
設けられている。図１１を参照して編集を可能にする
「CLOSED GOP」について述べる。図１１における原画像
Ａ、編集前のＧＯＰ列Ｂ、編集後のＧＯＰ列Ｅ、デコー
ダ入力Ｆは、図１０に示したものと同じである。「CLOS
ED GOP」は、ＧＯＰ内の最初にあるいくつかのＢピクチ
ャ（位置４５，４６，４７，４８）などをエンコードす
る際に、「その一つ前のＧＯＰの最後のＩピクチャ、Ｐ
ピクチャからの予測（位置３４）」を使用せずに、原画
面の順で直後のＩピクチャのみから予測するようにコー
ディングする（Only Backward Prediction）ことにより
ＧＯＰの独立性を確保する考え方である。「CLOSED GO
P」においては、エンコーダ出力Ｂの「ＧＯＰ Ｎ（位
置３６）」をピクチャのフォーマットは換えずにピクチ
ャの内容を差し替えた別の「ＧＯＰN'（位置３８）」と
置き換えて、編集後のＧＯＰ列Ｅとしても、デコーダに
おいては、元々前のＧＯＰからの前方予測（位置３９，
位置４０）を必要としていないので、再生画像Ｈにおい
てもＩピクチャの直後にある何枚かのＢピクチャ（位置
４３のB0',B1' 、位置４４のB9,B10）は、Ｉピクチャか
らの後方予測のみを使用して再生が可能となる。この方
法は一見良さそうな解決策であるが自己矛盾を含んでい
る。その理由を以下に述べる。もともとＢピクチャとい
うのは、前方と後方の両側からの予測を使うため、前方
予測のみのＰピクチャに比べて予測精度が良く、Ｐピク
チャより量子化ビット数を落としても画質が低下しない
という利点がある。すなわち、両方向からの予測という
のはビット効率を上げつつ画質も向上させるという特質
を持つ。しかしながら、上述したように、Ｂピクチャの
エンコードを片側のみしか使用しないということは、通
常の場合、ＢピクチャはＰピクチャよりも量子化レベル
が粗いため、Ｐピクチャのみでエンコードしたときより
も品質が低下した画像しか得られない。したがって、編
集性を持たせようとして「CLOSED GOP」を多用すること
は、Ｂピクチャの利点を殺すことにつながり、Ｂピクチ
ャを用いる目的に反し、Ｂピクチャを用いる効果が得ら
れない。
に示すように、ＧＯＰの独立性を示す「CLOSED GOP」が
設けられている。図１１を参照して編集を可能にする
「CLOSED GOP」について述べる。図１１における原画像
Ａ、編集前のＧＯＰ列Ｂ、編集後のＧＯＰ列Ｅ、デコー
ダ入力Ｆは、図１０に示したものと同じである。「CLOS
ED GOP」は、ＧＯＰ内の最初にあるいくつかのＢピクチ
ャ（位置４５，４６，４７，４８）などをエンコードす
る際に、「その一つ前のＧＯＰの最後のＩピクチャ、Ｐ
ピクチャからの予測（位置３４）」を使用せずに、原画
面の順で直後のＩピクチャのみから予測するようにコー
ディングする（Only Backward Prediction）ことにより
ＧＯＰの独立性を確保する考え方である。「CLOSED GO
P」においては、エンコーダ出力Ｂの「ＧＯＰ Ｎ（位
置３６）」をピクチャのフォーマットは換えずにピクチ
ャの内容を差し替えた別の「ＧＯＰN'（位置３８）」と
置き換えて、編集後のＧＯＰ列Ｅとしても、デコーダに
おいては、元々前のＧＯＰからの前方予測（位置３９，
位置４０）を必要としていないので、再生画像Ｈにおい
てもＩピクチャの直後にある何枚かのＢピクチャ（位置
４３のB0',B1' 、位置４４のB9,B10）は、Ｉピクチャか
らの後方予測のみを使用して再生が可能となる。この方
法は一見良さそうな解決策であるが自己矛盾を含んでい
る。その理由を以下に述べる。もともとＢピクチャとい
うのは、前方と後方の両側からの予測を使うため、前方
予測のみのＰピクチャに比べて予測精度が良く、Ｐピク
チャより量子化ビット数を落としても画質が低下しない
という利点がある。すなわち、両方向からの予測という
のはビット効率を上げつつ画質も向上させるという特質
を持つ。しかしながら、上述したように、Ｂピクチャの
エンコードを片側のみしか使用しないということは、通
常の場合、ＢピクチャはＰピクチャよりも量子化レベル
が粗いため、Ｐピクチャのみでエンコードしたときより
も品質が低下した画像しか得られない。したがって、編
集性を持たせようとして「CLOSED GOP」を多用すること
は、Ｂピクチャの利点を殺すことにつながり、Ｂピクチ
ャを用いる目的に反し、Ｂピクチャを用いる効果が得ら
れない。
【００２９】以上のとおり、ＭＰＥＧにおいては、上述
した編集によるピクチャの差し替えを行うと、画質が低
下するという問題に遭遇する。この種の問題は、特に、
正確な符号化・復号化を行う画像処理において問題とな
る。以上の例は、特に、編集作業に伴うピクチャの部分
的な差し替えに起因する問題を述べたが、編集作業に係
わらず、たとえば、図１に示したシステムをマルチメデ
ィアの映像信号伝送に適用した場合、ビットストリーム
において上述したと同様のピクチャの差し替え、たとえ
ば、システム故障に伴うバックアップ系への回線切換に
伴うピクチャの入替えなどの場合も上記同様の問題に遭
遇する。
した編集によるピクチャの差し替えを行うと、画質が低
下するという問題に遭遇する。この種の問題は、特に、
正確な符号化・復号化を行う画像処理において問題とな
る。以上の例は、特に、編集作業に伴うピクチャの部分
的な差し替えに起因する問題を述べたが、編集作業に係
わらず、たとえば、図１に示したシステムをマルチメデ
ィアの映像信号伝送に適用した場合、ビットストリーム
において上述したと同様のピクチャの差し替え、たとえ
ば、システム故障に伴うバックアップ系への回線切換に
伴うピクチャの入替えなどの場合も上記同様の問題に遭
遇する。
【００３０】本発明の基本的な提案 上述した問題を解決する本発明の基本的な提案について
述べる。まず、本発明の基本となるとなる圧縮符号化の
方法について述べる。ＭＰＥＧの圧縮符号化のシーケン
スには、上述した方法のほかにプログラムの先頭におい
て使用される特別なシーケンスを作ることも可能であ
る。このシーケンスを画像列の途中に使った場合の効果
を図１２を参照して述べる。図１２は本発明の圧縮・符
号化処理を示すグラフである。通常のシーケンスＡＡに
おいては、例えば、P1- ピクチャ（位置５０）の後ろに
はB0- ピクチャ（位置５１）、B1- ピクチャ（位置５
２）、I2- ピクチャ（位置５３）と続けるが、本発明に
おいては、それとは別に特別なシーケンスを考える。こ
れをカットシーケンスＢＢという。カットシーケンスＢ
Ｂでは、編集によって差し替えが行われるピクチャの直
前のP1- ピクチャ（位置５５）の後ろを一旦、カットし
（位置５９）、その後をI0- ピクチャ（位置５６）と
し、そこからB1- ピクチャ（位置５７）、B2- ピクチャ
（位置５８）というふうに、通常のシーケンスと同じよ
うに続けていく。
述べる。まず、本発明の基本となるとなる圧縮符号化の
方法について述べる。ＭＰＥＧの圧縮符号化のシーケン
スには、上述した方法のほかにプログラムの先頭におい
て使用される特別なシーケンスを作ることも可能であ
る。このシーケンスを画像列の途中に使った場合の効果
を図１２を参照して述べる。図１２は本発明の圧縮・符
号化処理を示すグラフである。通常のシーケンスＡＡに
おいては、例えば、P1- ピクチャ（位置５０）の後ろに
はB0- ピクチャ（位置５１）、B1- ピクチャ（位置５
２）、I2- ピクチャ（位置５３）と続けるが、本発明に
おいては、それとは別に特別なシーケンスを考える。こ
れをカットシーケンスＢＢという。カットシーケンスＢ
Ｂでは、編集によって差し替えが行われるピクチャの直
前のP1- ピクチャ（位置５５）の後ろを一旦、カットし
（位置５９）、その後をI0- ピクチャ（位置５６）と
し、そこからB1- ピクチャ（位置５７）、B2- ピクチャ
（位置５８）というふうに、通常のシーケンスと同じよ
うに続けていく。
【００３１】通常シーケンスＡＡのピクチャ列は、 具体的には、「B3,B2,P1,B0,B1,I2,B3,B4,P5」 一般的には、「Ｂ，Ｂ，Ｐ，Ｂ，Ｂ，Ｉ，Ｂ，Ｂ，Ｐ」 となるが、カットシーケンスＢＢでは、 具体的には、「B3,B2,P1,IO,B1,B2,P3,B4,B5,P6 」 一般的には、「Ｂ，Ｂ，Ｐ，Ｉ，Ｂ，Ｂ，Ｐ，Ｂ，Ｂ，
Ｐ」 となる。つまり、カット位置５９の所のＢピクチャ（B0
- ピクチャ) が抜け、Ｉピクチャ(I0-ピクチャ) が挿入
されたようになる。これにより、次のＧＯＰはＩピクチ
ャから始まり、次にＰピクチャが続き、その後にＢピク
チャが続く。このカットを置くことにより、カットの前
後の「ＧＯＰ N-1（位置６０）」と「ＧＯＰ N（位置６
１）」の間は、ピクチャの予測が不要であり、「ＧＯＰ
N-1（位置６０）」と「ＧＯＰ N（位置６１）」は完全
に独立している。したがって、デコーダ入力ＤＤを見る
と、位置６３のカット以降を同様のルールのシーケンス
でエンコードされた別のＧＯＰ列（位置６４）と入れ替
えたとしても、何の問題もなく再生できる（位置６
５）。しかも、上述した「CLOSED GOP」の手法も使って
いないので後方予測のみのＢピクチャは存在しておら
ず、画質の劣化に対しても影響がない。
Ｐ」 となる。つまり、カット位置５９の所のＢピクチャ（B0
- ピクチャ) が抜け、Ｉピクチャ(I0-ピクチャ) が挿入
されたようになる。これにより、次のＧＯＰはＩピクチ
ャから始まり、次にＰピクチャが続き、その後にＢピク
チャが続く。このカットを置くことにより、カットの前
後の「ＧＯＰ N-1（位置６０）」と「ＧＯＰ N（位置６
１）」の間は、ピクチャの予測が不要であり、「ＧＯＰ
N-1（位置６０）」と「ＧＯＰ N（位置６１）」は完全
に独立している。したがって、デコーダ入力ＤＤを見る
と、位置６３のカット以降を同様のルールのシーケンス
でエンコードされた別のＧＯＰ列（位置６４）と入れ替
えたとしても、何の問題もなく再生できる（位置６
５）。しかも、上述した「CLOSED GOP」の手法も使って
いないので後方予測のみのＢピクチャは存在しておら
ず、画質の劣化に対しても影響がない。
【００３２】詳述したシーケンスのみを使ってエンコー
ドしてＧＯＰを構成することは可能であり、この場合Ｇ
ＯＰごとに編集をしても何の問題もないが、この「カッ
トのあるシーケンス」をエンコーダ出力で見た場合の下
記シーケンスは、 IPBBPBBPBB,IPBBPBBPBB,IPBBPBBPBB,IPBBPBBPBB,IPBBPB
BPBB （カンマはＧＯＰの区切りを示す） 下記に示す通常のシーケンス IBBPBBPBB,IBBPBBPBB,IBBPBBPBB,IBBPBBPBB,IBBPBBPBB, と比べて、構成するピクチャの種別を見ると、平均的に
見てＩピクチャの枚数は0.9 倍に減るが、Ｐピクチャの
枚数は、1.35倍に増え、逆にＢピクチャの枚数は0.9 倍
に減り、相対的にＰピクチャの割合が増えるので、符号
化によって発生するビット量も増える。また、画質的に
見て有利であるといわれるＢピクチャの使用率が減るこ
ともあり、「カットシーケンス」のみを用いてＧＯＰ列
を構成することは、ＭＰＥＧの標準的方法である「CLOS
ED GOP」を用いる方法より好ましいとはいえても、最良
の方法とは言い難い。本発明のさらなる改善策を述べ
る。
ドしてＧＯＰを構成することは可能であり、この場合Ｇ
ＯＰごとに編集をしても何の問題もないが、この「カッ
トのあるシーケンス」をエンコーダ出力で見た場合の下
記シーケンスは、 IPBBPBBPBB,IPBBPBBPBB,IPBBPBBPBB,IPBBPBBPBB,IPBBPB
BPBB （カンマはＧＯＰの区切りを示す） 下記に示す通常のシーケンス IBBPBBPBB,IBBPBBPBB,IBBPBBPBB,IBBPBBPBB,IBBPBBPBB, と比べて、構成するピクチャの種別を見ると、平均的に
見てＩピクチャの枚数は0.9 倍に減るが、Ｐピクチャの
枚数は、1.35倍に増え、逆にＢピクチャの枚数は0.9 倍
に減り、相対的にＰピクチャの割合が増えるので、符号
化によって発生するビット量も増える。また、画質的に
見て有利であるといわれるＢピクチャの使用率が減るこ
ともあり、「カットシーケンス」のみを用いてＧＯＰ列
を構成することは、ＭＰＥＧの標準的方法である「CLOS
ED GOP」を用いる方法より好ましいとはいえても、最良
の方法とは言い難い。本発明のさらなる改善策を述べ
る。
【００３３】本発明の基本構想：ＥＤＬ：EDIT DECISIO
N LISTの活用 ＭＰＥＧにより圧縮される画像の応用用途を考えてみる
と、図７に示したシステムにおいてＤＶＤに代表される
様なパッケージメディアに記録するか、図１のシステム
の用途としてＶＯＤ(Video On Demand: ビデオ・オン・
デマンド）に代表されるような通信サービスに用いられ
る場合のように、完成された映画やドラマなどのプログ
ラムを一般利用者に提供する目的がほとんどである。こ
のような場合は、必ずと言ってよいほど、完成されたプ
ログラムが記録された通称「マスター」と呼ばれるビデ
オーテープかそれに準ずるもの（図７、エデットマスタ
ー、図８、ビデオマスター５１、オーディオマスター５
２など）を再生しこれを圧縮エンコードする。この「マ
スター」は、図７に示したスタジオなどにおいて、最終
の利用目的にあわせてディレクタの指示の元に入念に編
集処理がされている。言い換えれば、「マスター」作成
時には編集は必然である。
N LISTの活用 ＭＰＥＧにより圧縮される画像の応用用途を考えてみる
と、図７に示したシステムにおいてＤＶＤに代表される
様なパッケージメディアに記録するか、図１のシステム
の用途としてＶＯＤ(Video On Demand: ビデオ・オン・
デマンド）に代表されるような通信サービスに用いられ
る場合のように、完成された映画やドラマなどのプログ
ラムを一般利用者に提供する目的がほとんどである。こ
のような場合は、必ずと言ってよいほど、完成されたプ
ログラムが記録された通称「マスター」と呼ばれるビデ
オーテープかそれに準ずるもの（図７、エデットマスタ
ー、図８、ビデオマスター５１、オーディオマスター５
２など）を再生しこれを圧縮エンコードする。この「マ
スター」は、図７に示したスタジオなどにおいて、最終
の利用目的にあわせてディレクタの指示の元に入念に編
集処理がされている。言い換えれば、「マスター」作成
時には編集は必然である。
【００３４】この編集過程おいて、編集点は無目的にラ
ンダムに選択されているわけではなく、プログラムの内
容と最終利用目的にあわせて、ディレクタの意志決定の
元に例えばシーンごとに決められる。決定された編集点
は、編集決定リスト（通称、ＥＤＬ:Edit Decision Lis
t ）と呼ばれるリストとしてまとめられ、実際に編集動
作を行なう編集機などに供給され、編集機はＥＤＬを元
に素材を編集していき「マスター」が作り上げられる。
ンダムに選択されているわけではなく、プログラムの内
容と最終利用目的にあわせて、ディレクタの意志決定の
元に例えばシーンごとに決められる。決定された編集点
は、編集決定リスト（通称、ＥＤＬ:Edit Decision Lis
t ）と呼ばれるリストとしてまとめられ、実際に編集動
作を行なう編集機などに供給され、編集機はＥＤＬを元
に素材を編集していき「マスター」が作り上げられる。
【００３５】このようなＥＤＬの特質から見て、ＥＤＬ
とは、もし「マスター」を再編集する事があったなら
ば、最も編集の可能性の高い場所を記したリストといえ
る。とすれば、ＧＯＰ単位で任意に編集できるのが望ま
しいのかもしれないが、現実的に見て最も編集の可能性
の高いところのみを編集の対象と考えたほうが効率的で
ある。本発明はこのことに着目して、従来から存在する
編集に対する概念「どこで編集するか分からないので、
フレーム単位で編集できないのであれば、せめて全ての
ＧＯＰの境目は編集可能点とする」という考えを捨て、
「どうせＧＯＰ単位でしか編集できないのであれば、Ｇ
ＯＰという中途半端な単位ではなく、もっと人間的な映
像シーンの単位まで編集単位を粗くする」という発想に
切り換え、ＥＤＬに基づき、あるいはＥＤＬを修正し
た、あらかじめ登録された映像のシーンの区切りのみを
編集点の対象とする事にした。
とは、もし「マスター」を再編集する事があったなら
ば、最も編集の可能性の高い場所を記したリストといえ
る。とすれば、ＧＯＰ単位で任意に編集できるのが望ま
しいのかもしれないが、現実的に見て最も編集の可能性
の高いところのみを編集の対象と考えたほうが効率的で
ある。本発明はこのことに着目して、従来から存在する
編集に対する概念「どこで編集するか分からないので、
フレーム単位で編集できないのであれば、せめて全ての
ＧＯＰの境目は編集可能点とする」という考えを捨て、
「どうせＧＯＰ単位でしか編集できないのであれば、Ｇ
ＯＰという中途半端な単位ではなく、もっと人間的な映
像シーンの単位まで編集単位を粗くする」という発想に
切り換え、ＥＤＬに基づき、あるいはＥＤＬを修正し
た、あらかじめ登録された映像のシーンの区切りのみを
編集点の対象とする事にした。
【００３６】つまり、本発明を概略的に見ると、あらか
じめビデオ信号を圧縮符号化する前に、「マスター」に
付随するＥＤＬに示された編集点および編集の可能性が
考慮される場所を「カットのあるシーケンス」の区切り
点（カット）として登録しておき、カット（ＥＤＬの編
集点）においては画質に影響を与えないようにして圧縮
された画像の編集を可能にしつつ、ＧＯＰ毎の編集を否
定する代わりにＢピクチャの利用率を通常のエンコード
シーケンスと同等に確保することにより、圧縮率を低下
させないという効果を奏する。
じめビデオ信号を圧縮符号化する前に、「マスター」に
付随するＥＤＬに示された編集点および編集の可能性が
考慮される場所を「カットのあるシーケンス」の区切り
点（カット）として登録しておき、カット（ＥＤＬの編
集点）においては画質に影響を与えないようにして圧縮
された画像の編集を可能にしつつ、ＧＯＰ毎の編集を否
定する代わりにＢピクチャの利用率を通常のエンコード
シーケンスと同等に確保することにより、圧縮率を低下
させないという効果を奏する。
【００３７】本発明の実施例 図１３は本発明の第１実施例のビデオ信号処理装置の構
成図である。ビデオ信号処理装置において、圧縮エンコ
ードされる対象のビデオ信号が記録されているビデオマ
スター５１（図８）はディジタルＶＴＲ１７２で再生さ
れる。ビデオマスター５１に付随しているＥＤＬが書き
込まれたフロッピーディスク５４（図８）は、ＥＤＬ読
み取り部１６７に入力される。読み取られた編集点の情
報はさらに手動編集点修正装置１６８によって、編集点
の追加または削除を行なう。以上の手段で決定されたビ
デオマスター５１に対する編集点の情報は、カット判定
回路１６９に送られる。また、ディジタルＶＴＲ１７２
で再生されるビデオマスター５１にはあらかじめタイム
コード（ＴＣ）を記録しておき、そのディジタルＶＴＲ
１７２からのタイムコード出力１７０は、カット判定回
路１６９とビデオエンコーダ１７６（たとえば、図８の
エンコーダ７５に相当する）に送られている。カット判
定回路１６９では、入力された編集点情報を考慮しつ
つ、どのような圧縮シーケンス（Ｉピクチャ、Ｐピクチ
ャ、Ｂピクチャの並び方）を組めばよいか判定を行な
い、入力されるタイムコード１７０の一つ一つのフレー
ムナンバーとピクチャのシーケンスの対応を準備してお
く。例えば、編集点のない付近でのシーケンスでは、図
１２を参照して述べた、通常のシーケンス： 「Ｂ，Ｂ，Ｐ，Ｂ，Ｂ，Ｉ，Ｂ，Ｂ，Ｐ」 とし、編集点の付近では図１２を参照して述べた、「カ
ットのあるシーケンス」：「Ｂ，Ｂ，Ｐ，Ｉ，Ｂ，Ｂ，
Ｐ，Ｂ，Ｂ，Ｐ」のごとく、ピクチャの種類のエンコー
ドされる順番を決定する。
成図である。ビデオ信号処理装置において、圧縮エンコ
ードされる対象のビデオ信号が記録されているビデオマ
スター５１（図８）はディジタルＶＴＲ１７２で再生さ
れる。ビデオマスター５１に付随しているＥＤＬが書き
込まれたフロッピーディスク５４（図８）は、ＥＤＬ読
み取り部１６７に入力される。読み取られた編集点の情
報はさらに手動編集点修正装置１６８によって、編集点
の追加または削除を行なう。以上の手段で決定されたビ
デオマスター５１に対する編集点の情報は、カット判定
回路１６９に送られる。また、ディジタルＶＴＲ１７２
で再生されるビデオマスター５１にはあらかじめタイム
コード（ＴＣ）を記録しておき、そのディジタルＶＴＲ
１７２からのタイムコード出力１７０は、カット判定回
路１６９とビデオエンコーダ１７６（たとえば、図８の
エンコーダ７５に相当する）に送られている。カット判
定回路１６９では、入力された編集点情報を考慮しつ
つ、どのような圧縮シーケンス（Ｉピクチャ、Ｐピクチ
ャ、Ｂピクチャの並び方）を組めばよいか判定を行な
い、入力されるタイムコード１７０の一つ一つのフレー
ムナンバーとピクチャのシーケンスの対応を準備してお
く。例えば、編集点のない付近でのシーケンスでは、図
１２を参照して述べた、通常のシーケンス： 「Ｂ，Ｂ，Ｐ，Ｂ，Ｂ，Ｉ，Ｂ，Ｂ，Ｐ」 とし、編集点の付近では図１２を参照して述べた、「カ
ットのあるシーケンス」：「Ｂ，Ｂ，Ｐ，Ｉ，Ｂ，Ｂ，
Ｐ，Ｂ，Ｂ，Ｐ」のごとく、ピクチャの種類のエンコー
ドされる順番を決定する。
【００３８】以下、動作を述べる。ディジタルＶＴＲ１
７２においてビデオマスター５１の再生を開始する。カ
ット判定回路１６９は、入力されてくるタイムコード１
７０と、あらかじめ求めておいたシーケンスとの対応を
とりながら、そのタイムコードに相当する画像をどのピ
クチャのタイプで圧縮すればよいかをエンコードシーケ
ンス指示情報１７１としてビデオエンコーダ１７６に送
る。一方、ディジタルＶＴＲ１７２で再生されたビデオ
信号１７３は、画像遅延装置１７４に送られる。遅延量
１７８は外部より設定され、それと同じ遅延量１７８が
ビデオエンコーダ１７６にも送られている（遅延量１７
８については後述する）。遅延したビデオ信号１７５は
ビデオエンコーダ１７６に入力される。ビデオエンコー
ダ１７６には、遅延していないタイムコード１７０と、
それに伴ったエンコードシーケンス指示情報１７１が入
力されているので、ビデオエンコーダ１７６は、ビデオ
信号の遅延分だけ、前もってどのタイミングでどのよう
な圧縮エンコードをすればよいかが分かる。
７２においてビデオマスター５１の再生を開始する。カ
ット判定回路１６９は、入力されてくるタイムコード１
７０と、あらかじめ求めておいたシーケンスとの対応を
とりながら、そのタイムコードに相当する画像をどのピ
クチャのタイプで圧縮すればよいかをエンコードシーケ
ンス指示情報１７１としてビデオエンコーダ１７６に送
る。一方、ディジタルＶＴＲ１７２で再生されたビデオ
信号１７３は、画像遅延装置１７４に送られる。遅延量
１７８は外部より設定され、それと同じ遅延量１７８が
ビデオエンコーダ１７６にも送られている（遅延量１７
８については後述する）。遅延したビデオ信号１７５は
ビデオエンコーダ１７６に入力される。ビデオエンコー
ダ１７６には、遅延していないタイムコード１７０と、
それに伴ったエンコードシーケンス指示情報１７１が入
力されているので、ビデオエンコーダ１７６は、ビデオ
信号の遅延分だけ、前もってどのタイミングでどのよう
な圧縮エンコードをすればよいかが分かる。
【００３９】次に、図１４を参照してエンコードシーケ
ンスについて述べる。図１４は本発明の実施例のエンコ
ードシーケンスを図解したグラフである。ＭＰＥＧにお
いては、ＧＯＰ内のピクチャの枚数をＮで表し、Ｉピク
チャまたはＰピクチャの周期（Ｉピクチャから次のピク
チャまでのピクチャの枚数）をＭで表す。ＭＰＥＧにお
いては、このＮとＭに制約はないのであるが、ここでは
説明のため、通常シーケンスＡＡをピクチャ枚数Ｎ＝
９，ピクチャ周期Ｍ＝３とする。図１４において、四角
囲みされたＩピクチャはそこがカットのあるシーケンス
の先頭であることを示し、丸囲みされたＩピクチャでそ
の他の一般のＧＯＰの先頭を示している。なお、図１４
は、あくまでも原画像におけるピクチャのエンコード・
シーケンスの順番を示しており、図中、Ｉ，Ｐ，Ｂの添
え数字が原画上で「何番」目のピクチャであるか表して
いる。つまり、これらの数字はＧＯＰの概念をもつエン
コーダ出力でのピクチャの順番ではないことに注意され
たい（ピクチャの順序については、例えば、図１を参
照）。エンコーダ出力においては、例えば図１を参照し
て説明したようにＢピクチャの順番が入れ替わり、ＧＯ
Ｐ単位で見た場合はあくまでもＩピクチャが先頭であ
る。ピクチャ枚数Ｎ＝９の場合、カットシーケンスは、
そのカットの位置により、カットシーケンス０（Ｃ０）
からカットシーケンス８（Ｃ８）までの９種類の場合が
発生する。しかし、いずれの場合であっても、本発明に
おいては、図１２を参照して上述したように、カットの
あるシーケンスの先頭の（四角囲みで示した）Ｉピクチ
ャの直前のピクチャタイプは必ずＰピクチャであること
が大きな特徴である。
ンスについて述べる。図１４は本発明の実施例のエンコ
ードシーケンスを図解したグラフである。ＭＰＥＧにお
いては、ＧＯＰ内のピクチャの枚数をＮで表し、Ｉピク
チャまたはＰピクチャの周期（Ｉピクチャから次のピク
チャまでのピクチャの枚数）をＭで表す。ＭＰＥＧにお
いては、このＮとＭに制約はないのであるが、ここでは
説明のため、通常シーケンスＡＡをピクチャ枚数Ｎ＝
９，ピクチャ周期Ｍ＝３とする。図１４において、四角
囲みされたＩピクチャはそこがカットのあるシーケンス
の先頭であることを示し、丸囲みされたＩピクチャでそ
の他の一般のＧＯＰの先頭を示している。なお、図１４
は、あくまでも原画像におけるピクチャのエンコード・
シーケンスの順番を示しており、図中、Ｉ，Ｐ，Ｂの添
え数字が原画上で「何番」目のピクチャであるか表して
いる。つまり、これらの数字はＧＯＰの概念をもつエン
コーダ出力でのピクチャの順番ではないことに注意され
たい（ピクチャの順序については、例えば、図１を参
照）。エンコーダ出力においては、例えば図１を参照し
て説明したようにＢピクチャの順番が入れ替わり、ＧＯ
Ｐ単位で見た場合はあくまでもＩピクチャが先頭であ
る。ピクチャ枚数Ｎ＝９の場合、カットシーケンスは、
そのカットの位置により、カットシーケンス０（Ｃ０）
からカットシーケンス８（Ｃ８）までの９種類の場合が
発生する。しかし、いずれの場合であっても、本発明に
おいては、図１２を参照して上述したように、カットの
あるシーケンスの先頭の（四角囲みで示した）Ｉピクチ
ャの直前のピクチャタイプは必ずＰピクチャであること
が大きな特徴である。
【００４０】各シーケンスについて述べる。カットシーケンス０（Ｃ０） Ｉピクチャの位置が通常シーケンスに比べて前に２枚ず
れてそのＧＯＰの「０番」のピクチャがＩピクチャとな
る(I0)。しかし、直前のＧＯＰのピクチャはＰピクチャ
(P1)であるので、ＧＯＰはI0- ピクチャから始まり、シ
ーケンスの都合上そのＧＯＰのP9- ピクチャまでのピク
チャ枚数Ｎ＝１０となる。その後のＧＯＰは通常のシー
ケンスが続く。
れてそのＧＯＰの「０番」のピクチャがＩピクチャとな
る(I0)。しかし、直前のＧＯＰのピクチャはＰピクチャ
(P1)であるので、ＧＯＰはI0- ピクチャから始まり、シ
ーケンスの都合上そのＧＯＰのP9- ピクチャまでのピク
チャ枚数Ｎ＝１０となる。その後のＧＯＰは通常のシー
ケンスが続く。
【００４１】カットシーケンス１（Ｃ１） Ｉピクチャの位置が通常シーケンスに比べて前に１枚ず
れてカットのあるそのＧＯＰの「１番」のピクチャがＩ
ピクチャ(I1)となり、かつ、直前の「０番」のピクチャ
は、通常ではＢピクチャであるがＰピクチャ(P0)とす
る。このＧＯＰはI1- ピクチャから始まり、シーケンス
の都合上、P10-ピクチャまでのピクチャ枚数Ｎ＝１０と
なる。その後のＧＯＰは通常のシーケンスが続く。な
お、直前のＧＯＰは、P0- ピクチャまでを含むので、そ
れに限りピクチャ枚数Ｎ＝１０となる。
れてカットのあるそのＧＯＰの「１番」のピクチャがＩ
ピクチャ(I1)となり、かつ、直前の「０番」のピクチャ
は、通常ではＢピクチャであるがＰピクチャ(P0)とす
る。このＧＯＰはI1- ピクチャから始まり、シーケンス
の都合上、P10-ピクチャまでのピクチャ枚数Ｎ＝１０と
なる。その後のＧＯＰは通常のシーケンスが続く。な
お、直前のＧＯＰは、P0- ピクチャまでを含むので、そ
れに限りピクチャ枚数Ｎ＝１０となる。
【００４２】カットシーケンス２（Ｃ２） Ｉピクチャの位置は通常シーケンスと同じ位置で「２
番」のピクチャがＩピクチャ(I2)となるが、直前の「０
番」と「１番」の２枚ピクチャは、通常ではＢピクチャ
であるが、２枚ともＰピクチャ（PO,P1)とする。カット
のあるこのＧＯＰはI2- ピクチャから始まり、シーケン
スの都合上、P11-ピクチャまでのピクチャ枚数Ｎ＝１０
となる。その後のＧＯＰは通常のシーケンスが続く。な
お、直前のＧＯＰは、P0- ピクチャとP1- ピクチャまで
を含むので、それに限り、ピクチャ枚数Ｎ＝１１とな
る。
番」のピクチャがＩピクチャ(I2)となるが、直前の「０
番」と「１番」の２枚ピクチャは、通常ではＢピクチャ
であるが、２枚ともＰピクチャ（PO,P1)とする。カット
のあるこのＧＯＰはI2- ピクチャから始まり、シーケン
スの都合上、P11-ピクチャまでのピクチャ枚数Ｎ＝１０
となる。その後のＧＯＰは通常のシーケンスが続く。な
お、直前のＧＯＰは、P0- ピクチャとP1- ピクチャまで
を含むので、それに限り、ピクチャ枚数Ｎ＝１１とな
る。
【００４３】カットシーケンス３（Ｃ３） Ｉピクチャの位置が通常シーケンスに比べて後ろに１枚
ずれて「３番」のピクチャがＩピクチャ(I3)となる。た
だし、「２番」のピクチャまでは通常のシーケンスを延
ばす。カットのあるこのＧＯＰはI3- ピクチャから始ま
り、シーケンスの都合上、P12-ピクチャまでのピクチャ
枚数Ｎ＝１０となる。その後のＧＯＰは通常のシーケン
スが続く。なお、直前のＧＯＰは、B0- ピクチャとB1-
ピクチャとP2- ピクチャまでを含むので、それに限りピ
クチャ枚数Ｎ＝１２となる。
ずれて「３番」のピクチャがＩピクチャ(I3)となる。た
だし、「２番」のピクチャまでは通常のシーケンスを延
ばす。カットのあるこのＧＯＰはI3- ピクチャから始ま
り、シーケンスの都合上、P12-ピクチャまでのピクチャ
枚数Ｎ＝１０となる。その後のＧＯＰは通常のシーケン
スが続く。なお、直前のＧＯＰは、B0- ピクチャとB1-
ピクチャとP2- ピクチャまでを含むので、それに限りピ
クチャ枚数Ｎ＝１２となる。
【００４４】カットシーケンス４（Ｃ４） Ｉピクチャの位置が通常シーケンスに比べて後ろに２枚
ずれて「４番」のピクチャがＩピクチャ(I4)となる。た
だし、「２番」のピクチャまでは通常のシーケンスを延
ばし、かつ、I4- ピクチャの直前の「３番」のピクチャ
はＰピクチャ，３）。カットのあるこのＧＯＰはI4- ピ
クチャから始まり、シーケンスの都合上、P13-ピクチャ
までのピクチャ枚数Ｎ＝１０となる。その後のＧＯＰは
通常のシーケンスが続く。なお、直前のＧＯＰは、B0-
ピクチャ,B1-ピクチャ,P2-ピクチャ,P3-ピクチャまでを
含むので、それに限りピクチャ枚数Ｎ＝１３となる。
ずれて「４番」のピクチャがＩピクチャ(I4)となる。た
だし、「２番」のピクチャまでは通常のシーケンスを延
ばし、かつ、I4- ピクチャの直前の「３番」のピクチャ
はＰピクチャ，３）。カットのあるこのＧＯＰはI4- ピ
クチャから始まり、シーケンスの都合上、P13-ピクチャ
までのピクチャ枚数Ｎ＝１０となる。その後のＧＯＰは
通常のシーケンスが続く。なお、直前のＧＯＰは、B0-
ピクチャ,B1-ピクチャ,P2-ピクチャ,P3-ピクチャまでを
含むので、それに限りピクチャ枚数Ｎ＝１３となる。
【００４５】カットシーケンス５（Ｃ５） Ｉピクチャの位置が通常シーケンスに比べて後ろに３枚
ずれて「５番」のピクチャがＩピクチャ(I5)となる。た
だし、「２番」のピクチャまでは通常のシーケンスを延
ばし、かつ、I5- ピクチャの直前の２枚のうち「３番」
はＢピクチャ(B3)、「４番」のピクチャはＰピクチャ(P
4)とする。カットのあるこのＧＯＰはI5- ピクチャから
始まり、シーケンスの都合上、P14-ピクチャまでのピク
チャ枚数Ｎ＝１０となる。その後のＧＯＰは通常のシー
ケンスが続く。なお、直前のＧＯＰは、B0- ピクチャ,B
1-ピクチャ,P2-ピクチャ,B3-ピクチャ,P4-ピクチャまで
を含むので、それに限りピクチャ枚数Ｎ＝１４となる。
ずれて「５番」のピクチャがＩピクチャ(I5)となる。た
だし、「２番」のピクチャまでは通常のシーケンスを延
ばし、かつ、I5- ピクチャの直前の２枚のうち「３番」
はＢピクチャ(B3)、「４番」のピクチャはＰピクチャ(P
4)とする。カットのあるこのＧＯＰはI5- ピクチャから
始まり、シーケンスの都合上、P14-ピクチャまでのピク
チャ枚数Ｎ＝１０となる。その後のＧＯＰは通常のシー
ケンスが続く。なお、直前のＧＯＰは、B0- ピクチャ,B
1-ピクチャ,P2-ピクチャ,B3-ピクチャ,P4-ピクチャまで
を含むので、それに限りピクチャ枚数Ｎ＝１４となる。
【００４６】カットシーケンス６（Ｃ６） カットシーケンス０〜５のようにＩピクチャの位置を後
ろにずらすと直前のＧＯＰの長さ（ピクチャ枚数Ｎ）が
長くなり過ぎるので、このカットシーケンスでは、上記
とは別のルールとし、短めの通常シーケンスを置きその
後に改めてカットのあるシーケンスを置く。B0- ピクチ
ャから始まる通常のシーケンスはP5- ピクチャまでのピ
クチャ枚数Ｎ＝６で打ち切り、その後の「６番」のピク
チャをカットのあるシーケンスのＩピクチャ（I6) とす
る。カットのあるこのＧＯＰはI6- ピクチャから始ま
り、シーケンスの都合上、P15-ピクチャまでのピクチャ
枚数Ｎ＝１０となる。その後のＧＯＰは通常のシーケン
スが続く。
ろにずらすと直前のＧＯＰの長さ（ピクチャ枚数Ｎ）が
長くなり過ぎるので、このカットシーケンスでは、上記
とは別のルールとし、短めの通常シーケンスを置きその
後に改めてカットのあるシーケンスを置く。B0- ピクチ
ャから始まる通常のシーケンスはP5- ピクチャまでのピ
クチャ枚数Ｎ＝６で打ち切り、その後の「６番」のピク
チャをカットのあるシーケンスのＩピクチャ（I6) とす
る。カットのあるこのＧＯＰはI6- ピクチャから始ま
り、シーケンスの都合上、P15-ピクチャまでのピクチャ
枚数Ｎ＝１０となる。その後のＧＯＰは通常のシーケン
スが続く。
【００４７】カットシーケンス７（Ｃ７） カットシーケンス６（Ｃ６）と同様に、単純にＩピクチ
ャの位置を後ろにずらすと直前のＧＯＰの長さ（ピクチ
ャ枚数Ｎ）が長くなり過ぎるので、別のルールとし、短
めの通常シーケンスを置きその後に改めてカットのある
シーケンスを置く。B0- ピクチャから始まる通常のシー
ケンスをP5- ピクチャまで続け、かつ、その後の「６
番」にＰピクチャ(P6)を続け、ここでピクチャ枚数Ｎ＝
７でＧＯＰのシーケンスを打ち切る。その直後のＧＯＰ
の「７番」のピクチャをカットのあるシーケンスのＩピ
クチャ(I7)とする。カットのあるこのＧＯＰはI7- ピク
チャから始まり、シーケンスの都合上P16-ピクチャまで
のピクチャ枚数Ｎ＝１０となる。その後のＧＯＰは通常
のシーケンスが続く。
ャの位置を後ろにずらすと直前のＧＯＰの長さ（ピクチ
ャ枚数Ｎ）が長くなり過ぎるので、別のルールとし、短
めの通常シーケンスを置きその後に改めてカットのある
シーケンスを置く。B0- ピクチャから始まる通常のシー
ケンスをP5- ピクチャまで続け、かつ、その後の「６
番」にＰピクチャ(P6)を続け、ここでピクチャ枚数Ｎ＝
７でＧＯＰのシーケンスを打ち切る。その直後のＧＯＰ
の「７番」のピクチャをカットのあるシーケンスのＩピ
クチャ(I7)とする。カットのあるこのＧＯＰはI7- ピク
チャから始まり、シーケンスの都合上P16-ピクチャまで
のピクチャ枚数Ｎ＝１０となる。その後のＧＯＰは通常
のシーケンスが続く。
【００４８】カットシーケンス８（Ｃ８） カットシーケンス７（Ｃ７）と同様に、単純にＩピクチ
ャの位置を後ろにずらすと直前のＧＯＰの長さ（ピクチ
ャ枚数Ｎ）が長くなり過ぎるので、別のルールとし、短
めの通常シーケンスを置きその後に改めてカットのある
シーケンスを置く。B0- ピクチャから始まる通常のシー
ケンスをP5- ピクチャまで続け、かつ、その後の「６
番」をＢピクチャ(B6)とし「７番」にＰピクチャ(P7)を
続け、ピクチャ枚数Ｎ＝８でこのＧＯＰのシーケンスを
打ち切る。その直後のＧＯＰの「８番」のピクチャをカ
ットのあるシーケンスのＩピクチャ(I8)とする。このＧ
ＯＰはI8- ピクチャから始まり、シーケンスの都合上、
P17-ピクチャまでのピクチャ枚数Ｎ＝１０となる。その
後のＧＯＰは通常のシーケンスが続く。
ャの位置を後ろにずらすと直前のＧＯＰの長さ（ピクチ
ャ枚数Ｎ）が長くなり過ぎるので、別のルールとし、短
めの通常シーケンスを置きその後に改めてカットのある
シーケンスを置く。B0- ピクチャから始まる通常のシー
ケンスをP5- ピクチャまで続け、かつ、その後の「６
番」をＢピクチャ(B6)とし「７番」にＰピクチャ(P7)を
続け、ピクチャ枚数Ｎ＝８でこのＧＯＰのシーケンスを
打ち切る。その直後のＧＯＰの「８番」のピクチャをカ
ットのあるシーケンスのＩピクチャ(I8)とする。このＧ
ＯＰはI8- ピクチャから始まり、シーケンスの都合上、
P17-ピクチャまでのピクチャ枚数Ｎ＝１０となる。その
後のＧＯＰは通常のシーケンスが続く。
【００４９】再び図１３を参照して述べる。カット判定
回路１６９においては、ＥＤＬ読み取り部１６７に入力
される情報と手動編集点修正装置１６８によって追加変
更された情報をもとに、どのタイムコードフレームでカ
ットを置けばよいかは判明しているので、カットの近傍
では、上で説明したカットシーケンスのどれを選べばよ
いかは簡単に求めることが出来る。カット判定回路１６
９は、通常のカットのない部分では、通常シーケンスＡ
Ａの順番にビデオエンコーダ１７６にエンコードシーケ
ンス指示情報１７１を単純に繰り返し与えておき、カッ
トの近傍では、カットシーケンス０（Ｃ０）からカット
シーケンス８（Ｃ８）のどれかのうち適合するパターン
をビデオエンコーダ１７６に与える。
回路１６９においては、ＥＤＬ読み取り部１６７に入力
される情報と手動編集点修正装置１６８によって追加変
更された情報をもとに、どのタイムコードフレームでカ
ットを置けばよいかは判明しているので、カットの近傍
では、上で説明したカットシーケンスのどれを選べばよ
いかは簡単に求めることが出来る。カット判定回路１６
９は、通常のカットのない部分では、通常シーケンスＡ
Ａの順番にビデオエンコーダ１７６にエンコードシーケ
ンス指示情報１７１を単純に繰り返し与えておき、カッ
トの近傍では、カットシーケンス０（Ｃ０）からカット
シーケンス８（Ｃ８）のどれかのうち適合するパターン
をビデオエンコーダ１７６に与える。
【００５０】画像遅延装置１７４の遅延量について説明
する。ビデオエンコーダ１７６を単純に構成するため、
ビデオエンコーダ１７６では、特別な指示をしない限
り、ＩピクチャまたはＰピクチャが指示されたら必ずＢ
ピクチャが２枚続き、また、Ｂピクチャが２枚続いたら
その次は必ずＩピクチャまたはＰピクチャを置くと言う
ルール（すなわち、ＩピクチャまたはＰピクチャの周期
Ｍが３ということ）でしかエンコードしないものとす
る。換言すれば、ビデオエンコーダ１７６はこの単純な
ルールを期待しているとも言える。ただし、ビデオエン
コーダ１７６はあらかじめシーケンスを指定すればその
とおりにエンコードできるものとする。
する。ビデオエンコーダ１７６を単純に構成するため、
ビデオエンコーダ１７６では、特別な指示をしない限
り、ＩピクチャまたはＰピクチャが指示されたら必ずＢ
ピクチャが２枚続き、また、Ｂピクチャが２枚続いたら
その次は必ずＩピクチャまたはＰピクチャを置くと言う
ルール（すなわち、ＩピクチャまたはＰピクチャの周期
Ｍが３ということ）でしかエンコードしないものとす
る。換言すれば、ビデオエンコーダ１７６はこの単純な
ルールを期待しているとも言える。ただし、ビデオエン
コーダ１７６はあらかじめシーケンスを指定すればその
とおりにエンコードできるものとする。
【００５１】この基本的な通常シーケンス以外のエンコ
ードをさせたいときには、あらかじめ、通常とは違うこ
とは分かっていればよいわけであるので、ビデオエンコ
ーダ１７６は遅延のないタイムコード１７０とエンコー
ド指示情報１７１を必要としている。遅延量１７８であ
るが、ここで、図１４を参照して、波線部分に注目して
みる。この波線は通常シーケンスの単純ルール、すなわ
ち、「ＩピクチャまたはＰピクチャが指示されたら必ず
Ｂピクチャが２枚続き、また、Ｂピクチャが２枚続いた
らその次は必ずＩピクチャまたはＰピクチャを置く」と
いうルールが適用されない部分を示してる。図１４から
明らかなように、カットを置くことによるこの不規則ル
ールの影響は、ＩピクチャまたはＰピクチャの周期Ｍが
３の場合は、最大でもピクチャは３フレーム分であるの
で、画像遅延装置１７４の遅延量１７８の設定値は３フ
レームとすればよい。遅延量１７８は同時にビデオエン
コーダ１７６にも入力されているので、結果的に、ビデ
オエンコーダ１７６は、遅延量１７８が既知の遅延ビデ
オ信号１７５と、遅延のないタイムコード１７０とエン
コード指示情報１７１から、通常とは異なるシーケンス
（周期Ｍ＝３ではないケース）でエンコードしなくては
ならないときには、具体的にどの画面から特別なエンコ
ードをすればよいのかをそのひとつ前のフレームで知る
ことが出来る。
ードをさせたいときには、あらかじめ、通常とは違うこ
とは分かっていればよいわけであるので、ビデオエンコ
ーダ１７６は遅延のないタイムコード１７０とエンコー
ド指示情報１７１を必要としている。遅延量１７８であ
るが、ここで、図１４を参照して、波線部分に注目して
みる。この波線は通常シーケンスの単純ルール、すなわ
ち、「ＩピクチャまたはＰピクチャが指示されたら必ず
Ｂピクチャが２枚続き、また、Ｂピクチャが２枚続いた
らその次は必ずＩピクチャまたはＰピクチャを置く」と
いうルールが適用されない部分を示してる。図１４から
明らかなように、カットを置くことによるこの不規則ル
ールの影響は、ＩピクチャまたはＰピクチャの周期Ｍが
３の場合は、最大でもピクチャは３フレーム分であるの
で、画像遅延装置１７４の遅延量１７８の設定値は３フ
レームとすればよい。遅延量１７８は同時にビデオエン
コーダ１７６にも入力されているので、結果的に、ビデ
オエンコーダ１７６は、遅延量１７８が既知の遅延ビデ
オ信号１７５と、遅延のないタイムコード１７０とエン
コード指示情報１７１から、通常とは異なるシーケンス
（周期Ｍ＝３ではないケース）でエンコードしなくては
ならないときには、具体的にどの画面から特別なエンコ
ードをすればよいのかをそのひとつ前のフレームで知る
ことが出来る。
【００５２】図１４を参照して述べた例は説明を容易す
るするため、通常シーケンスのピクチャ枚数Ｎ＝９，ピ
クチャ周期Ｍ＝３の場合について述べたが、ピクチャ枚
数Ｎと周期Ｍが変化されば、たとえば、ピクチャ枚数Ｎ
と周期Ｍが大きくなれば、図１４を参照して述べたカッ
トシーケンスの数も増大する。これに伴い図１４に波線
で示した遅延量の数も大きくなる。
るするため、通常シーケンスのピクチャ枚数Ｎ＝９，ピ
クチャ周期Ｍ＝３の場合について述べたが、ピクチャ枚
数Ｎと周期Ｍが変化されば、たとえば、ピクチャ枚数Ｎ
と周期Ｍが大きくなれば、図１４を参照して述べたカッ
トシーケンスの数も増大する。これに伴い図１４に波線
で示した遅延量の数も大きくなる。
【００５３】以上述べたように、図１２に示したよう
に、基本的には、ピクチャの編集に伴うピクチャの差し
替えがあっても、ＧＯＰヘッダに設けられる、「CLOSED
GOP」、(Broken Link」を用いず、ＥＤＬに基づくカッ
トの考えを適用して、カットがある部分のＧＯＰの最初
にＩピクチャをおいて、その前のＧＯＰとカットのある
ＧＯＰとを独立させることにより、ピクチャの編集によ
ってもＭＰＥＧの特質を維持して画質を低下させない符
号化結果が得られる。特に、通常シーケンスにおけるピ
クチャ枚数Ｎと周期Ｍに基づいた種類のカットシーケン
スを準備しておき、ピクチャ枚数Ｎが非常に長くなる場
合はカットのあるＧＯＰのピクチャ枚数を制限し、信号
処理の遅延量をカットシーケンスに応じて設定してお
き、カットのあるＧＯＰの最初にはＩピクチャが位置す
るようにピクチャを並べることにより、カットがあって
もＧＯＰの独立性を維持して、ＭＰＥＧの特質を生かし
た符号化処理を可能にする。
に、基本的には、ピクチャの編集に伴うピクチャの差し
替えがあっても、ＧＯＰヘッダに設けられる、「CLOSED
GOP」、(Broken Link」を用いず、ＥＤＬに基づくカッ
トの考えを適用して、カットがある部分のＧＯＰの最初
にＩピクチャをおいて、その前のＧＯＰとカットのある
ＧＯＰとを独立させることにより、ピクチャの編集によ
ってもＭＰＥＧの特質を維持して画質を低下させない符
号化結果が得られる。特に、通常シーケンスにおけるピ
クチャ枚数Ｎと周期Ｍに基づいた種類のカットシーケン
スを準備しておき、ピクチャ枚数Ｎが非常に長くなる場
合はカットのあるＧＯＰのピクチャ枚数を制限し、信号
処理の遅延量をカットシーケンスに応じて設定してお
き、カットのあるＧＯＰの最初にはＩピクチャが位置す
るようにピクチャを並べることにより、カットがあって
もＧＯＰの独立性を維持して、ＭＰＥＧの特質を生かし
た符号化処理を可能にする。
【００５４】実施例の効果 その結果、本発明の実施例によれば、ＭＰＥＧでエンコ
ードしてしまったビデオをエンコードの後で編集しても
画質に影響がでない。換言すれば、ＭＰＥＧで符号化し
た帯域圧縮・符号化したピクチャについても、画質を低
下させずに自由に編集作業ができる。この場合、通常の
ＭＰＥＧによる符号化と比べて、同様の画質を得るため
のビット発生量に違いがでない。上述したように、ＭＰ
ＥＧビデオの編集に必要な「Broken Linkフラグ」や「C
losed GOPフラグ」を用いないので、ＭＰＥＧでオプシ
ョン扱いとなっているＧＯＰヘッダを用いる必要がな
い。ＥＤＬによって決まっているあらかじめ決められた
場所で編集するという制限はあるものの、上で述べた利
点が存在することにより、例えば、プログラムの全部の
符号化処理が終了した時点で、ある「カットシーケン
ス」の画質に問題があったことに気がついた場合でも、
その「カットシーケンス」のみをビットレートなどを再
調整し再符号化処理し、ピクチャを差し替え編集をする
ことが許される。もし本発明を用いなかった場合は、た
ったその部分を差し替えたいだけなのに、もう一度プロ
グラムの頭から全部やり直すか、あるいは、画質の劣化
を承知で「Broken Link フラグ」や「Closed GOP」を用
いなければならない。しかし、そうしてしまうと、画質
を良くしたいと思って行なった編集により、その前後の
画質が劣化してしまうという矛盾した結果になる。
ードしてしまったビデオをエンコードの後で編集しても
画質に影響がでない。換言すれば、ＭＰＥＧで符号化し
た帯域圧縮・符号化したピクチャについても、画質を低
下させずに自由に編集作業ができる。この場合、通常の
ＭＰＥＧによる符号化と比べて、同様の画質を得るため
のビット発生量に違いがでない。上述したように、ＭＰ
ＥＧビデオの編集に必要な「Broken Linkフラグ」や「C
losed GOPフラグ」を用いないので、ＭＰＥＧでオプシ
ョン扱いとなっているＧＯＰヘッダを用いる必要がな
い。ＥＤＬによって決まっているあらかじめ決められた
場所で編集するという制限はあるものの、上で述べた利
点が存在することにより、例えば、プログラムの全部の
符号化処理が終了した時点で、ある「カットシーケン
ス」の画質に問題があったことに気がついた場合でも、
その「カットシーケンス」のみをビットレートなどを再
調整し再符号化処理し、ピクチャを差し替え編集をする
ことが許される。もし本発明を用いなかった場合は、た
ったその部分を差し替えたいだけなのに、もう一度プロ
グラムの頭から全部やり直すか、あるいは、画質の劣化
を承知で「Broken Link フラグ」や「Closed GOP」を用
いなければならない。しかし、そうしてしまうと、画質
を良くしたいと思って行なった編集により、その前後の
画質が劣化してしまうという矛盾した結果になる。
【００５５】前記カットとしては、上述した編集段階に
おいて作成された編集決定リスト（ＥＤＬ）に基づいて
行う他、定期的に行う、映像シーンの状況に応じて行
う、利用者が手動で自由に行うなど任意に設定できる。
おいて作成された編集決定リスト（ＥＤＬ）に基づいて
行う他、定期的に行う、映像シーンの状況に応じて行
う、利用者が手動で自由に行うなど任意に設定できる。
【００５６】他の実施例 以上の実施例は主としてＤＶＤの映像データを符号化す
る場合などにおけるピクチャの編集に関連づけて述べた
が、本発明はピクチャの編集に限定されず、ＶＯＤにお
ける画像データ伝送において画像データを部分的に変
更、修正するような場合についても、上記同様に適用で
きる。その効果は上述した編集における効果と同様であ
る。
る場合などにおけるピクチャの編集に関連づけて述べた
が、本発明はピクチャの編集に限定されず、ＶＯＤにお
ける画像データ伝送において画像データを部分的に変
更、修正するような場合についても、上記同様に適用で
きる。その効果は上述した編集における効果と同様であ
る。
【００５７】以上の実施例は動画像について高能率画像
圧縮符号化する場合としてＭＰＥＧをについて例示した
が、本発明はＭＰＥＧの適用に限定されない。たとえ
ば、図２および図７、図８に示したエンコーダにおいて
は、画像データの帯域圧縮としてＤＣＴを用いた例を示
したが、帯域圧縮としては直交変換を行えばよく、直交
変換としてはＤＣＴに限らず、Hadamar 変換など、その
他、符号化する画像データに応じて適切な直交変換を行
うことができる。もちろん、ＩＤＣＴについても同様で
ある。
圧縮符号化する場合としてＭＰＥＧをについて例示した
が、本発明はＭＰＥＧの適用に限定されない。たとえ
ば、図２および図７、図８に示したエンコーダにおいて
は、画像データの帯域圧縮としてＤＣＴを用いた例を示
したが、帯域圧縮としては直交変換を行えばよく、直交
変換としてはＤＣＴに限らず、Hadamar 変換など、その
他、符号化する画像データに応じて適切な直交変換を行
うことができる。もちろん、ＩＤＣＴについても同様で
ある。
【００５８】
【発明の効果】本発明によれば、ＧＯＰ内のピクチャの
差し替えなどがあっても、先行するＧＯＰのピクチャを
参照せずに、そして、画質を低下させずに符号化が行え
る。特に、本発明においては符号化された画像データの
編集、差し替えが画質を低下させずに行える。また本発
明によれば、これまでのＧＯＰにおけるＧＯＰの不完全
独立性が克服され、Closed GOP、Broken Link などを使
用せずに信号処理を行うことができる。したがって、本
発明によれば、ＧＯＰヘッダを使用しないでよく、ＧＯ
Ｐヘッダ部分にピクチャを置くことが可能になる。
差し替えなどがあっても、先行するＧＯＰのピクチャを
参照せずに、そして、画質を低下させずに符号化が行え
る。特に、本発明においては符号化された画像データの
編集、差し替えが画質を低下させずに行える。また本発
明によれば、これまでのＧＯＰにおけるＧＯＰの不完全
独立性が克服され、Closed GOP、Broken Link などを使
用せずに信号処理を行うことができる。したがって、本
発明によれば、ＧＯＰヘッダを使用しないでよく、ＧＯ
Ｐヘッダ部分にピクチャを置くことが可能になる。
【図１】図１はＭＰＥＧが適用されるシステム構成の１
例として画像伝送系統における画像符号化装置と画像復
号化装置とのシステム構成を示した図である。
例として画像伝送系統における画像符号化装置と画像復
号化装置とのシステム構成を示した図である。
【図２】図２は画像符号化装置２における符号化処理を
示す構成の１例を示す図である。
示す構成の１例を示す図である。
【図３】図３は画像復号化装置４における復号処理を示
す構成を示す１例としての構成図である。
す構成を示す１例としての構成図である。
【図４】図４はＭＰＥＧにおける符号化順序を示したグ
ラフである。
ラフである。
【図５】図５は図４に示したピクチャの意味とのその関
連を示したグラフである。
連を示したグラフである。
【図６】図６（Ａ）はＧＯＰの構成を示したＭＰＥＧの
ビットストリームの構成を示すグラフであり、図６
（Ｂ）はＧＯＰヘッダの内容を示す図であり、図６
（Ｃ）はピクチャヘッダの内容を示す図である。
ビットストリームの構成を示すグラフであり、図６
（Ｂ）はＧＯＰヘッダの内容を示す図であり、図６
（Ｃ）はピクチャヘッダの内容を示す図である。
【図７】図７はＤＶＤ用編集システムの構成図である。
【図８】図８は図７に示したオーサリングシステムの構
成図である。
成図である。
【図９】図９は一般的なＭＰＥＧの画像列の様子を示す
グラフである。
グラフである。
【図１０】図１０は、図７および図８に示した編集シス
テムにおいて、ＧＯＰ単位での画像編集を行なったとき
に起こる問題を説明するための図である。
テムにおいて、ＧＯＰ単位での画像編集を行なったとき
に起こる問題を説明するための図である。
【図１１】図１１はＭＰＥＧにおける「CLOSED GOP」を
説明するグラフである。
説明するグラフである。
【図１２】図１２は本発明の圧縮・符号化処理を示すグ
ラフである。
ラフである。
【図１３】図１３は本発明の第１実施例のビデオ信号処
理装置の構成図である。
理装置の構成図である。
【図１４】図１４は本発明の実施例のエンコードシーケ
ンスを図解したグラフである。
ンスを図解したグラフである。
１・・ビデオテープ記録再生装置（ＶＴＲ） ２・・画像符号化装置（エンコーダ） ２１・・信号減算器 ２２・・離散的コサイン変換（ＤＣＴ）回路 ２３・・量子化器（Ｑ） ２４・・逆量子化器（ＩＱ） ２５・・離散的逆コサイン変換回路（ＩＤＣＴ回路） ２６・・信号加算器 ２７・・フレームメモリ ２８・・動き補償回路 ２９・・動き推定回路 ３０・・可変長符号化回路（ＶＬＣ） ３１・・並替回路 ３２・・バッファメモリ ３・・蓄積メディア３（または伝送経路） ４・・画像復号化装置（デコーダ）４ ４１・・バッファメモリ ４２・・デマルチプレクサ ４３・・可変長復号化回路（ＶＬＤ） ４４・・逆量子化器（ＩＱ） ４５・・離散コサイン逆変換回路（ＩＤＣＴ回路） ４６・・信号加算器 ４７・・フレームメモリ ４８・・動き補償回路 ５・・ＴＶモニタ １６７・・ＥＤＬ読み取り部 １６８・・手動編集点修正装置 １６９・・カット判定回路 １７２・・ディジタルＶＴＲ １７４・・画像遅延装置 １７６・・ビデオエンコーダ
───────────────────────────────────────────────────── フロントページの続き (72)発明者 田中 謙太郎 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内
Claims (5)
- 【請求項１】Ｉピクチャ、Ｐピクチャ、ＢピクチャがＧ
ＯＰに収容されているピクチャシーケンスを符号化する
信号処理方法において、 連続するＧＯＰのうちあるＧＯＰのピクチャが差し替え
られたとき、先行するＧＯＰ内のピクチャの存在なしに
符号が可能なように、その差し替えられたＧＯＰのピク
チャのシーケンスの最初のピクチャを、差し替え位置に
応じて規定されるピクチャ番号のＩピクチャに置き換え
て符号化することを特徴とする画像データ処理方法。 - 【請求項２】ＭＰＥＧを用いて、Ｉピクチャ、Ｐピクチ
ャ、ＢピクチャがＧＯＰに収容されている連続するＧＯ
Ｐごとにそのピクチャシーケンスを符号化する信号処理
方法において、 ＧＯＰのピクチャの変更を行うため所定位置においてカ
ットを行うようにし、 ＧＯＰ内のカット位置でピクチャが差し替えられたと
き、全てのカット位置に対して、通常のシーケンスのＧ
ＯＰ内のピクチャ枚数とピクチャの周期で規定される、
カットされたＧＯＰのピクチャ枚数Ｎと最初のＩピクチ
ャの番号、カットシーケンスの前のＧＯＰのピクチャを
規定した全てのカットシーケンスを準備しておき、 ある位置でカットが行われたとき該当するカットシーケ
ンスを読み出して、カットの対象となるＧＯＰの最初の
Ｉピクチャとピクチャ枚数、カットの対象となる前のＧ
ＯＰのピクチャ枚数とカットの対象となる新しいＩピク
チャに先行するピクチャを設定し、 前記設定されたピクチャとピクチャ枚数に応じてピクチ
ャを並べ替えてＧＯＰを構成し、 前記構成されたピクチャシーケンスを符号化することを
特徴とする画像データ処理方法。 - 【請求項３】カット位置に応じた画像データの遅延量を
予め設定しておき、 前記構成されたピクチャシーケンスに対してカット位置
に応じた遅延量に応じた遅延をして符号化する請求項１
記載の画像データ処理方法。 - 【請求項４】上記カットされたＧＯＰのピクチャは、Ｉ
ピクチャまたはＰピクチャが指示されたら必ずＢピクチ
ャが２枚続き、またＢピクチャが２枚続いたらその次は
必ずＩピクチャまたはＰピクチャを置くように設定する
請求項１または２記載の画像データ処理方法。 - 【請求項５】Ｉピクチャ、Ｐピクチャ、ＢピクチャがＧ
ＯＰに収容されている連続するＧＯＰごとにその画像デ
ータを提供する手段と、 ＧＯＰ内のカット位置でピクチャが差し替えられたと
き、全てのカット位置に対して、通常のシーケンスのＧ
ＯＰ内のピクチャ枚数とピクチャの周期で規定される、
カットされたＧＯＰのピクチャ枚数Ｎと最初のＩピクチ
ャの番号、カットシーケンスの前のＧＯＰのピクチャ、
遅延量を規定した全てのカットシーケンスを準備するカ
ットシーケンス準備手段と、 前記画像データ提供手段から提供された画像データにつ
いて、ある位置でカットが行われたとき、前記カットシ
ーケンス準備手段から該当するカットシーケンスを読み
出して、カットの対象となるＧＯＰの最初のＩピクチャ
とピクチャ枚数、カットの対象となる前のＧＯＰのピク
チャ枚数とカットの対象となる新しいＩピクチャに先行
するピクチャを設定して設定されたピクチャとピクチャ
枚数Ｎに応じてピクチャを並べ替え新たなＧＯＰを構成
するカット処理手段と、 前記遅延量に応じて前記画像データ提供手段から出力さ
れた画像データを遅延する手段と、 前記並べ替えられたＧＯＰのピクチャシーケンスと前記
遅延された画像データとをＭＰＥＧに基づいて符号化す
る符号化手段とを有することを特徴とする画像データ処
理装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP04298096A JP3493872B2 (ja) | 1996-02-29 | 1996-02-29 | 画像データ処理方法およびその装置 |
| US08/806,211 US5822024A (en) | 1996-02-29 | 1997-02-26 | Image data processing method and apparatus of same |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP04298096A JP3493872B2 (ja) | 1996-02-29 | 1996-02-29 | 画像データ処理方法およびその装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH09238347A true JPH09238347A (ja) | 1997-09-09 |
| JP3493872B2 JP3493872B2 (ja) | 2004-02-03 |
Family
ID=12651192
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP04298096A Expired - Fee Related JP3493872B2 (ja) | 1996-02-29 | 1996-02-29 | 画像データ処理方法およびその装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US5822024A (ja) |
| JP (1) | JP3493872B2 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006526960A (ja) * | 2003-06-03 | 2006-11-24 | ジェネラル・インスツルメント・コーポレーション | グループオブピクチャへのランダム・アクセスを提供するためのグループオブピクチャの再構造化方法 |
| JP2008124932A (ja) * | 2006-11-14 | 2008-05-29 | Sakura Eiki Kk | ノンリニア編集装置およびそのプログラム、ならびに、ノンリニア編集装置におけるデータ差し替え方法 |
| JP2020108032A (ja) * | 2018-12-27 | 2020-07-09 | 日本放送協会 | 映像符号化ストリーム編集装置及びプログラム |
Families Citing this family (39)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE69323663T2 (de) * | 1992-07-24 | 1999-09-09 | Sony Corp | Aufzeichnungsmediumkassette |
| US6922520B1 (en) * | 1992-07-24 | 2005-07-26 | Sony Corporation | Recording medium cartridge with memory circuit employing a hierarchical data structure |
| JP3771962B2 (ja) * | 1996-03-07 | 2006-05-10 | ソニー株式会社 | 映像データ記録・再生装置および方法 |
| US6400886B1 (en) * | 1996-11-15 | 2002-06-04 | Futuretel, Inc. | Method and apparatus for stitching edited video segments |
| US6115070A (en) * | 1997-06-12 | 2000-09-05 | International Business Machines Corporation | System and method for DCT domain inverse motion compensation using shared information |
| WO1999005864A1 (fr) * | 1997-07-25 | 1999-02-04 | Sony Corporation | Dispositif d'edition, procede d'edition, dispositif d'epissage, procede d'epissage, dispositif de codage et procede de codage |
| US7295752B1 (en) * | 1997-08-14 | 2007-11-13 | Virage, Inc. | Video cataloger system with audio track extraction |
| US6567980B1 (en) | 1997-08-14 | 2003-05-20 | Virage, Inc. | Video cataloger system with hyperlinked output |
| US6360234B2 (en) | 1997-08-14 | 2002-03-19 | Virage, Inc. | Video cataloger system with synchronized encoders |
| US6463444B1 (en) | 1997-08-14 | 2002-10-08 | Virage, Inc. | Video cataloger system with extensibility |
| US6151074A (en) * | 1997-09-30 | 2000-11-21 | Texas Instruments Incorporated | Integrated MPEG decoder and image resizer for SLM-based digital display system |
| JP4121590B2 (ja) * | 1997-10-30 | 2008-07-23 | 株式会社ルネサステクノロジ | 画像表示装置及びその特殊再生制御装置 |
| US6229576B1 (en) * | 1998-04-03 | 2001-05-08 | Avid Technology, Inc. | Editing system with router for connection to HDTV circuitry |
| US6226038B1 (en) | 1998-04-03 | 2001-05-01 | Avid Technology, Inc. | HDTV editing and effects previsualization using SDTV devices |
| JP2002516529A (ja) * | 1998-05-20 | 2002-06-04 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | ピクチャシーケンスとして構成された情報ストリームの符号化 |
| JPH11341435A (ja) * | 1998-05-22 | 1999-12-10 | Sony Corp | 編集方法および編集装置 |
| JP2002520973A (ja) * | 1998-07-14 | 2002-07-09 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | ディジタルビデオ情報信号の編集 |
| US6833865B1 (en) * | 1998-09-01 | 2004-12-21 | Virage, Inc. | Embedded metadata engines in digital capture devices |
| KR100418874B1 (ko) * | 1998-10-10 | 2004-04-17 | 엘지전자 주식회사 | 영상압축시스템에서영상데이터버퍼링방법 |
| JP3570249B2 (ja) * | 1998-10-21 | 2004-09-29 | 日本ビクター株式会社 | 記録再生装置及び記録再生方法 |
| US7962948B1 (en) | 2000-04-07 | 2011-06-14 | Virage, Inc. | Video-enabled community building |
| US7222163B1 (en) | 2000-04-07 | 2007-05-22 | Virage, Inc. | System and method for hosting of video content over a network |
| US7260564B1 (en) | 2000-04-07 | 2007-08-21 | Virage, Inc. | Network video guide and spidering |
| US8171509B1 (en) | 2000-04-07 | 2012-05-01 | Virage, Inc. | System and method for applying a database to video multimedia |
| JP3662171B2 (ja) * | 2000-06-05 | 2005-06-22 | 三菱電機株式会社 | 符号化装置及び符号化方法 |
| JP3932546B2 (ja) * | 2001-01-24 | 2007-06-20 | 日本電気株式会社 | Ｍｐｅｇビデオ編集装置及びｍｐｅｇビデオ編集方法 |
| EP1276332A1 (fr) * | 2001-06-26 | 2003-01-15 | Koninklijke Philips Electronics N.V. | Multiplexage multicouches pour générer un flux de transport MPEG-2 à partir de flux élémentaires MPEG-2 et MPEG-4 |
| US7266287B2 (en) * | 2001-12-14 | 2007-09-04 | Hewlett-Packard Development Company, L.P. | Using background audio change detection for segmenting video |
| US7386217B2 (en) * | 2001-12-14 | 2008-06-10 | Hewlett-Packard Development Company, L.P. | Indexing video by detecting speech and music in audio |
| MXPA05008404A (es) * | 2003-02-18 | 2005-10-05 | Nokia Corp | Metodo de codificacion de imagen. |
| CN101668215A (zh) * | 2003-02-18 | 2010-03-10 | 诺基亚有限公司 | 图像解码方法 |
| US20050201471A1 (en) * | 2004-02-13 | 2005-09-15 | Nokia Corporation | Picture decoding method |
| US7296205B2 (en) * | 2004-02-18 | 2007-11-13 | Nokia Corporation | Data repair |
| US9124907B2 (en) * | 2004-10-04 | 2015-09-01 | Nokia Technologies Oy | Picture buffering method |
| EP1755341A1 (en) * | 2005-08-19 | 2007-02-21 | Texas Instruments Incorporated | Method of quantization of transform coefficients |
| JP5597968B2 (ja) * | 2009-07-01 | 2014-10-01 | ソニー株式会社 | 画像処理装置および方法、プログラム、並びに記録媒体 |
| US11166057B2 (en) * | 2016-11-10 | 2021-11-02 | University Of Louisiana At Lafayette | System for high performance on-demand video transcoding |
| US10298969B2 (en) * | 2016-11-10 | 2019-05-21 | University Of Louisiana At Lafayette | Architecture and method for high performance on demand video transcoding |
| US10845956B2 (en) | 2017-05-31 | 2020-11-24 | Snap Inc. | Methods and systems for voice driven dynamic menus |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0715469B1 (en) * | 1989-10-14 | 2001-09-12 | Sony Corporation | Video signal coding/decoding method and apparatus |
| US5231484A (en) * | 1991-11-08 | 1993-07-27 | International Business Machines Corporation | Motion video compression system with adaptive bit allocation and quantization |
| JPH08163554A (ja) * | 1994-12-02 | 1996-06-21 | Electron & Telecommun Res Inst | ビデオビット率制御方法 |
| US5508750A (en) * | 1995-02-03 | 1996-04-16 | Texas Instruments Incorporated | Encoding data converted from film format for progressive display |
-
1996
- 1996-02-29 JP JP04298096A patent/JP3493872B2/ja not_active Expired - Fee Related
-
1997
- 1997-02-26 US US08/806,211 patent/US5822024A/en not_active Expired - Lifetime
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006526960A (ja) * | 2003-06-03 | 2006-11-24 | ジェネラル・インスツルメント・コーポレーション | グループオブピクチャへのランダム・アクセスを提供するためのグループオブピクチャの再構造化方法 |
| JP4723486B2 (ja) * | 2003-06-03 | 2011-07-13 | ジェネラル・インスツルメント・コーポレーション | グループオブピクチャへのランダム・アクセスを提供するためのグループオブピクチャの再構造化方法 |
| JP2008124932A (ja) * | 2006-11-14 | 2008-05-29 | Sakura Eiki Kk | ノンリニア編集装置およびそのプログラム、ならびに、ノンリニア編集装置におけるデータ差し替え方法 |
| JP2020108032A (ja) * | 2018-12-27 | 2020-07-09 | 日本放送協会 | 映像符号化ストリーム編集装置及びプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| US5822024A (en) | 1998-10-13 |
| JP3493872B2 (ja) | 2004-02-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3493872B2 (ja) | 画像データ処理方法およびその装置 | |
| JP3019912B2 (ja) | 画像データ編集装置 | |
| US8798143B2 (en) | System method and apparatus for seamlessly splicing data | |
| JP5041626B2 (ja) | 復号装置、復号方法、およびプログラム | |
| KR100291404B1 (ko) | 디지탈 기록 재생 장치 | |
| EP1323314B1 (en) | Transcoding progressive i-slice refreshed mpeg data streams to enable trick play | |
| JP4769717B2 (ja) | 画像復号化方法 | |
| JPH10145798A (ja) | デジタル符号化信号処理方式 | |
| JP2000278692A (ja) | 圧縮データ処理方法及び処理装置並びに記録再生システム | |
| JP4005691B2 (ja) | 動画像符号化方法および動画像符号化装置 | |
| US20060285819A1 (en) | Creating edit effects on mpeg-2 compressed video | |
| JP3147792B2 (ja) | 高速再生のためのビデオデータの復号化方法及びその装置 | |
| JP3182329B2 (ja) | 符号化データ編集装置とデータ復号装置 | |
| JPH09116866A (ja) | 符号化方法、符号化復号化方法及び記録再生装置 | |
| JP4301237B2 (ja) | 符号化装置及びその方法、記録装置及びその方法、および、記録媒体 | |
| JP4416845B2 (ja) | 符号化装置及びその方法、および、記録装置及びその方法 | |
| WO1994017634A1 (fr) | Procede de codage de signal d'image, codeur de signal d'image, procede de decodage de signal d'image, decodeur de signal d'image et support d'enregristrement de signal d'image | |
| JPH08149408A (ja) | ディジタル動画編集方法及び装置 | |
| JPH0888854A (ja) | 動画像符号化方式 | |
| JP3448961B2 (ja) | 映像信号処理装置 | |
| JPH0898142A (ja) | 画像再生装置 | |
| JPH09298711A (ja) | 画像情報記録再生装置の編集用圧縮画像データの発生装置 | |
| JP2002218470A (ja) | 画像符号化データのレート変換方法、及び画像符号化レート変換装置 | |
| JPH05128810A (ja) | 動画出力システム | |
| JP3624435B2 (ja) | 情報再生装置及び方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071121 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081121 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091121 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091121 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101121 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111121 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111121 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121121 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121121 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131121 Year of fee payment: 10 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |