JP2007336574A - Ｍｐｅｇデータ記録再生装置 - Google Patents

Abstract

【課題】 第１のＭＰＥＧ画像データから第２のＭＰＥＧ画像データへ繋げて再生させる
際に、ＶＢＶバッファの接続にオーバーフローやアンダーフローの矛盾が生じることなく
、シームレスで高品位な再生を実現させることができる記録再生装置を提供すること。
【解決手段】 第１のＭＰＥＧ画像データの繋ぎ区間Ａのデータと第２のＭＰＥＧ画像デ
ータの繋ぎ区間Ｂのデータとを復号してから再符号化する。この再符号化は、ＶＢＶバッ
ファ占有値の推移が、ｍの位置でのＶＢＶバッファ占有値から開始されて、ｑの位置での
ＶＢＶバッファ占有値までで終了するように制御されて実行される。そして、第１のＭＰ
ＥＧ画像データのｍの位置までは第１のＭＰＥＧ画像データの再生を行い、次に繋ぎ区間
Ａ＋Ｂの再符号化ＭＰＥＧ画像データを再生し、その後、第２のＭＰＥＧ画像データのｑ
の位置へ接続してｑ以降の第２のＭＰＥＧ画像データを再生する。
【選択図】 図９

Description

本発明は、MPEG符号化方式で符号化された画像データである第１及び第２の２つのMPEG
画像データを、それぞれのMPEG画像データにおける指定された繋ぎ指定位置で、前記第１
のMPEG画像データから前記第２のMPEG画像データへ繋げて再生させる際に、シームレスな
再生を実現させるためのMPEGデータ記録再生装置に関するものである。

本特許において使用する従来技術であるMPEGについて簡単に説明する。
MPEGについてはISO-IEC11172-2、ITU-T H.262 / ISO-IEC13818-2に詳細な説明がなされ
ているので、ここでは概略のみ説明する。MPEGは1988年、ISO/IEC JTC1/SC2（国際標準化
機構/国際電気標準化会合同技術委員会1/専門部会2、現在のSC29）に設立された動画像符
号化標準を検討する組織の名称（Moving Pictures Expert Group）の略称である。MPEG1
（MPEGフェーズ1）は1.5Mbps程度の蓄積メディアを対象とした標準で、静止画符号化を目
的としたJPEGと、ISDNのテレビ会議やテレビ電話の低転送レート用の動画像圧縮を目的と
したH.261（CCITT SGXV、現在のITU-T SG15で標準化）の基本的な技術を受け継ぎ、蓄積
メディア用に新しい技術を導入したものである。これらは1993年8月、ISO/IEC 11172 と
して成立している。

MPEG1は幾つかの技術を組み合わせて作成されている。図５にMPEG符号化方式による符
号化を行う従来のMPEG符号化器を示し、以下に簡単に説明する。入力画像は動き補償予測
器１で復号化した画像と、入力画像の差分とを差分器２で取ることで時間冗長部分を削減
する。

予測の方向は、過去、未来、両方からの３モード存在する。またこれらは16画素×16画
素のMB(Macroblock)ごとに切り替えて使用できる。予測方向は入力画像に与えられたPict
ure Typeによって決定される。過去からの予測により符号化するモードと、予測をしない
でそのMBを独立で符号化するモードとの２モード存在するのが片方向画像間予測符号化画
像（P-picture）である。また未来からの予測により符号化するモード、過去からの予測
により符号化するモード、両方からの予測により符号化するモード、独立で符号化するモ
ードの４モード存在するのが双方向画像間予測符号化画像（B-picture）である。そして
全てのMBが独立で符号化するのが画像内独立符号化画像（I-picture）である。

動き補償は、動き領域をMBごとにパターンマッチングを行ってハーフペル精度で動きベ
クトルを検出し、動き分だけシフトしてから予測する。動きベクトルは水平方向と垂直方
向が存在し、何処からの予測かを示すMC(Motion Compensation)モードとともにMBの付加
情報として伝送される。

一般的には、Iピクチャから次のIピクチャの前のピクチャまでをGOP(Group Of Picture
)といい、蓄積メディアなどで使用される場合には、一般に約１５ピクチャ程度が一つのG
OP区間として使用される。（但し、１GOP区間内に２つ以上のＩピクチャを含んでもよい
。要するに１GOP区間内に１つ以上のＩピクチャを含めばよい。）
差分画像はDCT器３において直交変換が行われる。DCT（Discrete Cosine Transform)と
は、余弦関数を積分核とした積分変換を有限空間への離散変換する直交変換である。MPEG
ではMBを４分割し8×8のDCTブロックに対して、２次元DCTを行う。一般にビデオ信号は低
域成分が多く高域成分が少ないため、DCTを行うと係数が低域に集中する。

DCTされた画像データ（DCT係数）は量子化器４で量子化が行われる。量子化は量子化マ
トリックスという8×8の２次元周波数を視覚特性で重み付けした値と、その全体をスカラ
ー倍する量子化スケールという値で乗算した値を量子化値として、DCT係数をその量子化
値で叙算する。MPEG復号化器（デコーダー）で逆量子化するときは量子化値で乗算するこ
とにより、元のDCT係数に近似している値を得ることになる。

量子化されたデータはVLC器５で可変長符号化される。量子化された値のうち直流（Ｄ
Ｃ）成分は予測符号化のひとつであるＤＰＣＭ（differential pulse code modulation )
を使用する。また交流（ＡＣ）成分は 低域から高域にzigzag scanを行い、ゼロのラン長
および有効係数値を１つの事象とし、出現確率の高いものから符号長の短い符号を割り当
てていくハフマン符号化が行われる。

可変長符号化されたデータは一時バッファ６に蓄えられ、所定の転送レートで符号化デ
ータとして出力される。また、その出力されるデータのマクロブロック毎の発生符号量は
、符号量制御器２１に送信され、目標符号量に対する発生符号量との誤差符号量を量子化
器４にフィードバックして量子化スケールを調整することで符号量制御される。

量子化された画像データは逆量子化器７にて逆量子化、逆DCT器８にて逆DCTされ、加算
器９を介して一時、画像メモリー１０に蓄えられたのち、動き補償予測器１において、差
分画像を計算するためのリファレンスの復号化画像として使用される。

このようにしてMPEG符号化された符号化データを復号化するMPEG復号化器（デコーダー
）を図６に示す。
入来する符号化データ（ストリーム）はバッファ１１でバッファリングされ、バッファ
１１からのデータはVLD器１２に入力される。VLD器１２では可変長復号化を行い、直流（
ＤＣ）成分および交流（ＡＣ）成分を得る。交流（ＡＣ）成分データは低域から高域にzi
gzag scanの順で８ｘ８のマトリックスに配置される。このデータは逆量子化器１３に入
力され、量子化マトリックスにて逆量子化される。逆量子化されたデータは逆DCT器１４
に入力されて逆DCTされ、画像データ（復号化データ）として出力される。また、復号化
データは一時、画像メモリー１６に蓄えられたのち、動き補償予測器１７において、差分
画像を計算するためのリファレンスの復号化画像として使用される。

また、符号化ビットストリームはビデオの場合１ピクチャーごとに可変長の符号量をも
っている。これはMPEGがDCT、量子化、ハフマン符号化という情報変換を用いている理由
と同時に、画質向上のためにピクチャーごとに配分する符号量は適応的に変更する必要性
があり、動き補償予測を行っているので、あるときは入力画像そのままを符号化し、ある
ときは予測画像の差分である差分画像を符号化するなど符号化画像自体のエントロピーも
大きく変化するためである。

この場合、多くはその画像のエントロピー比率に配分しつつ、バッファの制限を守りな
がら符号量制御される。バッファ管理器は発生した符号量と符号化レートの関係を監視し
、所定のバッファ内に収まるように目標符号量を設定する。この値は可変長符号化器にフ
ィードバックされ、符号量制御器に入り、そこで量子化器にセットする量子化値を大きく
して発生符号量を抑えたり、量子化値を小さくして発生符号量を小さくしたりする。

このような可変長データを固定の転送レート（符号化レート）で符号化する場合、復号
器の最大バッファ量を上限値とすると、一定速度でデータが入力されて、所定の値だけ溜
まったとことから、所定の時刻（NTSCのビデオ信号なら1/29.97 sec単位）で復号化を一
瞬で行うモデルを使用し、そのバッファがオーバーフローもアンダーフローも発生しない
ように符号化することがMPEGで規定されている。この規定（ＶＢＶバッファ規定）を守っ
ていればVBVバッファ内でのレートは局部的に変化しているものの、観測時間を長く取れ
ば固定の転送レートとなり、MPEGではこのことを固定レートであると定義している。

固定転送レートの場合、発生符号量の少ない場合にはバッファ占有量は、上限値に張り
付いた状態になる。この場合、無効ビットを追加してオーバーフローしないように符号量
を増やさなければならない。

可変転送レートの場合にはこの固定転送レートの定義を拡張して、バッファー占有率が
上限値になった場合、復号器の読み出しを中止することにより、原理的にオーバーフロー
が起きないように定義されている。こうしたバッファ推移を図７に示す。仮に非常に発生
符号量が少なくても、復号器の読み出しが中止されるので、固定転送レートの時のように
無効ビットをいれる必要はない。従って、アンダーフローだけが発生しないように符号化
する。

MPEGシステムはMPEGビデオ及びオーディオなどで符号化されビットストリームを、１個
のビットストリームに多重化し、同期を確保しながら再生する方式を規定したものである
。システムで規定されている内容は大きく分けて次の５点である。
１）複数の符号化されたビットストリームの同期再生
２）複数の符号化されたビットストリームの単一ビットストリームへの多重化
３）再生開始時のバッファの初期化
４）連続的なバッファの管理
５）復号や再生などの時刻の確定
MPEGシステムで多重化を行うには情報をパケット化する必要がある。パケットによる多
重化とは、例えばビデオ、オーディオを多重化する場合、各々をパケットと呼ばれる適当
な長さのストリームに分割し、ヘッダなどの付加情報を付けて、適宜、ビデオ、オーディ
オのパケットを切り替えて時分割伝送する方式である。ヘッダにはビデオ、オーディオな
どを識別する情報や、同期の為の時間情報が存在する。パケット長は伝送媒体やアプリケ
ーションに依存し、ATMのように５３バイトから、光ディスクのように４Kバイトと長いも
のまで存在している。MPEGでは、パケット長は可変で任意に指定できるようになっている
。

データはパック、パケット化され、１パックは数パケットで構成されている。各Pパッ
クの先頭部分にはpack start codeやSCR(System Clock Referance) 、パケットの先頭部
分にはstream idやタイムスタンプが記述されている。タイムスタンプにはオーディオ、
ビデオなどの同期をとる時間情報が記述されており、DTS(Decoding Time Stamp)、PTS(Pr
esentation Time Stamp) の２種類が存在する。PCR(Program Clock Reference)は２７MH
ｚの時間精度で記述されており、decoderの基準時計をロックする情報である。DTSはその
パケットデータ内の最初のアクセスユニット（ビデオなら１ピクチャ、オーディオなら例
えば１１５２サンプル）のデコード開始時刻を、PTSは表示（再生）開始時刻を示してい
る。図１１に示すように、オーディオ、ビデオ、その他のデコーダーは、PCRでロックし
た共通の基準時計を常に監視し、DTSやPTSの時間と一致したときに、デコードや表示を行
うしくみになっている。多重化されたデータが各デコーダでバッファリングされ、同期し
た表示を行うための仮想的なデコーダをSTD(System Target Decoder)とよび、このSTDが
オーバーフローやアンダーフローを起こさないようにな多重化されていなければならない
。

また、MPEGシステムには、大きく分けてTS ( Transport Stream)とPS ( Program Strea
m )が存在する。これらはPES(Packetized Elementary Stream)、およびその他の必要な情
報を含むパケットから構成されている。PESは両ストリーム間の変換を可能とするための
中間ストリームとして規定されていて、MPEGで符号化されたビデオ、オーディオデータの
他、プライベートストリームなどをパケット化したものである。

PSは共通の基準時間を有するプログラムのビデオ、オーディオの多重化をすることが可
能である。パケットレイヤはPESとよばれ、この構造は図１２に示すように、後述するTS
と共用して用いられ、これらの相互互換性を可能とする。PSのSTDモデルでは、ストリー
ムはPES パケット内の stream id によってスイッチされる。

TSもPSと同じように共通の基準時間を有するプログラムのビデオ、オーディオの多重化
をすることが可能であるが、TSはさらに異なる基準時間を有する通信や放送などのマルチ
プログラムの多重化を可能としている。 TSはATMセル長や誤り訂正符号化する場合を考慮
し、１８８バイトの固定長パケットで構成されており、エラーが存在する系でも使用でき
るように考慮されている。TS パケット自体の構造はそれほど複雑ではないがマルチプロ
グラムのストリームであるため、その運用は複雑である。PSと比べて特徴的なのはTS パ
ケットが上位構造であるにも関わらず、PES パケット より（通常は）短く、PES パケッ
ト を分割してTS パケット に乗せて伝送する点である。TSのSTDモデルでは、ストリーム
はTS パケット内のPID（パケット ID）によってスイッチされる。

MPEGシステムのTSにはその多重化されている番組の情報に関するパケットがどのPIDで
あるのかを指示する仕組みがある。それを図１３で説明する。まずTSパケット群の中から
PID=0のものを探す。それはPAT （Program Association Table）と呼ばれる情報パケット
で、そのパケットの中にはPROGRAMナンバーPRに対応する情報PIDがリンクされた形で記述
されている。次に目的のPRに対応するPIDのパケットを読みに行くとPMT（Program Map Ta
ble）と呼ばれる情報パケットがあり、そのパケットの中にはそのPRに対応する番組のビ
デオパケットのPIDと、オーディオパケットのPIDの情報が記述されている。

PATとPMTのことをPSI（Program Specific Information）と呼び、目的の番組のチャ
ンネルにアクセス（エントリー）することが可能な情報体系になっている。
また、従来、特開平１１−７４７９９の発明によれば、記録媒体に記録されたMPEGデー
タなどの圧縮データを編集する場合、MPEGデータの連続性を保つため、その編集点ではVB
Vバッファをつねに固定になるよう発生符号量を制御したり、GOPをクローズドGOPとして
符号化するなど、連続性を考慮した符号化をおこなう方法が記載されている。

また、特開平１１−１８７３５４の発明のよれば、符号化データにはなんの制約も施さ
ずに、そのデータの部分区間のうち、編集素材として抜粋されたデータを指示する情報と
その再生順番に関する情報を記述し、記録されたデータは変更せずに、単一記録媒体に映
像編集を実現できる方法が記載されている。

しかしながら上記の従来の方式では、MPEG画像データは単純につなぐとVBVバッファの
接続に矛盾が生じ、オーバーフローやアンダーフローがおきてしまった。
特開平１１−７４７９９の発明においては、どこで編集されても良いように、各GOPに
対してVBVバッファが常に固定になるよう発生符号量を制御したり、GOPをクローズドGOP
として符号化するなど、連続性を考慮した符号化制約を施すことになり、符号化効率の面
では不利な要因になっていた。

また、特開平１１−１８７３５４の発明においては、あたかも編集したように再生表示
はされるが、その編集点での連続性は不完全で、MPEGデータのデコーダーバッファの初期
化などの一時的な静止現象がおこる可能性があった。

本発明は、第１及び第２の２つのMPEG画像データを（または、第１のMPEG画像データを
要素符号化データとして含むパケット多重化された第１のMPEG多重化データと、第２のMP
EG画像データを要素符号化データとして含むパケット多重化された第２のMPEG多重化デー
タとを）、それぞれの指定された繋ぎ指定位置で、前記第１のMPEG画像データから前記第
２のMPEG画像データへ繋げて再生させる際に（前記第１のMPEG多重化データから前記第２
のMPEG多重化データへ繋げて再生させる際に）、VBVバッファの接続にオーバーフローや
アンダーフローの矛盾が生じることなく、シームレスで高品位な再生を実現させることが
できるMPEGデータ記録再生装置を提供することを目的としている。

そこで、上記課題を解決するために本発明は、以下の記録再生装置を提供するものである。
（１） MPEG符号化方式で符号化されて第１の記録媒体に記録された画像データである第１及び第２の２つのMPEG画像データを、それぞれのMPEG画像データにおける指定された繋ぎ指定位置で、前記第１のMPEG画像データから前記第２のMPEG画像データへ繋げて再生させるためのデータとして、前記MPEG符号化方式で符号化された合わせ繋ぎ区間再符号化データを生成して記録させる記録手段と、
前記MPEG符号化方式で符号化された画像データである２つのMPEG画像データを、それぞれのMPEG画像データにおける指定された繋ぎ指定位置で、一方のMPEG画像データから他方のMPEG画像データへ繋げて再生を行う繋ぎ再生手段と、
を設けたMPEGデータ記録再生装置であって、
前記記録手段は、前記第１のMPEG画像データにおける前記繋ぎ指定位置から第１の所定時間分前の位置を開始位置とし、前記第１のMPEG画像データにおける前記繋ぎ指定位置を終了位置とする区間を第１の繋ぎ区間とすると共に、前記第２のMPEG画像データにおける前記繋ぎ指定位置を開始位置とし、前記第２のMPEG画像データにおける前記繋ぎ指定位置から第２の所定時間分後の位置を終了位置とする区間を第２の繋ぎ区間とし、前記第１の繋ぎ区間と前記第２の繋ぎ区間とを合わせた区間を合わせ繋ぎ区間として、
前記第１の繋ぎ区間の前記第１のMPEG画像データを復号して得た画像データである第１の繋ぎ区間復号画像データと、前記第２の繋ぎ区間の前記第２のMPEG画像データを復号して得た画像データである第２の繋ぎ区間復号画像データとよりなる合わせ繋ぎ区間復号画像データを、前記MPEG符号化方式で再符号化して前記合わせ繋ぎ区間再符号化データを生成する再符号化手段を備え、前記合わせ繋ぎ区間再符号化データを前記第１の記録媒体の前記第１及び第２の２つのMPEG画像データの記録されている各領域と異なる領域に記録させるものであり、
前記再符号化手段は、前記再符号化時において、VBVバッファ占有値に関する情報値の推移が、前記第１の繋ぎ区間の開始位置に対応する位置における前記第１のMPEG画像データの符号化時のVBVバッファ占有値に関する情報値から開始されて、前記第２の繋ぎ区間の終了位置に対応する位置における前記第２のMPEG画像データの符号化時のVBVバッファ占有値に関する情報値までで終了するように符号量制御を行い再符号化を行うものであり、
前記繋ぎ再生手段は、前記第１の記録媒体から繋ぎ再生を行うと共に、他の装置により前記第１の記録媒体と同様に繋ぎ再生のための繋ぎ区間再符号化データの記録された第２の記録媒体から繋ぎ再生を行うものであり、
前記第１の記録媒体に記録されている各データから繋ぎ再生を行う場合には、
前記第１のMPEG画像データにおける前記第１の繋ぎ区間の開始位置まで前記第１のMPEG画像データを再生した後、前記合わせ繋ぎ区間再符号化データを前記第１の繋ぎ区間の開始位置から前記第２の繋ぎ区間の終了位置まで再生し、その後、前記第２のMPEG画像データにおける前記第２の繋ぎ区間の終了位置から前記第２のMPEG画像データを再生するものであり、
前記第２の記録媒体に記録されている各データから繋ぎ再生を行う場合には、
前記MPEG符号化方式で符号化されて前記第２の記録媒体に記録されている第３及び第４の２つのMPEG画像データを前記第２の記録媒体から得ると共に、前記繋ぎ指定位置で前記第３のMPEG画像データから前記第４のMPEG画像データへ繋げて再生させるためのデータとして、前記MPEG符号化方式で符号化されて前記第２の記録媒体の前記第３及び第４の２つのMPEG画像データの記録された各領域と異なる領域に記録されている合わせ繋ぎ区間再符号化データを前記第２の記録媒体から得て、
前記第３のMPEG画像データにおいて設定された第３の繋ぎ区間の開始位置まで前記第３のMPEG画像データを再生した後、前記合わせ繋ぎ区間再符号化データを前記第３の繋ぎ区間の開始位置から前記第４のMPEG画像データにおいて設定された第４の繋ぎ区間の終了位置まで再生し、その後、前記第４のMPEG画像データにおける前記第４の繋ぎ区間の終了位置から前記第４のMPEG画像データを再生するものであり、
前記第２の記録媒体に記録された前記合わせ繋ぎ区間再符号化データは、前記第３のMPEG画像データにおける前記繋ぎ指定位置から第３の所定時間分前の位置を開始位置とし、前記第３のMPEG画像データにおける前記繋ぎ指定位置を終了位置とする区間を前記第３の繋ぎ区間とすると共に、前記第４のMPEG画像データにおける前記繋ぎ指定位置を開始位置とし、前記第４のMPEG画像データにおける前記繋ぎ指定位置から第４の所定時間分後の位置を終了位置とする区間を前記第４の繋ぎ区間とし、前記第３の繋ぎ区間と前記第４の繋ぎ区間とを合わせた区間を合わせ繋ぎ区間として、前記第３の繋ぎ区間の前記第３のMPEG画像データを復号して得た画像データである第３の繋ぎ区間復号画像データと、前記第４の繋ぎ区間の前記第４のMPEG画像データを復号して得た画像データである第４の繋ぎ区間復号画像データとよりなる合わせ繋ぎ区間復号画像データを、前記MPEG符号化方式で再符号化して得た再符号化データであって、
前記第２の記録媒体に記録された前記合わせ繋ぎ区間再符号化データは、前記再符号化時におけるVBVバッファ占有値に関する情報値の推移が、前記第３の繋ぎ区間の開始位置に対応する位置における前記第３のMPEG画像データの符号化時のVBVバッファ占有値に関する情報値から開始されて、前記第４の繋ぎ区間の終了位置に対応する位置における前記第４のMPEG画像データの符号化時のVBVバッファ占有値に関する情報値までで終了するように符号量制御が行われて再符号化されたものである、
ことを特徴とするMPEGデータ記録再生装置。

以上の通り、本発明を用いれば、第１及び第２の２つのMPEG画像データを（または、第
１のMPEG画像データを要素符号化データとして含むパケット多重化された第１のMPEG多重
化データと、第２のMPEG画像データを要素符号化データとして含むパケット多重化された
第２のMPEG多重化データとを）、それぞれの指定された繋ぎ指定位置で、前記第１のMPEG
画像データから前記第２のMPEG画像データへ繋げて再生させる際に（前記第１のMPEG多重
化データから前記第２のMPEG多重化データへ繋げて再生させる際に）、VBVバッファの接
続にオーバーフローやアンダーフローの矛盾が生じることなく、シームレスで高品位な再
生を実現させることができる。

まず、本発明で実現可能とする繋ぎ再生の概念を説明する。図８のように第MPEG符号化
方式で符号化された画像データである１のＭＰＥＧ画像データと同じく第２のＭＰＥＧ画
像データが存在する場合の、第１のＭＰＥＧ画像データの途中（指定された繋ぎ指定位置
）から第２のＭＰＥＧ画像データを繋げて再生することを考える。接続点（第１のMPEG画
像データにおける繋ぎ指定位置）がｂの位置と仮定すると、第１のＭＰＥＧ画像データの
ｂの位置まで再生を行い、そのあと第２のＭＰＥＧ画像データへ接続してデータを再生す
ることになるが、MPEG画像データは単純につなぐとVBVバッファの接続に矛盾が生じ、オ
ーバーフローやアンダーフローがおきてしまうという問題が生じる。

そこで、まず、第１のＭＰＥＧ画像データと第２のＭＰＥＧ画像データとのMPEG符号化
方式での符号化時における、ＶＢＶバッファの情報を所定区間単位（第１のMPEG画像デー
タでは第１の所定区間単位、第２のMPEG画像データでは第２の所定区間単位）でサイド情
報として生成して記録媒体に記述しておくようにする。

なお、このサイド情報にＶＢＶバッファの情報を記述しないで繋ぎ再生を実現すること
も可能である。この場合には２つの方法が考えられるが、それについては後述する。
第１のMPEG画像データに関するＶＢＶバッファの情報は、第１のMPEG画像データの第１
の所定区間毎における、その区間の最後のピクチャーのMPEG符号化開始時点または終了時
点でのVBVバッファ占有値に関する情報値を示す第１のVBVバッファ占有値関連情報と、VB
Vバッファ占有値に関する情報値が第１のMPEG画像データのどの位置におけるVBVバッファ
占有値に関する情報値であるかを示す第１のアドレス情報とである。

第２のMPEG画像データに関するＶＢＶバッファの情報は、第２のMPEG画像データの第２
の所定区間毎における、その区間の最後のピクチャーのMPEG符号化開始時点または終了時
点でのVBVバッファ占有値に関する情報値を示す第２のVBVバッファ占有値関連情報と、VB
Vバッファ占有値に関する情報値が前記第２のMPEG画像データのどの位置におけるVBVバッ
ファ占有値に関する情報値であるかを示す第２のアドレス情報とである。

VBVバッファ占有値に関する情報値とは、例えばMPEGで規定されているVBVバッファ占有
値またはVBV delay値である。
前記第１及び第２の所定区間の１単位は後述するように例えば３フレーム程度のもので
も、１ＧＯＰ程度でもよい。仮にその所定区間単位を、第１のMPEG画像データにおいては
図８のa-b間、第２のMPEG画像データにおいては図８のc-d間とする。

前記ＶＢＶバッファの情報リストには、aの位置（前記第１のMPEG画像データにおける
前記繋ぎ指定位置から第１の所定時間分前の前記第１の所定区間の境界：即ち後述する区
間Ａの開始位置）でのＶＢＶバッファの情報と、bの位置（第１のMPEG画像データにおけ
る前記繋ぎ指定位置：即ち後述する区間Ａの終了位置）でのＶＢＶバッファの情報が記述
されている。また、第２のＭＰＥＧ画像データのｃの位置（第２のMPEG画像データにおけ
る前記繋ぎ指定位置から第２の所定時間分前の前記第２の所定区間の境界位置）でのＶＢ
Ｖバッファの情報と、接続点ｄの位置（第２のMPEG画像データにおける前記繋ぎ指定位置
：この例の場合は第２の所定区間の境界位置）でのＶＢＶバッファの情報も存在する。

そこで、第１のＭＰＥＧ画像データのa-b区間（第１の繋ぎ区間：ここでは区間Ａとす
る）のデータを、一旦、復号化して復号画像データを得、その復号画像データ（第１の繋
ぎ区間復号画像データ）をMPEG符号化方式で再符号化を行う。それによって作成された再
符号化データを区間Ａの再符号化ＭＰＥＧ画像データ（第１の繋ぎ区間再符号化データ）
と呼ぶこととする。この再符号化は、ＶＢＶバッファ占有値に関する情報値の推移が、ａ
の位置での前記検出した第１のVBVバッファ占有値関連情報に基づき得られたVBVバッファ
占有値に関する情報値から開始されて、ｄの位置での前記検出した第２のVBVバッファ占
有値関連情報に基づき得られたVBVバッファ占有値に関する情報値までで終了するように
レートコントロールを行ってMPEG符号化方式で再符号化を行う。

従来の繋ぎ再生動作である、第１のＭＰＥＧ画像データのｂの位置まで再生を行い、そ
のあと第２のＭＰＥＧ画像データのｄの位置へ接続してデータを再生する、という動作を
、区間Ａの再符号化ＭＰＥＧ画像データを用いて次のような動作とする。即ち、第１のＭ
ＰＥＧ画像データのaの位置（区間Ａの開始位置）までは第１のＭＰＥＧ画像データの再
生を行い、そのあと前記区間Ａの再符号化ＭＰＥＧ画像データをその区間の開始位置から
終了位置まで再生し、その後、第２のＭＰＥＧ画像データのｄの位置（繋ぎ指定位置）へ
接続してｄ以降の第２のＭＰＥＧ画像データのデータを再生する、という動作にする。再
生装置側にこの動作を行う繋ぎ再生手段を設けて実現させる。

この繋ぎ再生動作とすることで、元の第１及び第２のＭＰＥＧ画像データ同じコンテン
ツ内容で且つ、ＶＢＶバッファの破綻を起こさないシームレスな接続再生を実現すること
が可能となる。

なお、図８に示した、第１のＭＰＥＧ画像データ側のみを元に繋ぎ区間の再符号化ＭＰ
ＥＧ画像データを得る場合には、接続点ｄの位置（第２のMPEG画像データにおける繋ぎ指
定位置）のＶＢＶバッファの情報が必要となる。前述したようにＶＢＶバッファの情報は
、MPEG画像データの所定区間毎における、その区間の最後のピクチャーのMPEG符号化開始
時点または終了時点での情報であるので、所定区間の境界の位置での情報となる。従って
、接続点の位置（繋ぎ指定位置）は、少なくとも第２のMPEG画像データにおいては第２の
所定区間の境界として指定される必要がある。（即ち、第２のMPEG画像データにおける接
続点ｄの位置は第２の所定区間の境界として指定される必要がある。）
また、第１のＭＰＥＧ画像データ側のみを元に繋ぎ区間の再符号化ＭＰＥＧ画像データ
を得る場合には、前述したように図８に示したａの位置（繋ぎ区間Ａの開始位置）のＶＢ
Ｖバッファの情報も必要となる。しかし、ａの位置は、第１のMPEG画像データにおける接
続点（繋ぎ指定位置）bから第１の所定時間分前の第１の所定区間の境界として指定され
るので、接続点bの位置に関わらずａの位置ではＶＢＶバッファの情報がえられる。よっ
て、第１のMPEG画像データにおける接続点ｂの位置は、必ずしも第１の所定区間の境界と
して指定される必要はない。

次に、その応用例を図９（２），（３）に示す。同図（１）は図８に示した例と同様の
ものである。図８に示した例では、第１のＭＰＥＧ画像データ側のみを元に繋ぎ区間の再
符号化ＭＰＥＧ画像データを得て繋ぎ再生を実現したが、第２のＭＰＥＧ画像データ側の
みを元に繋ぎ区間の再符号化ＭＰＥＧ画像データを得て繋ぎ再生を実現することも可能で
ある。その例が図９（２）に示したものであり、第２のMPEG画像データにおける繋ぎ区間
Ｂの再符号化ＭＰＥＧ画像データを用いるものである。

図９（２）において、第１のMPEG画像データにおける接続点（繋ぎ指定位置）をｉの位
置とし、第２のMPEG画像データにおける接続点（繋ぎ指定位置）をｋの位置とする。前述
したＶＢＶバッファの情報を有する単位である第１及び第２の所定区間の１単位を、第１
のMPEG画像データにおいてはi-j間、第２のMPEG画像データにおいてはｋ-ｌ間とする。ｌ
の位置は第２のMPEG画像データにおける接続点（繋ぎ指定位置）ｋから第２の所定時間分
後の第２の所定区間の境界位置となる。接続点ｋを開始位置としｌの位置を終了位置とす
る区間を繋ぎ区間Ｂ（第２の繋ぎ区間）とする。

第２のＭＰＥＧ画像データのを繋ぎ区間Ｂ（ｋ-ｌ区間）のデータを、一旦、復号化し
て、復号画像データを得、その復号画像データ（第２の繋ぎ区間復号画像データ）をMPEG
符号化方式で再符号化を行う。それによって作成された再符号化データを繋ぎ区間Ｂの再
符号化ＭＰＥＧ画像データ（第２の繋ぎ区間再符号化データ）と呼ぶこととする。この再
符号化は、ＶＢＶバッファ占有値に関する情報値の推移が、ｉの位置での第１のVBVバッ
ファ占有値関連情報に基づき得られたVBVバッファ占有値に関する情報値から開始されて
、ｌの位置での第２のVBVバッファ占有値関連情報に基づき得られたVBVバッファ占有値に
関する情報値までで終了するようにレートコントロールを行ってMPEG符号化方式で再符号
化を行う。

そして、繋ぎ区間Ｂの再符号化ＭＰＥＧ画像データを用いて、第１のＭＰＥＧ画像デー
タから第２のＭＰＥＧ画像データへの繋ぎ再生を行う。すなわち、第１のＭＰＥＧ画像デ
ータの接続点ｉ（繋ぎ指定位置）までは第１のＭＰＥＧ画像データの再生を行い、そのあ
と前記区間Ｂの再符号化ＭＰＥＧ画像データをその区間の開始位置から終了位置まで再生
し、その後、第２のＭＰＥＧ画像データのｌの位置（繋ぎ区間Ｂの終了位置）へ接続して
ｌの位置以降の第２のＭＰＥＧ画像データのデータを再生する、という動作にする。再生
装置側にこの動作を行う繋ぎ再生手段を設けて実現させる。

この繋ぎ再生動作とすることで、元の第１及び第２のＭＰＥＧ画像データ同じコンテン
ツ内容で且つ、ＶＢＶバッファの破綻を起こさないシームレスな接続再生を実現すること
が可能となる。

なお、図９（２）に示した、第２のＭＰＥＧ画像データ側のみを元に繋ぎ区間の再符号
化ＭＰＥＧ画像データを得る場合には、接続点ｉの位置（第１のMPEG画像データにおける
繋ぎ指定位置）のＶＢＶバッファの情報が必要となる。前述したようにＶＢＶバッファの
情報は、MPEG画像データの所定区間毎における、その区間の最後のピクチャーのMPEG符号
化開始時点または終了時点での情報であるので、所定区間の境界の位置での情報となる。
従って、接続点の位置（繋ぎ指定位置）は、少なくとも第１のMPEG画像データにおいては
第１の所定区間の境界として指定される必要がある。（即ち、第１のMPEG画像データにお
ける接続点ｉの位置は第１の所定区間の境界として指定される必要がある。）
また、第２のＭＰＥＧ画像データ側のみを元に繋ぎ区間の再符号化ＭＰＥＧ画像データ
を得る場合には、前述のように図９（２）に示した、ｌの位置（繋ぎ区間Ｂの終了位置）
のＶＢＶバッファの情報も必要となる。しかし、ｌの位置は、第２のMPEG画像データにお
ける接続点（繋ぎ指定位置）ｋから第２の所定時間分後の第２の所定区間の境界として指
定されるので、接続点ｋの位置に関わらずｌの位置ではＶＢＶバッファの情報が得られる
。よって、第２のMPEG画像データにおける接続点ｋの位置は、必ずしも第２の所定区間の
境界として指定される必要はない。

次に、図９（３）に示す応用例について説明する。この例では、接続点前後の第１及び
第２のＭＰＥＧ画像データを元に繋ぎ区間の再符号化ＭＰＥＧ画像データを得て繋ぎ再生
を実現させるものである。
図９（３）において、第１のMPEG画像データにおける接続点（繋ぎ指定位置）をｎの位
置とし、第２のMPEG画像データにおける接続点（繋ぎ指定位置）をｐの位置とする。前述
したＶＢＶバッファの情報を有する単位である第１及び第２の所定区間の１単位を、第１
のMPEG画像データにおいてはｍ-ｎ間、第２のMPEG画像データにおいてはｐ-ｑ間とする。

ｍの位置は第１のMPEG画像データにおける接続点（繋ぎ指定位置）ｎから第１の所定時
間分前の第１の所定区間の境界位置となる。ｍの位置を開始位置とし接続点ｎの位置を終
了位置とする区間を繋ぎ区間Ａ（第１の繋ぎ区間）とする。ｑの位置は第２のMPEG画像デ
ータにおける接続点（繋ぎ指定位置）ｐから第２の所定時間分後の第２の所定区間の境界
位置となる。接続点ｐを開始位置としｑの位置を終了位置とする区間を繋ぎ区間Ｂ（第２
の繋ぎ区間）とする。

第１のＭＰＥＧ画像データの繋ぎ区間Ａ（ｍ-ｎ区間）のデータを、一旦、復号化して
復号画像データ（繋ぎ区間Ａ復号画像データ：第１の繋ぎ区間復号画像データ）をえる。
また、第２のＭＰＥＧ画像データのを繋ぎ区間Ｂ（ｐ-ｑ区間）のデータを、一旦、復号
化して、復号画像データ（繋ぎ区間Ｂ復号画像データ：第２の繋ぎ区間復号画像データ）
を得る。

繋ぎ区間Ａ復号画像データと繋ぎ区間Ｂ復号画像データとを合わせた繋ぎ区間Ａ＋Ｂ復
号画像データ（第３の繋ぎ区間復号画像データ）をMPEG符号化方式で再符号化を行う。そ
れによって作成された再符号化データを繋ぎ区間Ａ＋Ｂの再符号化ＭＰＥＧ画像データ（
第３の繋ぎ区間再符号化データ）と呼ぶこととする。この再符号化は、ＶＢＶバッファ占
有値に関する情報値の推移が、ｍの位置での第１のVBVバッファ占有値関連情報に基づき
得られたVBVバッファ占有値に関する情報値から開始されて、ｑの位置での第２のVBVバッ
ファ占有値関連情報に基づき得られたVBVバッファ占有値に関する情報値までで終了する
ようにレートコントロールを行ってMPEG符号化方式で再符号化を行う。

そして、繋ぎ区間Ａ＋Ｂの再符号化ＭＰＥＧ画像データを用いて、第１のＭＰＥＧ画像
データから第２のＭＰＥＧ画像データへの繋ぎ再生を行う。すなわち、第１のＭＰＥＧ画
像データの繋ぎ区間Ａの開始位置ｍまでは第１のＭＰＥＧ画像データの再生を行い、その
あと前記繋ぎ区間Ａ＋Ｂの再符号化ＭＰＥＧ画像データをその区間の開始位置から終了位
置まで再生し、その後、第２のＭＰＥＧ画像データの繋ぎ区間Ｂの終了位置ｑへ接続して
ｑの位置以降の第２のＭＰＥＧ画像データのデータを再生する、という動作にする。再生
装置側にこの動作を行う繋ぎ再生手段を設けて実現させる。

この繋ぎ再生動作とすることで、元の第１及び第２のＭＰＥＧ画像データ同じコンテン
ツ内容で且つ、ＶＢＶバッファの破綻を起こさないシームレスな接続再生を実現すること
が可能となる。

なお、図９（３）に示した例では、前述したようにｍの位置（繋ぎ区間Ａの開始位置）
のＶＢＶバッファの情報が必要となる。ｍの位置は、第１のMPEG画像データにおける接続
点（繋ぎ指定位置）ｎから第１の所定時間分前の第１の所定区間の境界として指定される
ので、接続点ｎの位置に関わらずｍの位置ではＶＢＶバッファの情報が得られる。よって
、第１のMPEG画像データにおける接続点ｎの位置は、必ずしも第１の所定区間の境界とし
て指定される必要はない。

また、前述のように図９（３）に示した、ｑの位置（繋ぎ区間Ｂの終了位置）のＶＢＶ
バッファの情報も必要となる。ｑの位置は、第２のMPEG画像データにおける接続点（繋ぎ
指定位置）ｐから第２の所定時間分後の第２の所定区間の境界として指定されるので、接
続点ｐの位置に関わらずｑの位置ではＶＢＶバッファの情報が得られる。よって、第２の
MPEG画像データにおける接続点ｐの位置も、必ずしも第２の所定区間の境界として指定さ
れる必要はない。

このように、図９（１）〜（３）に示した方法は、いずれもシームレスで高品位な繋ぎ
再生を実現させることができる
これらの発展系としては、図１０に示すように、第１のＭＰＥＧ画像データと、第２の
ＭＰＥＧ画像データや、第３、第４のＭＰＥＧ画像データを、図のように途中分岐するよ
うな繋ぎ再生を実現させることも可能となる。このように、本発明を用いれば、元のMPEG
画像データそのものを加工することなく、繋ぎ区間の再符号化ＭＰＥＧ画像データを生成
し利用するだけで、他のMPEGデータに自由につなげることができるので、さまざまな分岐
ストーリーを構成するプログラムを符号化する際にも、分岐ストーリー毎にそのストーリ
ーの全体にわたる冗長なMPEG画像データを記録することなく、メディアを効率よく使用す
ることが可能となる。（本発明を用いれば、第１〜第４のＭＰＥＧ画像データそれぞれ一
組と、分岐ストーリー毎の繋ぎ区間の再符号化ＭＰＥＧ画像データとを用意しておけばよ
い。）
また、図９（３）に示す方法を用いれば、前述したように、第１のMPEG画像データにお
ける接続点の位置は、必ずしも第１の所定区間の境界として指定される必要がなく、第２
のMPEG画像データにおける接続点の位置も、必ずしも第２の所定区間の境界として指定さ
れる必要がないので、ＶＢＶバッファの情報を所定区間単位でサイド情報として記述して
おく所定区間単位よりも細かい精度、例えば１フレーム単位で編集する場合に適用できる
。この例を図１５と共に説明する。所定単位は３フレーム程度のものでも、１ＧＯＰ程度
でもよいが、ここでは１ＧＯＰとする。

図１５のように繋げる対象の２つのMPEGストリームが存在するとする。第１のMPEGスト
リームに矢印で示してあるｇとｈの地点では、前記ＶＢＶバッファの情報リストにｇの位
置でのＶＢＶバッファの情報と、ｈの位置でのＶＢＶバッファの情報が記述されている。
また、第２のＭＰＥＧ画像データにもiの位置のＶＢＶバッファの情報とjの位置のＶＢＶ
バッファの情報も存在する。

第１のMEPGストリーム１のｐの位置から、第２のMPEGストリームの先頭へ繋ぐ場合、第
１のMPEGストリームのｇからｐまでの区間Aのデータを復号し、さらに、第２のMPEGスト
リームのiからｊの区間Bのデータを復号し、両方の画像をバッファ推移がｇの位置のバッ
ファ占有値から始まってｊの位置のバッファ占有値になるように再符号化を行う。

それによって作成されたデータを区間Ａ＋Ｂの再符号化ＭＰＥＧ画像データを呼ぶとす
ると、従来の再生動作である、第１のＭＰＥＧ画像データのｐの位置まで再生を行い、そ
のあと第２のＭＰＥＧ画像データへ接続してデータを再生する、という動作は、第１のＭ
ＰＥＧ画像データのｇの位置まで再生を行い、そのあと前記区間Ａ＋Ｂの再符号化ＭＰＥ
Ｇ画像データを再生し、その後、第２のＭＰＥＧ画像データのｊへ接続してデータを再生
する、という動作にすることで、同じコンテンツ内容で且つ、ＶＢＶバッファの破綻を起
こさないシームレスな接続再生をすることができる。

次に、サイド情報としてＶＢＶバッファの情報を記述しないで上述した各例と同様な繋
ぎ再生を実現する２つの方法について説明する。（繋ぎ区間再符号化データを生成する際
に必要となる、VBVバッファ占有値に関する情報値の算出方法について説明する。）
まず、第１の方法について説明する。ＭＰＥＧ規格において、基本的にＣＢＲ（consta
nt bit rate）、即ち、固定転送レートの場合には、ＭＰＥＧビデオのピクチャーレイヤ
にＶＢＶバッファのバッファ占有率を示す、VBV delay値が規定されている。この場合に
はVBV delay値がピクチャー単位に記述されているので、ＭＰＥＧ画像ビットストリーム
をピクチャーヘッダーのみだけでも観測することで、ＭＰＥＧ画像データの所定位置に対
応するピクチャのＭＰＥＧ符号化開始時点（または終了時点）でのVBVバッファ占有値を
検出することができる。この場合、例えば後述する図４におけるＶＢＶバッファ情報検出
器３３の機能は、ビットストリームのピクチャーヘッダー（ＭＰＥＧでは０ｘ０００００
１００という４バイトのコード）をサーチして、そのあとの、１０ビットのtemparal ref
erence１０ビット、picture coding type３ビットのあとに続く、VBV delay１６ビットを
検出することで実現できる。VBV delay値とは
VBV delay = 90000 x B / R
B:バッファ占有値 R：ビットレート
で定義されたものであるから、固定レートの場合には、このビットレートを用いてVBV de
lay値からVBVバッファ占有値も計算で求めることができる。（例えば図４に示すＶＢＶバ
ッファ情報検出器３３で計算する。）
ＭＰＥＧではこのVBV delay値は、図１６（２）のように、グラフの頂点の位置でのも
のに注意しなければならない。

次に、第２の方法について説明する。これは、固定転送レートではなく可変転送レート
の場合である。ＭＰＥＧ規格では、基本的にＶＢＲ（variable bit rate：可変転送レー
ト）の場合、ＭＰＥＧビデオのピクチャーレイヤにおけるＶＢＶバッファのバッファ占有
率を示すVBV delay値はすべて１、（１６ビットすべてが１なので０ｘｆｆｆｆ）となる
。従って、前記第１の方法は使えない。

そこで、ＭＰＥＧ画像ビットストリームを観測することで得られた情報から次のような
計算を行う。まず、ビットストリームの一番初めから、ＶＢＶバッファをＭＰＥＧ規定の
最大値（たとえばメインプロファイルメインレベルでは1.75Mbit）まで占有したと仮定す
る。次に、始めのピクチャーの符号量を減算する。次に、可変転送レート符号化における
ピークレートの伝送レート情報を用いて、表示ピクチャー間の時間だけ経過した場合の伝
送量を加算し、次のピクチャーの符号量を減算する。このような一連の加算、減算という
処理を所定の求めたいビットストリームの位置まで繰り返し行うことで、図３に示すよう
なグラフをシミュレーションして求めるがごとく、ＭＰＥＧ画像データの所定位置に対応
するピクチャのMPEG符号化開始時点（または終了時点）でのVBVバッファ占有値を求める
ことができる。可変転送レート時のピークレートは、ＭＰＥＧではシーケンスヘッダーの
bit rateというシンタックスの部分に記述することに規定されているので、それを参照す
れば得られる。

例えば、後述する図４に示すＶＢＶバッファ情報検出器３３に上述のＭＰＥＧ画像ビッ
トストリームを観測機能と計算機能を持たせるようにして実現する。（この第２の方法の
場合、そのＭＰＥＧ画像ビットストリームの先頭から、各ピクチャーの発生符号量を観測
して計算しなければならないが、第１の方法と同様に予めサイド情報としてＶＢＶバッフ
ァの情報を用意しておく必要がない。）
次に、上記第１及び第２の方法を用いた場合における、繋ぎ区間再符号化データの生成
について簡単に説明する。なお、この繋ぎ区間再符号化データを用いた繋ぎ再生動作は、
予めサイド情報として記録されているＶＢＶバッファの情報により生成した繋ぎ区間再符
号化データを用いた場合と同様であるので、ここでは説明を省略する。

図９（１）に示す第１のＭＰＥＧ画像データ側のみを元に繋ぎ区間の再符号化ＭＰＥＧ
画像データを得る場合には、第１のＭＰＥＧ画像データにおける接続点（繋ぎ指定位置）
ｂから第１の所定時間分前の位置ａを開始位置として、第１のＭＰＥＧ画像データにおけ
る繋ぎ指定位置ｂを終了位置とする区間を第１の繋ぎ区間（繋ぎ区間Ａ）とする。繋ぎ区
間Ａの開始位置ａの指定に、サイド情報を用いる場合のような第１の所定区間の境界とい
った制限は不要となる。同様に、第２のＭＰＥＧ画像データにおける接続点（繋ぎ指定位
置）ｄの指定に、サイド情報を用いる場合のような第２の所定区間の境界といった制限は
不要となる。

第１のＭＰＥＧ画像データのa-b区間（繋ぎ区間Ａ）のデータを、一旦、復号化して復
号画像データを得、その復号画像データ（第１の繋ぎ区間復号画像データ）をＭＰＥＧ符
号化方式で再符号化して、繋ぎ区間Ａの再符号化ＭＰＥＧ画像データ（第１の繋ぎ区間再
符号化データ）を得る。この再符号化は、VBVバッファ占有値の推移が、上記第１または
第２の方法で算出された、ａの位置に相当するピクチャのＭＰＥＧ符号化（第１のＭＰＥ
Ｇ画像データ生成時のＭＰＥＧ符号化）開始時点（または終了時点）でのVBVバッファ占
有値から開始される。そして、VBVバッファ占有値の推移が、上記第１または第２の方法
で算出された、ｄの位置に相当するピクチャのMPEG符号化（第２のＭＰＥＧ画像データ生
成時のＭＰＥＧ符号化）開始時点（または終了時点）でのVBVバッファ占有値までで終了
するように、レートコントロールを行ってMPEG符号化方式で再符号化される。得られた繋
ぎ区間Ａの再符号化ＭＰＥＧ画像データ（第１の繋ぎ区間再符号化データ）を記録媒体に
記録する。（例えば、後述する図４に示すデータ書き込み部３７により記録する。）
次に、図９（２）に示す第２のＭＰＥＧ画像データ側のみを元に繋ぎ区間の再符号化Ｍ
ＰＥＧ画像データを得る場合について説明する。図９（２）において、第１のMPEG画像デ
ータにおける接続点（繋ぎ指定位置）をｉの位置とし、第２のMPEG画像データにおける接
続点（繋ぎ指定位置）をｋの位置とする。接続点ｋを開始位置とし、接続点（繋ぎ指定位
置）ｋから第２の所定時間分後の位置となるｌの位置を終了位置とする、第２のＭＰＥＧ
画像データの区間を繋ぎ区間Ｂ（第２の繋ぎ区間）とする。繋ぎ区間Ｂの終了位置ｌの指
定に、サイド情報を用いる場合のような、第２の所定区間の境界といった制限は不要とな
る。同様に、第１のＭＰＥＧ画像データにおける接続点（繋ぎ指定位置）ｉの指定に、サ
イド情報を用いる場合のような第１の所定区間の境界といった制限は不要となる。

第２のＭＰＥＧ画像データの繋ぎ区間Ｂ（ｋ-ｌ区間）のデータを、一旦、復号化して
、復号画像データを得、その復号画像データ（第２の繋ぎ区間復号画像データ）をMPEG符
号化方式で再符号化して、繋ぎ区間Ｂの再符号化ＭＰＥＧ画像データ（第２の繋ぎ区間再
符号化データ）を得る。この再符号化は、VBVバッファ占有値の推移が、上記第１または
第２の方法で算出された、ｉの位置に相当するピクチャのＭＰＥＧ符号化開始時点（また
は終了時点）でのVBVバッファ占有値から開始される。そして、VBVバッファ占有値の推移
が、上記第１または第２の方法で算出された、ｌの位置に相当するピクチャのMPEG符号化
開始時点（または終了時点）でのVBVバッファ占有値までで終了するように、レートコン
トロールを行ってMPEG符号化方式で再符号化が行われる。得られた繋ぎ区間Ｂの再符号化
ＭＰＥＧ画像データ（第２の繋ぎ区間再符号化データ）を記録媒体に記録する。（例えば
、後述する図４に示すデータ書き込み部３７により記録する。）
次に、図９（３）に示す、接続点前後の第１及び第２のＭＰＥＧ画像データを元に繋ぎ
区間の再符号化ＭＰＥＧ画像データを得る場合について説明する。

図９（３）において、第１のMPEG画像データにおける接続点（繋ぎ指定位置）をｎの位
置とし、第２のMPEG画像データにおける接続点（繋ぎ指定位置）をｐの位置とする。
第１のMPEG画像データにおける接続点（繋ぎ指定位置）ｎから第１の所定時間分前の位
置をｍとする。ｍの位置を開始位置とし、接続点ｎの位置を終了位置とする第１のMPEG画
像データの区間を、繋ぎ区間Ａ（第１の繋ぎ区間）とする。第２のMPEG画像データにおけ
る接続点（繋ぎ指定位置）ｐから第２の所定時間分後の位置をｑする。接続点ｐを開始位
置とし、ｑの位置を終了位置とする第２のMPEG画像データの区間を、繋ぎ区間Ｂ（第２の
繋ぎ区間）とする。

繋ぎ区間Ａの開始位置ｍの指定に、サイド情報を用いる場合のような第１の所定区間の
境界といった制限は不要となる。同様に、繋ぎ区間Ｂの終了位置ｑの指定に、サイド情報
を用いる場合のような第２の所定区間の境界といった制限は不要となる。

第１のＭＰＥＧ画像データの繋ぎ区間Ａ（ｍ-ｎ区間）のデータを、一旦、復号化して
復号画像データ（繋ぎ区間Ａ復号画像データ：第１の繋ぎ区間復号画像データ）を得る。
また、第２のＭＰＥＧ画像データの繋ぎ区間Ｂ（ｐ-ｑ区間）のデータを、一旦、復号化
して、復号画像データ（繋ぎ区間Ｂ復号画像データ：第２の繋ぎ区間復号画像データ）を
得る。

そして、繋ぎ区間Ａ復号画像データと繋ぎ区間Ｂ復号画像データとを合わせた繋ぎ区間
Ａ＋Ｂ復号画像データ（第３の繋ぎ区間復号画像データ）をMPEG符号化方式で再符号化を
行う。それによって作成された再符号化データを繋ぎ区間Ａ＋Ｂの再符号化ＭＰＥＧ画像
データ（第３の繋ぎ区間再符号化データ）とする。この再符号化は、ＶＢＶバッファ占有
値の推移が、上記第１または第２の方法で算出された、ｍの位置に相当するピクチャのＭ
ＰＥＧ符号化開始時点（または終了時点）でのVBVバッファ占有値から開始される。そし
て、VBVバッファ占有値の推移が、上記第１または第２の方法で算出された、ｑの位置に
相当するピクチャのMPEG符号化開始時点（または終了時点）でのVBVバッファ占有値まで
で終了するように、レートコントロールを行ってMPEG符号化方式で再符号化される。得ら
れた繋ぎ区間Ａ＋Ｂの再符号化ＭＰＥＧ画像データ（第３の繋ぎ区間再符号化データ）を
記録媒体に記録する。（例えば、後述する図４に示すデータ書き込み部３７により記録す
る。）
図１０に示す例においても、もちろん、上述の計算方法により必要な位置でのVBVバッ
ファ占有値を求めることが可能であり、所望の繋ぎ区間再符号化データ）を得ることがで
きる。

次に、本発明を適用した記録再生装置の一実施例によって記録媒体に記録するＶＢＶバ
ッファ情報（MPEG画像データの所定区間毎における、その区間の最後のピクチャーのMPEG
符号化開始時点または終了時点でのVBVバッファ占有値に関する情報値を示すVBVバッファ
占有値関連情報と、前記VBVバッファ占有値に関する情報値が前記MPEG画像データのどの
位置におけるVBVバッファ占有値に関する情報値であるかを示すアドレス情報）、ならび
に、ＭＰＥＧ画像データに関する記録構造について詳しく説明する。記録媒体には、MPEG
符号化方式で圧縮された画像データであるMPEG画像データが記録される。このMPEG画像デ
ータは、一回の記録単位で符号化生成された連続再生可能なデータが複数連続して連なっ
たビットストリームとして記録される。

これらの符号化されたMPEG画像データのビットストリームとは別に、MPEG画像データの
ビットストリームにおけるIピクチャーの１フレーム前のピクチャー符号化終了時点でのV
BVバッファ値（占有値）と、Pピクチャーの１フレーム前のピクチャー符号化終了時点で
のVBVバッファ値（占有値）と、前記各VBVバッファ値がMPEG画像データのどの位置におけ
るVBVバッファ占有値であるかを示すアドレス情報（この例では、MPEG画像データのファ
イルのはじめからの相対アドレス）が記録される。これらのデータを含むVBVバッファ情
報のデータ構造を図１に示す。

VBVバッファ情報は階層構造をもっている。始めにエントリーポイント情報構造体があ
り、その後にVBV情報構造体がある。エントリーポイント情報構造体は、始めにエントリ
ーポイント（EP）のアドレスの個数を３２ビット、その後にEPｎ（ｎは１以上の自然数）
アドレスを３２ビットで順に記述する。EPｎアドレスはVBV情報構造体のEPｎ情報（ｎは
１以上の自然数）の記述されている位置を示し、このVBVバッファ情報の先頭からの相対
アドレスを記述する。一方VBV情報構造体は、EP1情報から順に記述されており、EP1情報
の中身は相対アドレス、PTM値、VBV値を順に記述する。

VBV情報構造体のEPｎ情報における相対アドレスとは、図２のように、MPEG画像データ
のビットストリームにおけるIピクチャーの１フレーム前のピクチャー符号化終了時点、P
ピクチャーの１フレーム前のピクチャー符号化終了時点、及び記録終了時点での、そのMP
EG画像データの先頭からの相対アドレスであり、例えば単位はバイトが用いられる。ディ
スクメディアに記録されている場合には、相対アドレスとしてセクターなどが用いられる
。

VBV情報構造体のEPｎ情報におけるPTM値とは、MPEGのシステム規格（多重化規格）にお
いて、９０kHzもしくは２７MHｚのクロックで記録されているタイムスタンプである。MPE
G規格ではPTS（Presentation Time Stamp）やDTS(Decoding Time Stamp)と呼ばれている
。ここでは、MPEG画像データのビットストリームのIピクチャーの１フレーム前のピクチ
ャー符号化終了時点、Pピクチャーの１フレーム前のピクチャー符号化終了時点、及び記
録終了時点での、時間情報としてDTSを記録する。DTSは１ピクチャーに１つ記録されてお
り、NTSCのビデオ信号であれば９０KHｚクロックで１ピクチャにつき３００３クロックの
間隔で、記録されている。従って、本発明のように３ピクチャーごとにIピクチャかPピク
チャが存在している場合で一番初めが０からスタートする場合には、９００９、１８０１
８....という間隔でPTM情報がEPｎ情報に記述されることになる。

VBV情報構造体のEPｎ情報におけるVBV値は、MPEGで規定されているデコーダーの仮想バ
ッファ占有値である。MPEG画像データの１ピクチャごとの発生符号量と、転送レートの値
から計算で導けるもので、図３のように、圧縮されているビットストリーム情報のIピク
チャーとPピクチャーの１フレーム前のピクチャー符号化終了時点での、図の○の位置で
のVBV占有値を記述する。もしくはMPEGで規定されているVBV delay値を記述する。この値
はVBV占有値まで、そのときの転送レートでどれだけの時間がかかるかという時間に換算
した値である。本発明ではVBVバッファ占有値に関する情報であれば何であっても良い。V
BVバッファ占有値とVBV delay値の関係を図１７に示す。VBVバッファの占有値OCCは、符
号化レートをRとすると、VBV delay = 90000 * OCC / Rという関係にあり、９００００は
９０ｋHzのカウント数で示すための値である。

MPEG圧縮では基本的にIBB、PBB、というように３フレーム単位でIかPのピクチャータイ
プを用いて符号化する。MPEG圧縮はBピクチャーは両方向から予測されている可能性があ
るので、符号化ビットストリーム順番において、ビットストリームのIピクチャー、Pピク
チャーの１フレーム前のピクチャー符号化終了時点でしか、データのつなぎ追加は簡単に
はできない。そのため本発明では、VBVの情報をビットストリームのIピクチャー、Pピク
チャーの１フレーム前のピクチャー符号化終了時点で記述する形態をもつという仮定で説
明している。

しかしながら、本質的にはVBV占有値に関する情報値は、毎ピクチャー持っても良い。
また、ピクチャー符号化終了時点でなく、符号化開始点でも良い。図１６（１）では符号
化終了点の値をリストに持つ場合の概念図であるが、この場合には一番初めのVBV占有値
に関する情報値が無いため、第１フレームの前に仮想的にフレームがあったとして、その
仮想フレームの符号化終了時点のVBV占有値に関する情報値を初期値として計算する。計
算は第１のピクチャ符号量を、一番目のVBV占有値に関する情報値に加算して、加算した
値から、符号化レートによる傾きから、（１/ピクチャーレート）だけの時間によってど
れだけの符号伝送量かを計算した値を減算すると、図１６（１）の黒丸部分の初期値が求
められる。また、図１６（２）では符号化開始点の値をリストに持つ場合の概念図である
が、この場合には一番最後のVBV占有値に関する情報値が無いため、最終フレームの後ろ
に仮想的にフレームがあったとして、その仮想フレームの符号化開始時点のVBV占有値に
関する情報値を最終値として計算する。計算は最終のピクチャ符号量を、最後のVBV占有
値に関する情報値から減算して、減算した値から、符号化レートによる傾きから、（１/
ピクチャーレート）だけの時間によってどれだけの符号伝送量かを計算した値を加算する
と、図１６（２）の黒丸部分の最終値が求められる。

次に、本発明を適用した記録再生装置の一実施例の構成を図４に示し、MPEG符号化方式
で画像データを符号化しながらVBVバッファ情報を作成する動作を説明をする。
記録媒体３１に符号化データがまったく無い状態、すなわち、初めて符号化する場合に
は、記録媒体３１からのデータ読み取り部３２では、データが存在していないので、デー
タがないという情報をVBVバッファ情報検出器３３に送信する。VBVバッファ情報検出器３
３でもデータが存在していないので、パラメータ設定器３４にはあらかじめ設定した初期
値、すなわちVBV値は、たとえばMPEGで規定されるVBVの最大値の８０％の値とし、PTMタ
イムスタンプ情報は０とする。これらの初期設定値を画像符号化器３５に送信する。

画像符号化器３５では、符号化を初期設定値から開始する。画像符号化器３５では符号
化を行いながら、ビットストリームのIピクチャーの１フレーム前、及びPピクチャーの１
フレーム前のピクチャー符号化終了時点での発生符号量とPTM値、VBV値を、毎回、VBVバ
ッファ情報作成器３６へ送信する。それとともに符号化データをデータ書き込み部３７へ
送信する。さらに、画像符号化器３５は、ユーザーが画像圧縮記録を一時停止、もしくは
終了した時点での発生符号量とPTM値、VBV値を、VBVバッファ情報作成器３６へ送信する
。

VBVバッファ情報作成器３６では、入力された発生符号量値とPTM値とVBV値から図１に
示す構造のVBVバッファ情報のデータを作成する。もしくはそのデータ構造を作成するの
に必要なデータをメモリーして所定のフォーマットで記録保持する。VBVバッファ情報作
成器３６で作成された情報は、データ書き込み部３７により符号化データ（MPEG画像デー
タ）が記録媒体３１に書き込まれているときに、同時にバースト的に書き込みを行っても
良い。また、VBVバッファ情報作成器３６で作成された情報は、符号化データ（MPEG画像
データ）が書き込み終わったとき、すなわち、ユーザーが画像圧縮記録を一時停止、もし
くは終了した後に所定のフォーマットで記録保持されていたデータから、図１の構造に変
換してデータ書き込み部３７により書き込みを行っても良い。

次に、記録媒体３１に記録されている第１及び第２の２つのMPEG画像データに対して、
所定の位置からの繋ぎ再生を可能とするための区間Ａの部分の再符号化を行う場合の説明
を図８を用いて行う。

まず、図示せぬ、ユーザーインターフェースから、すでに記録されている第１及び第２
の２つのMPEG画像データのどこのポイントから繋ぎ再生するかを指定してもらう。
記録媒体３１には、すでに第１及び第２の２つのMPEG画像データ（圧縮符号化ストリー
ム）と、図４に示した記録再生装置により生成したVBVバッファ情報とが記録されている
。従って、図４に示すデータ読み取り部３２ではVBVバッファ情報を読み取り、接続点ｂ
（繋ぎ指定位置）から区間Ａの分だけ前にある位置の図８におけるaの位置のVBV値、PTM
値、相対アドレスを得る。

前記ユーザーインターフェースからの繋ぎ再生位置の指定が、例えば、その指定の仕方
が、データの相対アドレスの位置情報の場合には、VBVバッファ情報の構造のEPｎ情報内
の相対アドレス情報にもっとも近い値のデータにリンクされているVBV値、PTM値を用いる
。また、もし、その指定の仕方が、データの開始時刻からの時間や、繋ぎ再生されるポイ
ントのタイムスタンプ情報であれば、同様にVBVバッファ情報の構造のEPｎ情報内のPTM値
を用いて、この値が９０KHｚのクロックで記録されている場合にはその値に 1/90000秒の
値を乗じることで秒の時間を得ることができ、その繋ぎ再生する位置（相対アドレス）と
VBV値、PTM値を得ることができる。

これらの値はパラメータ設定器３４に入力され、画像符号化器３５においてその設定値
から符号化が開始される。一方、符号化データサーチ器３８では再符号化する区間Ａの先
頭位置を、すでに記録してあるビットストリームに対してサーチする。サーチはデータの
相対アドレスを用いて、そのビットストリームファイルの頭からの位置にポインタを設定
する。

画像符号化器３５では区間Ａに対応する第１のＭＰＥＧ画像データを復号化し、復号画
像を用いて再度、ＶＢＶバッファ占有値の推移が、ａの位置でのVBV値から開始されて、
ｄの位置でのVBV値までで終了するようにレートコントロールを行ってMPEG符号化方式で
再符号化を行う。再符号化は前記のように完全に復号した画像を用いても良いが、特開平
１１−２３４６７７に開示されているような、ビットストリーム上での符号量コントロー
ルの技術を用いても良い。

ここでもし、再符号化する区間Ａが、ＶＢＶバッファ情報の最小単位より長い場合には
、再符号化しながら、ビットストリームのIピクチャー、Pピクチャーの１フレーム前のピ
クチャー符号化終了時点での発生符号量とPTM値、VBV値を、毎回、VBVバッファ情報作成
器３６へ送信する。それと共に、再符号化データをデータ書き込み部３７へ送信する。

VBVバッファ情報作成器３６では、入力された発生符号量値とPTM値とVBV値から図１に
示す構造のデータを作成する。もしくはそのデータ構造を作成するのに必要なデータをメ
モリーして所定のフォーマットで記録保持する。VBVバッファ情報作成器３６でのその情
報は、符号化データが書き込まれているときに、同時にバースト的に書き込みを行っても
良いし、符号化データが書き終わったとき、すなわち、ユーザーが画像圧縮記録を一時停
止、もしくは終了したときに所定のフォーマットで記録保持されていたデータから、図１
の構造に変換して書き込みを行っても良い。

再符号化された区間Ａの画像データ（繋ぎ区間Ａ再符号化データ）は、第１、第２のＭ
ＰＥＧ画像データと分離された別のファイルとして記録する。もしくは、記録第２のＭＰ
ＥＧ画像データの先頭に連結して記録する。

第１のMPEG画像データと、第２のMPEG画像データと、VBVバッファ占有値に関する情報
とそのデータアドレス情報と、前記区間Ａの再符号化画像データ（または前記区間Ｂの再
符号化画像データ、または前記区間Ａ＋Ｂの再符号化画像データ）は、同一記録メディア
に記録されていても、任意の組み合わせで複数の記録メディアに記録くされていても、そ
れぞれが異なる記録メディアに記録されていてもかまわない。複数の記録メディアに分け
て記録されている場合には、それぞれの記録メディア同士がリンクされて（それぞれのデ
ータ、情報同士がリンクされて）運用されるように、同一情報群であることを示す情報、
例えばIDなどを各記録メディアに記録しておくと良い。第１のMPEG画像データと、第２の
MPEG画像データと、前記区間Ａの再符号化画像データ（または前記区間Ｂの再符号化画像
データ、または前記区間Ａ＋Ｂの再符号化画像データ）とが同一の記録媒体に記録されて
いる場合には、一つの記録媒体で、再生装置側の繋ぎ再生を制御できる。

なお、繋ぎ区間再符号化画像データを得るためのVBVバッファ占有値に関する情報を、
媒体に記録されているサイド情報から読み出すのではなく、計算により求める場合には、
VBVバッファ占有値に関する情報とそのデータアドレス情報とを記録しておく必要はない
。

上記実施例で、記録メディアは記録再生装置内の記録メディアとして説明したが、記録
再生装置に着脱自在の記録メディア、ネットワークを介した記録メディア（データベース
）であってもかまわない。

また、上記実施例では、単体のMPEG画像データに着目して画像データをつなぐ例を説明
したが、音声データなどと共にMPEG方式でパケット多重化されたMPEG多重化データである
MPEGトランスポートストリーム内のMPEG画像データをつなぐ場合に適応しても良い。

トランスポートストリームには可変長符号化されているMPEG画像データ、固定長符号化
されているMPEG１レイヤー２オーディオもしくはAC3などが多重化されている場合が多い
。従って、その多重化されたデータ中の要素符号化データのひとつであるMPEG画像データ
をつなぐ場合、接続する点においてMPEGで規定されるSTDバッファ（ビデオではVBVバッフ
ァ）の整合性を考慮した接続方法として、前記説明した実施例の方法を適応すればよい。

例えば第１及び第２のMPEGトランスポートストリーム内からそれぞれ接続対象の第１及
び第２のMPEG画像データを取り出し、上記した実施例と同様にして接続する。繋ぎ再生に
使用する繋ぎ区間再符号化データ（前記区間Ａの再符号化画像データ、前記区間Ｂの再符
号化画像データ、前記区間Ａ＋Ｂの再符号化画像データ）は、MPEG方式でパケット多重化
されたMPEG多重化データとして生成、記録されてもよい。

図１４（１）の状態はMPEGトランスポートストリームのパケット多重化されたデータの
状態を示している。Vと記載されているパケットはビデオパケット、Aと記載されているパ
ケットはオーディオのパケット、Sと記載されているパケットはシステムで使用されるPAT
やPMTなどの情報パケットである。おのおのMPEG2システムのルールに準拠した形で記録さ
れている。ビデオパケットは薄いグレーの色を施してある。これらの全体を示した状態が
同図（２）である。このビデオパケットだけを集めた状態が同図（３）である。このビデ
オパケットの中身は、同図（４）に示すように始めがIピクチャーであり、次にBピクチャ
ーが２枚、そのあとにPピクチャーが１枚、と続いてくのが典型的な例である。

これらのピクチャーの１枚もしくは複数のピクチャーにおいて再符号化によって符号量
を調整する。例えば符号量が削減された状態が同図（５）である。各ピクチャーの符号量
はそれぞれ小さくなっている。その状態でパケット化したものが同図（６）である。減少
した部分には黒色を施してある。このパケット分、ビデオの全体の量が減少する。そして
、TSを再構築する。この状態を全体で表現したものが同図（７）である。同図（７）を拡
大したものが同図（８）である。結果的にVパケットの一部が減少し、それ以外の要素デ
ータパケットはそのまま多重化する。

MPEGシステムの規定ではPCRクロック情報は１００msecに一度は記録されていなければ
ならない。また、データ長が変更されているので、それぞれの要素パケットに記載されて
いるPCRクロック情報は必要に応じて変更する。また、ビデオパケットにはアクセスユニ
ット（フレームやフィールドのピクチャー単位）の先頭のPESヘッダーが存在するパケッ
トにPTSやDTSが記述されている。オーディオパケットには１つもしくは複数のオーディオ
フレームをPESでパッキングしたその先頭のPESヘッダーが存在するパケットにPTSが記載
されている。これらのタイムスタンプ情報は画像においてはピクチャー数を増減していな
い場合には変更する必要は無いし、オーディオも再生時間長を増減しなければ変更の必要
はないが、それ以外の場合には、適切なPTS,DTSを追加修正する。

さらにまた、単純に再符号化する場合には、予測符号化のリセットタイミングであるI
ピクチャーからのGOP単位が扱いやすいが、GOPが独立していない場合、即ち、境界のBピ
クチャーが双方のGOPにまたがって予測されている場合（GOPのclosed gop=0の場合）には
、一つ前のGOPの最後のリファレンスピクチャーを復号化して、図示せぬ画像再符号化用
メモリーなどに保持しておくことが必要になる場合がある。

第１のMPEG多重化データ（第１のMPEGトランスポートストリーム）と、第２のMPEG画像
データ（第２のMPEGトランスポートストリーム）と、VBVバッファ占有値に関する情報と
そのデータアドレス情報と、前記区間Ａの再符号化画像データ（または前記区間Ｂの再符
号化画像データ、または前記区間Ａ＋Ｂの再符号化画像データ）を要素符号化データとし
て含んで、MPEG方式によりパケット多重化して生成した繋ぎ区間MPEG多重化データとは、
同一記録メディアに記録されていても、任意の組み合わせで複数の記録メディアに記録く
されていても、それぞれが異なる記録メディアに記録されていてもかまわない。複数の記
録メディアに分けて記録されている場合には、それぞれの記録メディア同士がリンクされ
て（それぞれのデータ、情報同士がリンクされて）運用されるように、同一情報群である
ことを示す情報、例えばIDなどを各記録メディアに記録しておくと良い。第１のMPEG多重
化画像データと、第２のMPEG多重化画像データと、前記区間Ａの再符号化画像データ（ま
たは前記区間Ｂの再符号化画像データ、または前記区間Ａ＋Ｂの再符号化画像データ）の
繋ぎ区間MPEG多重化データとが同一の記録媒体に記録されている場合には、一つの記録媒
体で、再生装置側の繋ぎ再生を制御できる。

本発明を適用した記録再生装置の一実施例に基づくVBVバッファ情報構造を示す図である。 一実施例におけるMPEG画像データと相対アドレスとの関係を示す図である。 一実施例におけるVBV値を説明する説明図である。 本発明を適用した記録再生装置の一実施例を示すブロック図である。 従来のMPEG符号化器の一例を示す図である。 従来のMPEG復号化器の一例を示す図である。 MPEGにおけるVBVバッファ概念を説明するための図である。 本発明で実現可能とする繋ぎ再生の概念を説明するための図である。 本発明で実現可能とする繋ぎ再生の概念を説明するための図である。 本発明で実現可能とする繋ぎ再生の概念を説明するための図である。 従来のMPEG多重化システムを示す説明図である。 MPEGTSとPS及びPESの関連を示す説明図である。 MPEGTSのPSIの使用例を示す説明図である。 MPEGTSパケット配置を示す説明図である。 本発明で実現可能とする繋ぎ再生の概念を説明するための図である。 一実施例におけるVBVバッファ占有値に関する情報値を説明するための図である。 VBVバッファ占有値とVBV delay値の関係を示す図である。

符号の説明

３１ 記録媒体
３２ データ読み取り部
３３ VBVバッファ情報検出器
３４ パラメータ設定器
３５ 画像符号化器
３６ VBVバッファ情報作成器
３７ データ書き込み部
３８ 符号化データサーチ器

Claims (1)

1. MPEG符号化方式で符号化されて第１の記録媒体に記録された画像データである第１及び第２の２つのMPEG画像データを、それぞれのMPEG画像データにおける指定された繋ぎ指定位置で、前記第１のMPEG画像データから前記第２のMPEG画像データへ繋げて再生させるためのデータとして、前記MPEG符号化方式で符号化された合わせ繋ぎ区間再符号化データを生成して記録させる記録手段と、
   前記MPEG符号化方式で符号化された画像データである２つのMPEG画像データを、それぞれのMPEG画像データにおける指定された繋ぎ指定位置で、一方のMPEG画像データから他方のMPEG画像データへ繋げて再生を行う繋ぎ再生手段と、
   を設けたMPEGデータ記録再生装置であって、
   前記記録手段は、前記第１のMPEG画像データにおける前記繋ぎ指定位置から第１の所定時間分前の位置を開始位置とし、前記第１のMPEG画像データにおける前記繋ぎ指定位置を終了位置とする区間を第１の繋ぎ区間とすると共に、前記第２のMPEG画像データにおける前記繋ぎ指定位置を開始位置とし、前記第２のMPEG画像データにおける前記繋ぎ指定位置から第２の所定時間分後の位置を終了位置とする区間を第２の繋ぎ区間とし、前記第１の繋ぎ区間と前記第２の繋ぎ区間とを合わせた区間を合わせ繋ぎ区間として、
   前記第１の繋ぎ区間の前記第１のMPEG画像データを復号して得た画像データである第１の繋ぎ区間復号画像データと、前記第２の繋ぎ区間の前記第２のMPEG画像データを復号して得た画像データである第２の繋ぎ区間復号画像データとよりなる合わせ繋ぎ区間復号画像データを、前記MPEG符号化方式で再符号化して前記合わせ繋ぎ区間再符号化データを生成する再符号化手段を備え、前記合わせ繋ぎ区間再符号化データを前記第１の記録媒体の前記第１及び第２の２つのMPEG画像データの記録されている各領域と異なる領域に記録させるものであり、
   前記再符号化手段は、前記再符号化時において、VBVバッファ占有値に関する情報値の推移が、前記第１の繋ぎ区間の開始位置に対応する位置における前記第１のMPEG画像データの符号化時のVBVバッファ占有値に関する情報値から開始されて、前記第２の繋ぎ区間の終了位置に対応する位置における前記第２のMPEG画像データの符号化時のVBVバッファ占有値に関する情報値までで終了するように符号量制御を行い再符号化を行うものであり、
   前記繋ぎ再生手段は、前記第１の記録媒体から繋ぎ再生を行うと共に、他の装置により前記第１の記録媒体と同様に繋ぎ再生のための繋ぎ区間再符号化データの記録された第２の記録媒体から繋ぎ再生を行うものであり、
   前記第１の記録媒体に記録されている各データから繋ぎ再生を行う場合には、
   前記第１のMPEG画像データにおける前記第１の繋ぎ区間の開始位置まで前記第１のMPEG画像データを再生した後、前記合わせ繋ぎ区間再符号化データを前記第１の繋ぎ区間の開始位置から前記第２の繋ぎ区間の終了位置まで再生し、その後、前記第２のMPEG画像データにおける前記第２の繋ぎ区間の終了位置から前記第２のMPEG画像データを再生するものであり、
   前記第２の記録媒体に記録されている各データから繋ぎ再生を行う場合には、
   前記MPEG符号化方式で符号化されて前記第２の記録媒体に記録されている第３及び第４の２つのMPEG画像データを前記第２の記録媒体から得ると共に、前記繋ぎ指定位置で前記第３のMPEG画像データから前記第４のMPEG画像データへ繋げて再生させるためのデータとして、前記MPEG符号化方式で符号化されて前記第２の記録媒体の前記第３及び第４の２つのMPEG画像データの記録された各領域と異なる領域に記録されている合わせ繋ぎ区間再符号化データを前記第２の記録媒体から得て、
   前記第３のMPEG画像データにおいて設定された第３の繋ぎ区間の開始位置まで前記第３のMPEG画像データを再生した後、前記合わせ繋ぎ区間再符号化データを前記第３の繋ぎ区間の開始位置から前記第４のMPEG画像データにおいて設定された第４の繋ぎ区間の終了位置まで再生し、その後、前記第４のMPEG画像データにおける前記第４の繋ぎ区間の終了位置から前記第４のMPEG画像データを再生するものであり、
   前記第２の記録媒体に記録された前記合わせ繋ぎ区間再符号化データは、前記第３のMPEG画像データにおける前記繋ぎ指定位置から第３の所定時間分前の位置を開始位置とし、前記第３のMPEG画像データにおける前記繋ぎ指定位置を終了位置とする区間を前記第３の繋ぎ区間とすると共に、前記第４のMPEG画像データにおける前記繋ぎ指定位置を開始位置とし、前記第４のMPEG画像データにおける前記繋ぎ指定位置から第４の所定時間分後の位置を終了位置とする区間を前記第４の繋ぎ区間とし、前記第３の繋ぎ区間と前記第４の繋ぎ区間とを合わせた区間を合わせ繋ぎ区間として、前記第３の繋ぎ区間の前記第３のMPEG画像データを復号して得た画像データである第３の繋ぎ区間復号画像データと、前記第４の繋ぎ区間の前記第４のMPEG画像データを復号して得た画像データである第４の繋ぎ区間復号画像データとよりなる合わせ繋ぎ区間復号画像データを、前記MPEG符号化方式で再符号化して得た再符号化データであって、
   前記第２の記録媒体に記録された前記合わせ繋ぎ区間再符号化データは、前記再符号化時におけるVBVバッファ占有値に関する情報値の推移が、前記第３の繋ぎ区間の開始位置に対応する位置における前記第３のMPEG画像データの符号化時のVBVバッファ占有値に関する情報値から開始されて、前記第４の繋ぎ区間の終了位置に対応する位置における前記第４のMPEG画像データの符号化時のVBVバッファ占有値に関する情報値までで終了するように符号量制御が行われて再符号化されたものである、
   ことを特徴とするMPEGデータ記録再生装置。

Images