JP2007318366A - 画像信号再生方法および画像信号再生装置 - Google Patents

Abstract

【課題】符号化データのポインタ制御を容易かつ確実に実施し、さらに、再生エラーが発生した場合でも、容易に復帰することを目的とする。
【解決手段】各符号化データの直前に先頭判定情報１２として任意の固定ビットパターンを付加することにより、符号化データ長１１により検出したポインタが次の符号化データの先頭とは異なる場合に、先頭判定情報１２を検出しないことからポインタが正しくないことを検出し、その場合、前の符号化データのポインタから次の先頭判定情報１２を検出することにより、次の符号化データのポインタを決定することができるため、符号化データのポインタ制御を容易かつ確実に実施し、さらに、再生エラーが発生した場合でも、容易に復帰することができる。
【選択図】図１

Description

ＭＰＥＧ等の符号化技術により音声、映像、副映像および付加情報がディジタル符号化され、パック、分割符号化データ単位で多重化された多重符号化ストリームを再生する画像信号再生方法および画像信号再生装置に関する。

ディジタルメディアでは映像信号についてはＭＰＥＧ規格で規定された符号化が一般に使用されており、音声についてはＭＰＥＧ以外の符号化方式も採用されている。また、ＤＶＤでの字幕符号化については独自のビットマップデータの圧縮手法が採用されている。
音声、映像の符号化データの多重化にはＭＰＥＧのシステム規格で定義された多重化方式で多重化が行われる。

以下、図６，図７を用いて従来の多重化された画像信号再生について説明する。
図６は分割符号化データと分割符号化データを多重化した多重符号化ストリームの構造を示し、図６（ａ）はパック単位に分割された分割符号化データの構造を説明する図、図６（ｂ）は多重符号化ストリームと多重符号化ストリームから生成した副映像の符号化データ群を例示する図である。図７は従来の画像信号再生におけるポインタ決定方法を説明する図である。

図６（ａ）において、パック１０１は多重化の基本単位であり、パックヘッダ１０７Ａと映像，音声，副映像，ナビ情報のいずれかの１または複数の分割符号化データ１０２から成る。分割符号化データ１０２の先頭には、分割符号化データの先頭を示す同期信号（以下「分割符号化データスタートコード前置コード」と言う）１０３と、音声または画像の分割符号化データの区別をする分割符号化データ識別子１０４（ＭＰＲＧ規格におけるｓｔｒｅａｍ＿ｉｄ）、分割符号化データ長情報１０５、画像と音声の再生情報１０６を含む再生制御情報１０７Ｂが付加される。図６（ａ）では、パック１０１が１個の分割符号化データ１０２を含む例を示すが、パック１０１は複数の分割符号化データ１０２を含み得る。

図６（ｂ）は、パック１０１単位で多重化された音声パックＡＰ、映像パックＶＰ、副映像パックＳＰ、ナビゲーション情報符号化データパックＮＰを含む多重符号化ストリーム１０８および符号化データ群１０９の構成の例を示す。音声信号、映像信号、副映像信号およびナビゲーション情報はそれぞれ符号化装置によりディジタル符号化され、多重化装置によりパック１０１単位で多重化される。図６（ｂ）に示す符号化データ群１０９の構成は、多重符号化ストリーム１０８から副映像パックＳＰのパケット符号化データのみを抽出し、副映像パックＳＰに含まれるパケット符号化データのそれぞれを連結した状態の符号化データ群１０９を示したものである。符号化データ群１０９の符号化データ１１０は図６（ｂ）に示されるように、ユニットヘッダ１１０Ａと符号化ビットマップデータ１１０Ｂと符号化ビットマップデータ１１０Ｂに対応する表示制御情報１１０Ｃとで構成されており、パケット符号化データ１０７Ｃは、ユニットヘッダ１１０Ａ、符号化ビットマップデータ１１０Ｂおよび表示制御情報１１０Ｃとで構成される符号化データ１１０を均等に分割して形成されている。符号化データ群１０９の再生は符号化データ１１０の先頭に構成されるユニットヘッダ１１０Ａの解析を行ない、ユニットヘッダ１１０Ａに記載された情報を用いて符号化ビットマップデータ１１０Ｂの復号を行ない、この復号された符号化ビットマップデータ１１０Ｂに対する表示制御情報１１０Ｃを用いて出力タイミング設定や、色変化等の表示制御を行って映像再生信号として出力する。符号化データ群１０９の次の符号化データ１１０への復号動作の遷移はユニットヘッダ１１０Ａに記載の符号化データ長を用いて、次の符号化データ１１０の先頭に再生位置を移動し再生を順次行っていく。エラー等が存在しない正常な符号化データ群１０９において、次に読み込む符号化データ１１０の先頭位置であるポインタは、直前に読み込まれた符号化データ１１０のユニットヘッダ１１０Ａに含まれる符号化データ長を用いて検出され、符号化データ群１０９の再生を行う。

ユニットヘッダ１１０Ａに記載の符号化データ長がなんらかのエラーによって誤っていた場合であっても、誤った符号化データ長を含む符号化データ１１０の途中もしくは、最後までの再生は可能である。しかし符号化データ長が誤っていると、次の符号化データ１１０の先頭位置であるポインタに正しく再生位置を移動させることができないので、次の符号化データ１１０に含まれるユニットヘッダ１１０Ａの検出が不可能である。このため、次の符号化データ１１０の復号動作が不可能となる。この結果、符号化データ群１０９をデコードする副映像デコーダはハングアップしてしまう。このように、ユニットヘッダ１１０Ａにエラー等が存在すると、符号化データ群１０９をスムーズに再生することが困難であった。

従来、図７に示すように、ユニットヘッダ１１０Ａの直前または直後にダミーデータ１１１を挿入し、多重符号化ストリーム１０８からパケット符号化データ１０７Ｃを読み込む際に、符号化データ１０１を生成するまでに読み込んだパケット符号化データ１０７Ｃの総データ数をカントして符号化データ長を算出し、算出した符号化データ長を用いて次の符号化データ１１０のポインタを計算して、ダミーデータ１１１に次の符号化データ１１０のポインタを書き込むことで、ユニットヘッダに格納された符号化データ長を用いず、読み込み時の実測値から次の符号化データ１１０のポインタを算出することにより、ユニットヘッダに格納された符号化データ長が誤っている場合でも再生が可能な技術を用いる場合もあった。
特開２０００−１０６６６９号公報

図７に示すように、符号化データ１１０の入力データ数をカウントし、次の符号化データ１１０のポインタをダミーデータ１１１に上書きをする方法は、ポインタに沿ってユニットヘッダ１１０Ａのエラーに関わらずスムーズに再生することができる。しかしながら、ダミーデータ１１１に上書きする次の符号化データ１１０のポインタは、符号化データ１１０の入力が完了してからでないと算出できず、入力処理の書き込みポインタを符号化データ１１０の先頭に設けたダミーデータ１１０に戻して書き込みを行う必要があるため、入力処理が複雑となるという問題点があった。さらに、入力処理は多重符号化ストリームを分割符号化データ毎に分離し、順次入力しなければならないという問題点もあった。

以上の問題点を解決するために、本発明の画像信号再生方法および画像信号再生装置は、符号化データのポインタ制御を容易かつ確実に実施し、さらに、再生エラーが発生した場合でも、容易に復帰することを目的とする。

本発明の請求項１記載の画像信号再生方法は、１または複数種類の分割符号化データをそれぞれ１または複数多重化して生成された多重符号化ストリームを読み込んで画像を再生する画像信号再生方法であって、前記多重符号化ストリームから前記分割符号化データの種類毎にパケット符号化データを抽出して複数の符号化データから成る前記種類毎の符号化データ群を生成する工程と、前記各分割符号化データの再生制御情報から任意の固定パターンを検出して前記符号化データ群の前記各符号化データの直前に先頭判定情報として付加する工程と、前記符号化データ群を読み込んで再生する際に、前記先頭判定情報を検出することにより次に再生する前記各符号化データのポインタを認識して画像を再生する工程とを有することを特徴とする。

請求項２記載の画像信号再生方法は、１または複数種類の分割符号化データをそれぞれ１または複数多重化して生成された多重符号化ストリームを読み込んで画像を再生する画像信号再生方法であって、前記多重符号化ストリームから前記分割符号化データの種類毎にパケット符号化データを抽出して複数の符号化データから成る前記種類毎の符号化データ群を生成する工程と、前記各分割符号化データの再生制御情報から任意の固定パターンを検出して前記符号化データ群の前記各符号化データの直前に先頭判定情報として付加する工程と、前記符号化データ群を読み込んで再生する際に、前記先頭判定情報を検出することにより次に再生する前記各符号化データのポインタを認識して画像を再生する工程とを有し、前記再生に際して、前の前記符号化データに含まれる符号化データ長の情報から次の前記符号化データのポインタを決定し、前記ポインタに前記先頭判定情報が検出された場合にはそのまま前記次の符号化データを再生し、前記ポインタに前記先頭判定情報が検出されない場合には前記前の符号化データに戻って前記次の符号化データの前記先頭判定情報を検出して再生することを特徴とする。

請求項３記載の画像信号再生方法は、請求項１または請求項２のいずれかに記載の画像信号再生方法において、前記固定パターンが同期再生情報を含むことを特徴とする。
請求項４記載の画像信号再生方法は、請求項１または請求項２のいずれかに記載の画像信号再生方法において、前記固定パターンが分割符号化データスタートコード前置コードを含むことを特徴とする。

請求項５記載の画像信号再生方法は、請求項１または請求項２のいずれかに記載の画像信号再生方法において、前記固定パターンが前記固定パターンを含む前記再生制御情報の全部または一部であることを特徴とする。

請求項６記載の画像信号再生方法は、請求項１または請求項２または請求項３または請求項４または請求項５のいずれかに記載の画像信号再生方法において、前記分割符号化データの種類として、少なくとも副映像の前記分割符号化データを含むことを特徴とする。

請求項７記載の画像信号再生装置は、１または複数種類の分割符号化データをそれぞれ１または複数多重化して生成された多重符号化ストリームを読み込んで画像を再生する画像信号再生装置であって、前記多重符号化ストリームを入力して前記分割符号化データの種類毎にパケット符号化データを抽出して複数の符号化データから成る前記種類毎の符号化データ群を生成すると共に前記各分割符号化データの再生制御情報から任意の固定パターンを検出して前記符号化データ群の前記各符号化データの先頭に直前判定情報として付加する入力処理手段と、前記各符号化データ群を前記種類毎の前記符号化データに分離して保持する前記種類毎のバッファと、前記バッファに保持された前記符号化データ群の前記各符号化データの先頭判定情報を検出して前記各符号化データのポインタを決定する前記種類毎の先頭位置決定手段と、直前の前記符号化データに含まれる符号化データ長の情報から算出したポインタまたは前記先頭判定情報を読み取ることにより検出する前記ポインタから前記符号化データを読み出して前記各符号化データを復号する前記種類毎の復号手段と、前記複合した各データの一部または全部を合成して再生する再生手段とを有することを特徴とする。

請求項８記載の画像信号再生装置は、請求項７記載の画像信号再生装置において、前記固定パターンが同期再生情報を含むことを特徴とする。
請求項９記載の画像信号再生装置は、請求項７記載の画像信号再生装置において、前記固定パターンが分割符号化データスタートコード前置コードを含むことを特徴とする。

請求項１０記載の画像信号再生装置は、請求項７記載の画像信号再生装置において、前記固定パターンが前記固定パターンを含む前記再生制御情報の全部または一部であることを特徴とする。

請求項１１記載の画像信号再生装置は、請求項７または請求項８または請求項９または請求項１０のいずれかに記載の画像信号再生装置において、前記分割符号化データの種類として、少なくとも副映像の前記分割符号化データを含むことを特徴とする。

以上により、符号化データのポインタ制御を容易かつ確実に実施し、さらに、再生エラーが発生した場合でも、容易に復帰することができる。

以上のように、各符号化データの直前に先頭判定情報として任意の固定ビットパターンを付加することにより、符号化データ長により検出したポインタが次の符号化データの先頭とは異なる場合に、先頭判定情報を検出しないことからポインタが正しくないことを検出し、その場合、前の符号化データのポインタから次の先頭判定情報を検出することにより、次の符号化データのポインタを決定することができるため、符号化データのポインタ制御を容易かつ確実に実施し、さらに、再生エラーが発生した場合でも、容易に復帰することができる。

図１、図２、図３、図４、図５を用いて、本発明の実施の形態について説明する。
図１は本発明における符号化データの構成を示す図、図２は本発明の画像信号再生装置の構成を示す図、図３は本発明における先頭判定情報の付加工程を示すフローチャート、図４は本発明における先頭判定工程を示すフローチャート、図５は本発明における符号化データの構成を詳細に示す図である。

図２において、多重符号化ストリームを入力して分離する入力処理手段２１、入力処理手段２１で分離された符号化データをそれぞれ符号化データの種類ごとに保持する映像バッファ２２、音声バッファ２３、副映像バッファ２４、さらに、映像バッファ２２内の映像符号化データを複号する映像復号手段２５、音声バッファ２３内の音声符号化データを復号する音声復号手段２６、副映像バッファ２４内の副映像符号化データを復号する副映像復号手段２７、副映像バッファ２４内の副映像符号化データの先頭位置を決定する先頭位置決定手段２８で構成される。映像復号手段２５、副映像復号手段２７で復号された信号は再生手段２９で合成されて再生される。入力される映像信号、副映像信号、音声信号はそれぞれ同期再生情報を持っており、出力時にそれぞれを同期させて再生する機能を持つ。

図１に示す本発明の副映像バッファ入力データの構造において、符号化データ群１は多重化前の副映像符号化データを示し、第１符号化データ２、第２符号化データ３、第Ｎ符号化データ４で構成される。第１符号化データ１は先頭に符号化データ長１１を持ち、多重化時にＭＰＥＧ２の分割符号化データ長で制限されるデータサイズに分割される。分割されたデータは第１再生制御情報８がヘッダ情報として付加されるデータ構造を持ち、第１再生制御情報８は必ず同期再生情報１０を持つ。入力処理手段２２にて副映像の符号化データ群１が副映像バッファ２４に入力される際、同期再生情報１０を持つ再生制御情報１０が入力された場合に先頭判定情報１２をそれぞれの副映像符号化データの直前に付加する。

図５は図１のデータ構造のより詳細な例について示したものである。図５において、分割符号化データスタートコード７０１Ａは分割符号化データのヘッダ情報である再生制御情報の先頭に含まれるものであり、固定のビットパターンを持つ。同期再生情報７０１Ｂは再生制御情報に含まれる再生情報の一部であり、固定のビットパターンを持つ。同期再生情報７０１Ｂは、図１に示す同期再生情報１０と同様のものであり、図１に示す分割符号化データのうち、分割前の符号化データの先頭データを持つ第１分割符号化データ５にしか含まれない。したがって、同期再生情報１０が存在する分割符号化データは符号化データの先頭である。図５に示す副映像バッファには、同期再生情報７０１Ｂが存在する場合、すなわち符号化データ７０１の先頭データを含むパケット符号化データ７０１Ｃを入力する場合のみ分割符号化データスタートコード７０１Ａ、同期再生情報７０１Ｂが入力処理手段２１により符号化データの前に先頭判定情報１２として付加する。パケット符号化データ７０１Ｄ、７０１Ｅを含む分割符号化データは同期再生情報を持たず、先頭判定情報は付加しない。入力処理手段２１によりパケット符号化データ７０１Ｃ、７０１Ｄ、７０１Ｅが副映像バッファ内で結合され、符号化データ７０１が構成される。符号化データ７０１の直前には符号化データ７０１のデータ長を示す符号化データ長７０１Ｆが含まれる。以降の符号化データにおける分割符号化データスタートコード７０２Ａおよび同期再生情報７０２Ｂの固定ビットパターンは符号化データ７０１の復号時に、符号化データ長７０１Ｆの値が正しいかのどうかの判定に用いられる。符号化データ長７０１Ｆとの値が正しい場合は、次の符号化データ７０２のポインタとして先頭アドレスを算出でき、分割符号化データスタートコード７０２Ａおよび同期再生情報７０２Ｂの固定ビットパターンが検知できる。分割符号化データスタートコード７０２Ａおよび同期再生情報７０２Ｂの固定ビットパターンが検知できない場合は、符号化データ長７０１Ｆの値が誤っていると判定できる。

本発明によれば、図１に示すように多重符号化ストリーム入力順に従って任意の固定パターンを備える先頭判定情報を入力することで、入力処理の書き込みポインタ制御を複雑にすることなく、ユニットヘッダのエラーに関わらず次の符号化データに含まれるユニットヘッダの検出が可能となる。さらに、再生制御情報にある再生制御情報または再生制御情報の一部を先頭判定情報として符号化データの直前に付加することで、入力処理部の分割符号化データ検出と同じ検出パターンで次の符号化データに含まれるユニットヘッダの検出が可能となる。また、多重符号化ストリームにすでに存在する固定パターンを再利用することで、パターン生成の処理を省くことができ、入力処理が単純化できる。さらに、再生制御情報に含まれる同期再生情報が固定パターンを含む場合、同期再生情報の固定データを先頭判定情報として付加することで、符号化データの同期再生情報の管理とエラー復帰用の固定パターン付加を単純な入力処理で一度に行うことができる。従って、入力処理を単純化しつつ、エラー復帰が可能となり、エラー耐性を高めることができる。

主映像および音声と副映像の同期制御のため、少なくとも同期再生情報７０１Ｂ、７０２Ｂは入力処理手段２１により付加することが必要であるが、先頭判定情報１２としてどのような固定ビットパターンを付加してもかまわない。例えば、先頭判定情報１２として、分割符号化データスタートコード７０１Ａ、７０２Ａおよび同期再生情報７０１Ｂ、７０１Ｂならびに固定ビットパターンを含む再生制御情報の一部または全部を付加することが可能である。

図３、図４、図５を用いて、本発明の実施の形態について詳細に説明する。
図３に示すフローチャートは、図１に示す入力処理手段２１の処理内容のうち、本発明の副映像に関する入力処理フローを示したものである。まず、入力処理手段は入力された多重符号化ストリームから図５に示す分割符号化データスタートコード７０１Ａに基づき、分割符号化データを検出する（ステップ５０１）。次に、再生制御情報の再生情報内に同期再生情報が存在するか否かに基づき（ステップ５０２）、同期再生情報７０１Ｂが存在すれば、各符号化データの直前に先頭判定情報として分割符号化データスタートコード７０１Ａおよび同期再生情報７０１Ｂを付加し、副映像バッファ２４に入力する（ステップ５０３）。次に、検出した分割符号化データの副映像パケット符号化データ７０１Ｃを副映像バッファ２４に入力する（ステップ５０４）。ステップ５０２で同期再生情報が存在しなければ、パケットスタートコード７０１Ａを副映像バッファ２４に入力せずに、図１に示す副映像符号化データ７０１Ｄ、７０１Ｅの様に副映像符号化データのみの入力とする。ここでは、先頭判定情報として分割符号化データスタートコード７０１Ａおよび同期再生情報７０１Ｂを用いる場合を例として説明した。

次に図４に示すフローチャートは、符号化データの復号時に、図１に示す先頭位置決定手段２８において、再生する副映像符号化データの先頭ポインタを検索する処理のフローを示したものである。前に読み込んだ符号化データの符号化データ長より、次に読み込む符号化データのポインタを検出した場合、まず、先頭位置決定手段２８は副映像バッファ２４に入力された副映像符号化データより、先頭判定情報として分割符号化データスタートコード７０２Ａおよび同期信号情報７０２Ｂの固定パターンを検出する（ステップ６０１）。ステップ６０１によりパケットスタートコード７０２Ａおよび同期信号情報７０２Ｂの固定パターンが検出できない場合は、前に読み込んだ符号化データの符号化データ長の値が誤っていると判定し、前の符号化データのポインタにリードポインタを移動し（ステップ６０２）、再度分割符号化データスタートコード７０２Ａおよび同期信号情報２Ｂの固定パターンを検索する（ステップ６０３）。再度分割符号化データスタートコード７０２Ａおよび同期信号情報７０２Ｂの固定パターンを検出できた場合は、表示制御情報のポインタをクリアし（ステップ６０４）、リードポインタの値が正常と判断して副映像のパケット符号化データ７０２Ｃ、７０２Ｄ、７０２Ｅをデコードする（ステップ６０５）。次に、ステップ６０５の表示制御情報のデコードが正常であるかどうかを判定し（ステップ６０６）、正常であれば表示制御情報のポインタを更新する（ステップ６０７）。次に、符号化データ長に基づき、副映像バッファのリードポインタを更新する（ステップ６０８）。前述のように、副映像符号化データの先頭位置には分割符号化データスタートコード７０１Ａおよび７０２Ａを付加せず、同期信号情報の固定パターン７０１Ｂおよび７０２Ｂのみを付加し、先頭位置を検出することとしてもよい。また、分割符号化データスタートコードを分割符号化データ識別子まで拡張して付加して先頭位置を検出することとしてもよい。

以上の実施の形態についての説明では、符号化データとして副映像の符号化データの先頭位置を検出する場合を例に説明したが、その他の符号化データについても、同様に固定パターンを各符号化データの直前に付加することにより、同様に符号化データのポインタ制御を容易かつ確実に実施し、さらに、再生エラーが発生した場合でも、容易に復帰することができる。また、多重符号化ストリームが、映像パック，副映像パック，音声パック，ナビパックにより構成される例を用いて説明したが、その他のデータをパック化して多重化してもかまわない。その場合に再生手段では、任意の信号を合成して再生する。

本発明は、符号化データのポインタ制御を容易かつ確実に実施し、さらに、再生エラーが発生した場合でも、容易に復帰することができ、ＭＰＥＧ等の符号化技術により音声、映像、副映像および付加情報がディジタル符号化され、パック、分割符号化データ単位で多重化された多重符号化ストリームを再生する画像信号再生方法および画像信号再生装置等に有用である。

本発明における符号化データの構成を示す図 本発明の画像信号再生装置の構成を示す図 本発明における先頭判定情報の付加工程を示すフローチャート 本発明における先頭判定工程を示すフローチャート 本発明における符号化データの構成を詳細に示す図 （ａ）パック単位に分割された分割符号化データの構造を説明する図（ｂ）多重符号化ストリームと多重符号化ストリームから生成した副映像の符号化データ群を例示する図 従来の画像信号再生におけるポインタ決定方法を説明する図

符号の説明

１ 符号化データ群
２ 第１符号化データ
３ 第２符号化データ
４ 第Ｎ符号化データ
５ 第１分割符号化データ
８ 第１再生制御情報
１０ 同期再生情報
１１ データ長
１２ 先頭判定情報
２１ 入力処理手段
２２ 映像バッファ
２３ 音声バッファ
２４ 副映像バッファ
２５ 映像復号手段
２６ 音声復号手段
２７ 副映像復号手段
２８ 先頭位置決定手段
２９ 再生手段
１０１ パック
１０２ 分割符号化データ
１０３ 分割符号化データスタートコード
１０４ 分割符号化データ識別子
１０５ 分割符号化データ長
１０６ 同期再生情報
１０７Ａ パックヘッダ
１０７Ｂ 再生制御情報
１０７Ｃ パケット符号化データ
１０８ 多重符号化ストリーム
１０９ 符号化データ群
１１０ 符号化データ
１１０Ａ ユニットヘッダ
１１０Ｂ 符号化ビットマップデータ
１１０Ｃ 表示制御情報
１１１ ダミーデータ
７０１ 符号化データ
７０１Ａ 分割符号化データスタートコード
７０１Ｂ 同期再生情報
７０１Ｃ パケット符号化データ
７０１Ｄ パケット符号化データ
７０１Ｅ パケット符号化データ
７０１Ｆ 符号化長データ
７０２ 符号化データ
７０２Ａ 分割符号化データスタートコード
７０２Ｂ 同期再生情報
７０２Ｃ パケット符号化データ
７０２Ｄ パケット符号化データ
７０２Ｅ パケット符号化データ

Claims (11)

1. １または複数種類の分割符号化データをそれぞれ１または複数多重化して生成された多重符号化ストリームを読み込んで画像を再生する画像信号再生方法であって、
   前記多重符号化ストリームから前記分割符号化データの種類毎にパケット符号化データを抽出して複数の符号化データから成る前記種類毎の符号化データ群を生成する工程と、
   前記各分割符号化データの再生制御情報から任意の固定パターンを検出して前記符号化データ群の前記各符号化データの直前に先頭判定情報として付加する工程と、
   前記符号化データ群を読み込んで再生する際に、前記先頭判定情報を検出することにより次に再生する前記各符号化データのポインタを認識して画像を再生する工程と
   を有することを特徴とする画像信号再生方法。
2. １または複数種類の分割符号化データをそれぞれ１または複数多重化して生成された多重符号化ストリームを読み込んで画像を再生する画像信号再生方法であって、
   前記多重符号化ストリームから前記分割符号化データの種類毎にパケット符号化データを抽出して複数の符号化データから成る前記種類毎の符号化データ群を生成する工程と、
   前記各分割符号化データの再生制御情報から任意の固定パターンを検出して前記符号化データ群の前記各符号化データの直前に先頭判定情報として付加する工程と、
   前記符号化データ群を読み込んで再生する際に、前記先頭判定情報を検出することにより次に再生する前記各符号化データのポインタを認識して画像を再生する工程と
   を有し、前記再生に際して、前の前記符号化データに含まれる符号化データ長の情報から次の前記符号化データのポインタを決定し、前記ポインタに前記先頭判定情報が検出された場合にはそのまま前記次の符号化データを再生し、前記ポインタに前記先頭判定情報が検出されない場合には前記前の符号化データに戻って前記次の符号化データの前記先頭判定情報を検出して再生することを特徴とする画像信号再生方法。
3. 前記固定パターンが同期再生情報を含むことを特徴とする請求項１または請求項２のいずれかに記載の画像信号再生方法。
4. 前記固定パターンが分割符号化データスタートコード前置コードを含むことを特徴とする請求項１または請求項２のいずれかに記載の画像信号再生方法。
5. 前記固定パターンが前記固定パターンを含む前記再生制御情報の全部または一部であることを特徴とする請求項１または請求項２のいずれかに記載の画像信号再生方法。
6. 前記分割符号化データの種類として、少なくとも副映像の前記分割符号化データを含むことを特徴とする請求項１または請求項２または請求項３または請求項４または請求項５のいずれかに記載の画像信号再生方法。
7. １または複数種類の分割符号化データをそれぞれ１または複数多重化して生成された多重符号化ストリームを読み込んで画像を再生する画像信号再生装置であって、
   前記多重符号化ストリームを入力して前記分割符号化データの種類毎にパケット符号化データを抽出して複数の符号化データから成る前記種類毎の符号化データ群を生成すると共に前記各分割符号化データの再生制御情報から任意の固定パターンを検出して前記符号化データ群の前記各符号化データの先頭に直前判定情報として付加する入力処理手段と、
   前記各符号化データ群を前記種類毎の前記符号化データに分離して保持する前記種類毎のバッファと、
   前記バッファに保持された前記符号化データ群の前記各符号化データの先頭判定情報を検出して前記各符号化データのポインタを決定する前記種類毎の先頭位置決定手段と、
   直前の前記符号化データに含まれる符号化データ長の情報から算出したポインタまたは前記先頭判定情報を読み取ることにより検出する前記ポインタから前記符号化データを読み出して前記各符号化データを復号する前記種類毎の復号手段と、
   前記複合した各データの一部または全部を合成して再生する再生手段と
   を有することを特徴とする画像信号再生装置。
8. 前記固定パターンが同期再生情報を含むことを特徴とする請求項７記載の画像信号再生装置。
9. 前記固定パターンが分割符号化データスタートコード前置コードを含むことを特徴とする請求項７記載の画像信号再生装置。
10. 前記固定パターンが前記固定パターンを含む前記再生制御情報の全部または一部であることを特徴とする請求項７記載の画像信号再生装置。
11. 前記分割符号化データの種類として、少なくとも副映像の前記分割符号化データを含むことを特徴とする請求項７または請求項８または請求項９または請求項１０のいずれかに記載の画像信号再生装置。

Images