JP2004165856A

JP2004165856A - Information processing apparatus and method, recording medium, and program

Info

Publication number: JP2004165856A
Application number: JP2002327449A
Authority: JP
Inventors: Motoki Kato; 元樹加藤
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2002-11-11
Filing date: 2002-11-11
Publication date: 2004-06-10
Anticipated expiration: 2022-11-11
Also published as: JP4114137B2

Abstract

<P>PROBLEM TO BE SOLVED: To relax restrictions in the case of video-encoding multi-angle data. <P>SOLUTION: A Clip 1 as video data of each angle configuring the multi-angle is divided into A1, A2, A3 at switching points. A Clip 2 is divided into B1, B2, B3 at switching points, and a Clip 3 is divided into C1, C2, C3 at switching points. Bridge-Clip is generated with the data in the vicinity of the switching points. The switching is performed in the order of A1, Bridge-Clip_A1toB2, B2, Bridge-Clip_B2toC3, and C3. The information processing apparatus or the like is applicable to DVD recording and reproducing apparatuses. <P>COPYRIGHT: (C)2004,JPO

Description

【０００１】
【発明の属する技術分野】
本発明は情報処理装置および方法、記録媒体、並びにプログラムに関し、特に、記録媒体に記録された再生パスのアドレス情報を迅速に再生することができるようにした情報処理装置および方法、記録媒体、並びにプログラムに関する。
【０００２】
【従来の技術】
記録媒体に記録された映像データや音声データなどの複数のデータをもつ動画像を再生するとき、別々に記録された動画像の連続性を保つように再生する方法として、以下のような方法が知られている（例えば、特許文献１参照）。
【０００３】
その方法とは、別々に記録されたＣｌｉｐ１とＣｌｉｐ２を連続再生するとき、Ｃｌｉｐ１からＣｌｉｐ２への橋渡しの役割をもつＢｒｉｄｇｅ−Ｃｌｉｐが生成され、そのＢｒｉｄｇｅ−ＣｌｉｐがＣｌｉｐ１からＣｌｉｐ２への切り替わる部分の、Ｃｌｉｐ１とＣｌｉｐ２との、それぞれ対応する部分から構成されるようにすることにより、別々に記録されたＣｌｉｐ１とＣｌｉｐ２を連続再生することができるようにする方法である。
【０００４】
上述した映像データや音声データなどから構成される複数のデータをもつ動画像が記録されている記録媒体として、特に、ＤＶＤ（ＤｉｇｉｔａｌＶｅｒｓａｔｉｌｅＤｉｓｃ）ビデオがあり、ＤＶＤ（ＤｉｇｉｔａｌＶｅｒｓａｔｉｌｅＤｉｓｃ）ビデオのフォーマットには、マルチアングル再生が規定されている。マルチアングル再生が可能な所定の再生区間において、ユーザは、自分の嗜好に合うアングルを選択することができ、その際、記録再生装置によりアングル間の切り替えをシームレスに再生することができる。
【０００５】
図１は、ＤＶＤビデオのマルチアングルのフォーマットを説明する図である。
【０００６】
マルチアングルの再生区間は、複数の一再生区間により構成されており、その一再生区間はセル（Ｃｅｌｌ）と呼ばれる。図１の例では、マルチアングルの再生区間が、アングル１（Ａｎｇｌｅ＃１）乃至アングル３（Ａｎｇｌｅ＃３）の３つのアングルのＣｅｌｌ＃ｉ＋１乃至Ｃｅｌｌ＃ｉ＋３により構成されている。ここで、Ｃｅｌｌに対応する実態のＡＶストリームデータはＶＯＢ（ＶｉｄｅｏＯｂｊｅｃｔ）と呼ばれる。マルチアングルを構成するそれぞれのＣｅｌｌに対応するＶＯＢは、図示せぬＩＬＶＵ（ＩｎｔｅｒｌｅａｖｅｄＵｎｉｔ）と呼ばれる単位に分けられており、マルチアングルを構成するこれら複数のＶＯＢは、ＩＬＶＵ単位に多重化される。なお、各ＩＬＶＵは、ｃｌｏｓｅｄＧＯＰ（ＧｒｏｕｐＯｆＰｉｃｔｕｒｅｓ）から開始する。
【０００７】
ＤＶＤビデオのマルチアングルにおけるシームレスアングル変更の再生について説明する。例えば、ユーザが、アングル２、アングル１、アングル３と再生経路を切り替える時、記録再生装置は、ディスク上をジャンプしながら、ＩＬＶＵ１，ＩＬＶＵ２，ＩＬＶＵ３（いずれも図示せず）のデータを順次読み出して、それらを再生する。なお、各ＩＬＶＵは、ＤＳＩ（ＤａｔａＳｅａｒｃｈＩｎｆｏｒｍａｔｉｏｎ）から開始し、ＤＳＩは次の各アングルのＩＬＶＵへのジャンプ先のアドレスを持つ。
【０００８】
【特許文献１】
特開２００２−１５８９７４号
【０００９】
【発明が解決しようとする課題】
しかしながら、ＩＬＶＵのビデオエンコードの際には、例えば、ＣｌｏｓｅｄＧＯＰにより符号化しなければならないという条件の制約があるために、ビデオの符号化効率が低く、マルチアングルを作成することは困難であるという課題があった。また、ＩＬＶＵは、複数のＧＯＰから構成しなければならず、アングル切り替えのポイントをフレーム精度に基づいて決定できないという課題があった。
【００１０】
本発明は、このような状況に鑑みてなされたものであり、マルチアングルのビデオエンコード条件の制約を小さくすることができるようにすることを目的としている。
【００１１】
【課題を解決するための手段】
本発明の第１の情報処理装置は、再生パス切り替え点の直前の切り替え元の再生パスの一部のビデオストリームと再生パス切り替え点の直後の切り替え先の再生パスの一部のビデオストリームから、切り替え元の再生パスと切り替え先の再生パスが連続して再生可能とされる切り替えビデオストリームを生成する第１の生成手段と、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える時における第１のビデオストリームのデータアドレス情報と、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える時における第２のビデオストリームのデータアドレス情報を生成する第２の生成手段と、ビデオストリームの、再生パス切り替え点で区分される各区間を単位とする各再生パス毎に再生管理情報を生成する第３の生成手段と、切り替えビデオストリームを記録媒体に記録するとともに、再生管理情報を記録媒体に記録する記録手段とを備えることを特徴とする。
【００１２】
本発明の第１の情報処理方法は、再生パス切り替え点の直前の切り替え元の再生パスの一部のビデオストリームと再生パス切り替え点の直後の切り替え先の再生パスの一部のビデオストリームから、切り替え元の再生パスの一部のビデオストリームと切り替え先の再生パスの一部のビデオストリームが連続して再生可能とされる切り替えビデオストリームを生成する第１の生成ステップと、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える時における第１のビデオストリームのデータアドレス情報と、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える時における第２のビデオストリームのデータアドレス情報を生成する第２の生成ステップと、ビデオストリームの、再生パス切り替え点で区分される各区間を単位とする各再生パス毎に再生管理情報を生成する第３の生成ステップと、切り替えビデオストリームを記録媒体に記録するとともに、再生管理情報を記録媒体に記録する記録ステップとを含むことを特徴とする。
【００１３】
本発明の第１の記録媒体のプログラムは、再生パス切り替え点の直前の切り替え元の再生パスの一部のビデオストリームと再生パス切り替え点の直後の切り替え先の再生パスの一部のビデオストリームから、切り替え元の再生パスの一部のビデオストリームと切り替え先の再生パスの一部のビデオストリームが連続して再生可能とされる切り替えビデオストリームを生成する第１の生成ステップと、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える時における第１のビデオストリームのデータアドレス情報と、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える時における第２のビデオストリームのデータアドレス情報を生成する第２の生成ステップと、ビデオストリームの、再生パス切り替え点で区分される各区間を単位とする各再生パス毎に再生管理情報を生成する第３の生成ステップと、切り替えビデオストリームを記録媒体に記録するとともに、再生管理情報を記録媒体に記録する記録ステップとを含むことを特徴とする。
【００１４】
本発明の第１のプログラムは、再生パス切り替え点の直前の切り替え元の再生パスの一部のビデオストリームと再生パス切り替え点の直後の切り替え先の再生パスの一部のビデオストリームから、切り替え元の再生パスの一部のビデオストリームと切り替え先の再生パスの一部のビデオストリームが連続して再生可能とされる切り替えビデオストリームを生成する第１の生成ステップと、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える時における第１のビデオストリームのデータアドレス情報と、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える時における第２のビデオストリームのデータアドレス情報を生成する第２の生成ステップと、ビデオストリームの、再生パス切り替え点で区分される各区間を単位とする各再生パス毎に再生管理情報を生成する第３の生成ステップと、切り替えビデオストリームを記録媒体に記録するとともに、再生管理情報を記録媒体に記録する記録ステップとをコンピュータに実行させることを特徴とする。
【００１５】
本発明の第２の情報処理装置は、ビデオストリームの、再生パスの切り替え点で区分される各区間を単位とする各再生パス毎に与えられた再生管理情報を読み出すとともに、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える時における第１のビデオストリームのデータアドレス情報と、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える時における第２のビデオストリームのデータアドレス情報を読み出す読み出し手段と、読み出し手段により読み出された再生管理情報に基づいて、記録媒体に記録されているビデオストリームを再生する再生手段と、再生パスの切り替えが指示された場合、切り替え元の再生パスの現在の再生時間に最も近い未来にある切り替え先の再生パスの切り替え点を検索する検索手段と、第１のビデオストリームのデータアドレス情報に基づいて、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える第１の切り替え手段と、第２のビデオストリームのデータアドレス情報に基づいて、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える第２の切り替え手段とを備えることを特徴とする。
【００１６】
本発明の第２の情報処理方法は、ビデオストリームの、再生パスの切り替え点で区分される各区間を単位とする各再生パス毎に与えられた再生管理情報を読み出すとともに、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える時における第１のビデオストリームのデータアドレス情報と、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える時における第２のビデオストリームのデータアドレス情報を読み出す読み出しステップと、読み出しステップにより読み出された再生管理情報に基づいて、記録媒体に記録されているビデオストリームを再生する再生ステップと、再生パスの切り替えが指示された場合、切り替え元の再生パスの現在の再生時間に最も近い未来にある切り替え先の再生パスの切り替え点を検索する検索ステップと、第１のビデオストリームのデータアドレス情報に基づいて、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える第１の切り替えステップと、第２のビデオストリームのデータアドレス情報に基づいて、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える第２の切り替えステップとを含むことを特徴とする。
【００１７】
本発明の第２の記録媒体のプログラムは、ビデオストリームの、再生パスの切り替え点で区分される各区間を単位とする各再生パス毎に与えられた再生管理情報を読み出すとともに、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える時における第１のビデオストリームのデータアドレス情報と、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える時における第２のビデオストリームのデータアドレス情報を読み出す読み出しステップと、読み出しステップにより読み出された再生管理情報に基づいて、記録媒体に記録されているビデオストリームを再生する再生ステップと、再生パスの切り替えが指示された場合、切り替え元の再生パスの現在の再生時間に最も近い未来にある切り替え先の再生パスの切り替え点を検索する検索ステップと、第１のビデオストリームのデータアドレス情報に基づいて、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える第１の切り替えステップと、第２のビデオストリームのデータアドレス情報に基づいて、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える第２の切り替えステップとを含むことを特徴とする。
【００１８】
本発明の第２のプログラムは、ビデオストリームの、再生パスの切り替え点で区分される各区間を単位とする各再生パス毎に与えられた再生管理情報を読み出すとともに、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える時における第１のビデオストリームのデータアドレス情報と、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える時における第２のビデオストリームのデータアドレス情報を読み出す読み出しステップと、読み出しステップにより読み出された再生管理情報に基づいて、記録媒体に記録されているビデオストリームを再生する再生ステップと、再生パスの切り替えが指示された場合、切り替え元の再生パスの現在の再生時間に最も近い未来にある切り替え先の再生パスの切り替え点を検索する検索ステップと、第１のビデオストリームのデータアドレス情報に基づいて、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える第１の切り替えステップと、第２のビデオストリームのデータアドレス情報に基づいて、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える第２の切り替えステップとをコンピュータに実行させることを特徴とする。
【００１９】
本発明の第１の情報処理装置および方法、記録媒体並びにプログラムにおいては、再生パス切り替え点の直前の切り替え元の再生パスの一部のビデオストリームと再生パス切り替え点の直後の切り替え先の再生パスの一部のビデオストリームが連続する切り替えビデオストリームが生成され、切り替え元の再生パスの第１のビデオストリームから切り替えビデオストリームの先頭に読み出し点を切り替える時における第１のビデオストリームのデータアドレス情報と、切り替えビデオストリームの最後から切り替え先の再生パスの第２のビデオストリームにデータ読み出し点を切り替える時における第２のビデオストリームのデータアドレス情報を含む実体管理情報が生成され、ビデオストリームの、切り替え点で区分される各区間を単位とする各再生パス毎に再生管理情報が生成され、ビデオストリームとともに記録媒体に記録される。
【００２０】
本発明の第２の情報処理装置および方法、記録媒体並びにプログラムにおいては、ビデオストリームの、各再生パス毎に与えられた再生管理情報が読み出されるとともに、第１のビデオストリームのデータアドレス情報と、第２のビデオストリームのデータアドレス情報が読み出され、再生パスの切り替えが指示された場合、第１のビデオストリームのデータアドレス情報に基づいて、切り替え元の再生パスのビデオストリームから切り替えビデオストリームに読み出し点が切り替えられ、第２のビデオストリームのデータアドレス情報に基づいて、切り替え先の再生パスのビデオストリームに読み出し点が切り替えられる。
【００２１】
【発明の実施の形態】
以下に、図面を参照しながら本発明の実施の形態について述べる。
【００２２】
図２は、本発明を適用した記録再生装置１の内部構成を示す。
【００２３】
最初に外部から入力された信号を記録媒体に記録する動作を行う記録部２の構成について説明する。記録再生装置１は、アナログデータ、または、デジタルデータを入力し、記録することができる構成とされている。
【００２４】
端子１１には、アナログのビデオ信号が、端子１２には、アナログのオーディオ信号が、それぞれ入力される。端子１１に入力されたビデオ信号は、解析部１４とＡＶエンコーダ１５に、それぞれ出力される。端子１２に入力されたオーディオ信号は、解析部１４とＡＶエンコーダ１５に出力される。解析部１４は、入力されたビデオ信号とオーディオ信号からシーンチェンジなどの特徴点を抽出する。
【００２５】
ＡＶエンコーダ１５は、入力されたビデオ信号とオーディオ信号を、それぞれ符号化し、符号化ビデオストリーム（Ｖ）、符号化オーディオストリーム（Ａ）、およびＡＶ同期等のシステム情報（Ｓ）をマルチプレクサ１６に出力する。
【００２６】
符号化ビデオストリームは、例えば、ＭＰＥＧ（ＭｏｖｉｎｇＰｉｃｔｕｒｅＥｘｐｅｒｔＧｒｏｕｐ）２方式により符号化されたビデオストリームであり、符号化オーディオストリームは、例えば、ＭＰＥＧ１方式により符号化されたオーディオストリームや、ドルビーＡＣ３方式（商標）により符号化されたオーディオストリーム等である。マルチプレクサ１６は、入力されたビデオおよびオーディオのストリームを、入力システム情報に基づいて多重化して、スイッチ１７を介して多重化ストリーム解析部１８とソースパケッタイザ１９に出力する。
【００２７】
多重化ストリームは、例えば、ＭＰＥＧ２トランスポートストリームやＭＰＥＧ２プログラムストリームである。ソースパケッタイザ１９は、入力された多重化ストリームを、そのストリームを記録させる記録媒体１００のアプリケーションフォーマットに従って、ソースパケットから構成されるＡＶストリームに符号化する。ＡＶストリームは、ＥＣＣ（誤り訂正）符号化部２０と変調部２１でＥＣＣ符号の付加と変調処理が施され、書き込み部２２に出力される。書き込み部２２は、制御部２３から出力される制御信号に基づいて、例えば、ＤＶＤよりなる記録媒体（ディスク）１００にＡＶストリームファイルを書き込む（記録する）。
【００２８】
デジタルインタフェースまたはデジタルテレビジョンチューナ（いずれも図示せず）から入力されるデジタルテレビジョン放送等のトランスポートストリームは、端子１３に入力される。端子１３に入力されたトランスポートストリームの記録方式には、２通りあり、それらは、トランスペアレントに記録する方式と、記録ビットレートを下げるなどの目的のために再エンコードをした後に記録する方式である。記録方式の指示情報は、ユーザインタフェースとしての端子２４から制御部２３へ入力される。
【００２９】
入力トランスポートストリームをトランスペアレントに記録する場合、端子１３に入力されたトランスポートストリームは、スイッチ１７を介して多重化ストリーム解析部１８と、ソースパケッタイザ１９に出力される。これ以降の記録媒体１００へＡＶストリームが記録されるまでの処理は、上述のアナログの入力オーディオ信号とビデオ信号を符号化して記録する場合と同一の処理なので、その説明は省略する。
【００３０】
入力トランスポートストリームを再エンコードした後に記録する場合、端子１３に入力されたトランスポートストリームは、スイッチ２５からデマルチプレクサ２６に入力さる。デマルチプレクサ２６は、入力されたトランスポートストリームに対してデマルチプレクス処理を施し、ビデオストリーム（Ｖ）、オーディオストリーム（Ａ）、およびシステム情報（Ｓ）を抽出する。
【００３１】
デマルチプレクサ２６により抽出されたストリーム（情報）のうち、ビデオストリームはＡＶデコーダ２７に、オーディオストリームとシステム情報はマルチプレクサ１６に、それぞれ出力される。ＡＶデコーダ２７は、入力されたビデオストリームを復号し、その再生ビデオ信号をＡＶエンコーダ１５に出力する。ＡＶエンコーダ１５は、入力ビデオ信号を符号化し、符号化ビデオストリーム（Ｖ）をマルチプレクサ１６に出力する。
【００３２】
一方、デマルチプレクサ２６から出力され、マルチプレクサ１６に入力されたオーディオストリームとシステム情報、および、ＡＶエンコーダ１５から出力されたビデオストリームは、入力システム情報に基づいて、多重化されて、多重化ストリームとして多重化ストリーム解析部１８とソースパケットタイザ１９にスイッチ１７を介して出力される。これ以後の記録媒体１００へＡＶストリームが記録されるまでの処理は、上述のアナログの入力オーディオ信号とビデオ信号を符号化して記録する場合と同一の処理なので、その説明は省略する。
【００３３】
本実施の形態の記録再生装置１は、ＡＶストリームのファイルを記録媒体１００に記録すると共に、そのファイルを説明するアプリケーションデータベース情報も記録する。アプリケーションデータベース情報は、制御部２３により作成される。制御部２３への入力情報は、解析部１４からの動画像の特徴情報、多重化ストリーム解析部１８からのＡＶストリームの特徴情報、および端子２４から入力されるユーザからの指示情報である。
【００３４】
解析部１４から供給される動画像の特徴情報は、ＡＶエンコーダ１５がビデオ信号を符号化する場合において、解析部１４により生成されるものである。解析部１４は、入力ビデオ信号とオーディオ信号の内容を解析し、入力動画像信号の中の特徴的な画像（クリップマーク）に関係する情報を生成する。これは、例えば、入力ビデオ信号の中のプログラムの開始点、シーンチェンジ点やＣＭコマーシャルのスタート点・エンド点、タイトルやテロップなどの特徴的なクリップマーク点の画像の指示情報であり、また、それにはその画像のサムネールも含まれる。さらにオーディオ信号のステレオとモノラルの切り換え点や、無音区間などの情報も含まれる。
【００３５】
これらの画像の指示情報は、制御部２３を介して、マルチプレクサ１６へ入力される。マルチプレクサ１６は、制御部２３からクリップマークとして指定される符号化ピクチャを多重化する時に、その符号化ピクチャをＡＶストリーム上で特定するための情報を制御部２３に返す。具体的には、この情報は、ピクチャのＰＴＳ（プレゼンテーションタイムスタンプ）またはその符号化ピクチャのＡＶストリーム上でのアドレス情報である。制御部２３は、特徴的な画像の種類とその符号化ピクチャをＡＶストリーム上で特定するための情報を関連付けて記憶する。
【００３６】
多重化ストリーム解析部１８からのＡＶストリームの特徴情報は、記録されるＡＶストリームの符号化情報に関係する情報であり、解析部１８により生成される。例えば、ＡＶストリーム内のＩピクチャのタイムスタンプとアドレス情報、システムタイムクロックの不連続点情報、ＡＶストリームの符号化パラメータ、ＡＶストリームの中の符号化パラメータの変化点情報などが含まれる。また、端子１３から入力されるトランスポートストリームをトランスペアレントに記録する場合、多重化ストリーム解析部１８は、入力トランスポートストリームの中から前出のクリップマークの画像を検出し、その種類とクリップマークで指定するピクチャを特定するための情報を生成する。
【００３７】
端子２４からのユーザの指示情報は、ＡＶストリームの中の、ユーザが指定した再生区間の指定情報、その再生区間の内容を説明するキャラクター文字、ユーザが好みのシーンにセットするブックマークやリジューム点の情報などである。
【００３８】
制御部２３は、上記の入力情報に基づいて、ＡＶストリームのデータベース（Ｃｌｉｐ）、ＡＶストリームの再生区間（ＰｌａｙＩｔｅｍ）をグループ化したもの（ＰｌａｙＬｉｓｔ）のデータベース、記録媒体１００の記録内容の管理情報（ｉｎｆｏ．ｄｖｒ）、およびサムネイル画像の情報を作成する。これらの情報から構成されるアプリケーションデータベース情報は、ＡＶストリームと同様にして、ＥＣＣ符号化部２０、変調部２１で処理されて、書き込み部２２へ入力される。書き込み部２２は、制御部２３から出力される制御信号に基づいて、記録媒体１００へデータベースファイルを記録する。
【００３９】
上述したアプリケーションデータベース情報についての詳細は後述する。
【００４０】
このようにして記録媒体１００に記録されたＡＶストリームファイル（画像データと音声データのファイル）と、アプリケーションデータベース情報が再生部３により再生される場合、まず、制御部２３は、読み出し部２８に対して、記録媒体１００からアプリケーションデータベース情報を読み出すように指示する。そして、読み出し部２８は、記録媒体１００からアプリケーションデータベース情報を読み出す。そのアプリケーションデータベース情報は、復調部２９とＥＣＣ復号部３０の復調と誤り訂正処理を経て、制御部２３へ入力される。
【００４１】
制御部２３は、アプリケーションデータベース情報に基づいて、記録媒体１００に記録されているＰｌａｙＬｉｓｔの一覧を端子２４のユーザインタフェースへ出力する。ユーザは、ＰｌａｙＬｉｓｔの一覧から再生したいＰｌａｙＬｉｓｔを選択し、再生を指定されたＰｌａｙＬｉｓｔに関する情報が端子２４から制御部２３へ入力される。制御部２３は、そのＰｌａｙＬｉｓｔの再生に必要なＡＶストリームファイルの読み出しを、読み出し部２８に指示する。読み出し部２８は、その指示に従い、記録媒体１００から対応するＡＶストリームを読み出し復調部２９に出力する。復調部２９に入力されたＡＶストリームは、所定の処理が施されることにより復調され、さらにＥＣＣ復号部３０の処理を経て、ソースデパケッタイザ３１に出力される。
【００４２】
ソースデパケッタイザ３１は、記録媒体１００から読み出され、所定の処理が施されたアプリケーションフォーマットのＡＶストリームを、デマルチプレクサ２６が処理可能なストリームに変換する。デマルチプレクサ２６は、制御部２３により指定されたＡＶストリームの再生区間（ＰｌａｙＩｔｅｍ）を構成するビデオストリーム（Ｖ）、オーディオストリーム（Ａ）、およびＡＶ同期等のシステム情報（Ｓ）を、ＡＶデコーダ２７に出力する。ＡＶデコーダ２７は、ビデオストリームとオーディオストリームを復号し、再生ビデオ信号と再生オーディオ信号を、それぞれ対応する端子３２と端子３３から出力する。
【００４３】
また、ユーザインタフェースとしての端子２４から、ランダムアクセス再生や特殊再生を指示する情報が入力された場合、制御部２３は、ＡＶストリームのデータベース（Ｃｌｉｐ）の内容に基づいて、記憶媒体１００からのＡＶストリームの読み出し位置を決定し、そのＡＶストリームの読み出しを、読み出し部２８に指示する。例えば、ユーザにより選択されたＰｌａｙＬｉｓｔを、所定の時刻から再生する場合、制御部２３は、指定された時刻に最も近いタイムスタンプを持つＩピクチャからのデータを読み出すように読み出し部２８に指示する。
【００４４】
また、アプリケーションデータベース情報を構成するＡＶストリームのデータベースに、ＡＶストリーム（Ｃｌｉｐ）に付属して記録されているＣｌｉｐＩｎｆｏｒｍａｔｉｏｎの中のＣｌｉｐＭａｒｋにストアされている番組の頭出し点やシーンチェンジ点の中から、ユーザがあるクリップマークを選択した時（例えば、この動作は、ＣｌｉｐＭａｒｋにストアされている番組の頭出し点やシーンチェンジ点のサムネール画像リストをユーザインタフェースに表示して、ユーザが、その中からある画像を選択することにより行われる）、制御部２３は、ＣｌｉｐＩｎｆｏｒｍａｔｉｏｎの内容に基づいて、記録媒体１００からのＡＶストリームの読み出し位置を決定し、そのＡＶストリームの読み出しを読み出し部２８へ指示する。すなわち、ユーザが選択した画像がストアされているＡＶストリーム上でのアドレスに最も近いアドレスにあるＩピクチャからのデータを読み出すように読み出し部２８へ指示する。読み出し部２８は、指定されたアドレスからデータを読み出し、読み出されたデータは、復調部２９、ＥＣＣ復号部３０、ソースデパケッタイザ３１の処理を経て、デマルチプレクサ２６へ入力され、ＡＶデコーダ２７で復号されて、マーク点のピクチャのアドレスで示されるＡＶデータが再生される。
【００４５】
また、ユーザによって高速再生（Ｆａｓｔ−ｆｏｒｗａｒｄｐｌａｙｂａｃｋ）が指示された場合、制御部２３は、ＡＶストリームのデータベース（Ｃｌｉｐ）に基づいて、ＡＶストリームの中のＩピクチャデータを順次連続して読み出すように読み出し部２８に指示する。
【００４６】
読み出し部２８は、Ｉピクチャが記録されている位置として指定されたランダムアクセスポイントからＡＶストリームのデータを読み出し、読み出されたデータは、後段の各部の処理を経て再生される。
【００４７】
映像クリエータ（図示せず）が、記録媒体１００に記録されているＡＶ信号をソースとして、マルチアングルのビデオタイトルを作成する場合を説明する。映像クリエータが、記録媒体１００に記録されている複数のＡＶ信号ソースから２つ以上の再生区間を選択して、それぞれの再生区間を１つのアングルとして、２つ以上のアングルを持つマルチアングルを作成したい場合、ユーザインタフェースとしての端子２４からそれぞれの再生区間の開始点と終了点の情報が制御部２３に入力される。
【００４８】
次に、制御部２３は、クリエータの指示に基づくか、または自ら判断して、上記それぞれのアングルの中でアングル切り替えをできる点を決定して、それぞれの再生区間をいくつかの小区間に分割する（例えば、後述する、図３のＡｎｇｌｅ＃１を再生区間ａ１，ａ２，およびａ３に分割する）。
【００４９】
次に、制御部２３は、切り替え元アングルと切り替え先アングルの接続点付近（例えば、図３のＡｎｇｌｅ＃１の再生区間ａ１の終端部の近傍（接続点の近傍）、とＡｎｇｌｅ＃２の再生区間ｂ２の先頭部の近傍（接続点の近傍）の一部のビデオストリームの再エンコードと再多重化を行う。
【００５０】
そのために、”切り替え元のアングルの最後のピクチャ”の情報と、”切り替え先のアングルの最初のピクチャ”の情報が制御部２３へ入力される。制御部２３は、読み出し部２８に”切り替え元のアングルの最後のピクチャ”と”切り替え先のアングルの最初のピクチャ”を再生するために必要なデータの読み出しを指示する。そして、読み出し部２８は、記録媒体１００からデータを読み出し、そのデータは、復調部２９、ＥＣＣ復号部３０、ソースデパケッタイザ３１を経て、デマルチプレクサ２６に出力される。
【００５１】
制御部２３は、デマルチプレクサ２６に入力されたデータを解析して、ビデオストリームの再エンコード方法（ｐｉｃｔｕｒｅ＿ｃｏｄｉｎｇ＿ｔｙｐｅの変更、再エンコードする符号化ビット量の割り当て）と、再多重化方式を決定し、その方式をＡＶエンコーダ１５とマルチプレクサ１６に供給する。
【００５２】
次に、デマルチプレクサ２６は、入力されたストリームをビデオストリーム（Ｖ）、オーディオストリーム（Ａ）、およびシステム情報（Ｓ）に分離する。ビデオストリームは、「ＡＶデコーダ２７に入力されるデータ」と「マルチプレクサ１６に入力されるデータ」がある。前者のデータは、再エンコードするために必要なデータであり、これはＡＶデコーダ２７で復号され、復号されたピクチャはＡＶエンコーダ１５で再エンコードされて、ビデオストリームにされ、マルチプレクサ１６に供給される。後者のデータは、再エンコードをしないで、オリジナルのストリームからコピーされるデータである。オーディオストリーム、システム情報については、直接、マルチプレクサ１６に入力される。
【００５３】
マルチプレクサ１６は、制御部２３から入力された情報に基づいて、入力ストリームを多重化し、多重化ストリームを出力する。多重化ストリームは、ソースパケッタイザ１９、ＥＣＣ符号化部２０、変調部２１で処理されて、書き込み部２２に入力される。書き込み部２２は、制御部２３から供給される制御信号に基づいて、記録媒体１００にＡＶストリームを記録する。このようにして、切り替え元のアングルと切り替え先のアングルの接続点付近のビデオストリームが部分的に再エンコードされたビデオを含むＢｒｉｄｇｅ−Ｃｌｉｐが作成される。
【００５４】
制御部２３は、Ｂｒｉｄｇｅ−Ｃｌｉｐのデータベースを作成する。すなわち、切り替え元アングルに対応する第１のＡＶストリームからＢｒｉｄｇｅ−Ｃｌｉｐの先頭へデータ読み出しを切り替える時における第１のＡＶストリーム上のデータアドレス情報（ＳＰＮ＿ｅｘｉｔ＿ｆｒｏｍ＿ｐｒｅｃｅｄｉｎｇ＿Ｃｌｉｐ）と、Ｂｒｉｄｇｅ−Ｃｌｉｐの最後から切り替え先アングルに対応する第２のＡＶストリームへデータ読み出しを切り替える時における第２のＡＶストリーム上のデータアドレス情報（ＳＰＮ＿ｅｎｔｅｒ＿ｔｏ＿ｆｏｌｌｏｗｉｎｇ＿Ｃｌｉｐ）とを持つＢｒｉｄｇｅ−Ｃｌｉｐのデータベースを作成する。
【００５５】
制御部２３は、ＡＶストリームのデータベース（Ｃｌｉｐ）と、ＡＶストリームの再生区間（ＰｌａｙＩｔｅｍ）をグループ化したもの（ＰｌａｙＬｉｓｔ）のデータベースを作成する。これらの情報から構成されるアプリケーションデータベース情報は、ＡＶストリームと同様にして、ＥＣＣ符号化部２０、変調部２１で処理されて、書き込み部２２へ入力される。書き込み部２２は、制御部２３から出力される制御信号に基づいて、記録媒体１００へデータベースファイルを記録する。
【００５６】
このようにして記録媒体１００に記録されたＡＶストリームファイル（画像データと音声データのファイル）と、アプリケーションデータベース情報が再生される場合、まず、制御部２３は、読み出し部２８に対して、記録媒体１００からアプリケーションデータベース情報を読み出すように指示する。そして、読み出し部２８は、記録媒体１００からアプリケーションデータベース情報を読み出し、そのアプリケーションデータベース情報は、復調部２９、ＥＣＣ復号部３０の処理を経て、制御部２３へ入力される。
【００５７】
制御部２３は、アプリケーションデータベース情報に基づいて、記録媒体１００に記録されているＰｌａｙＬｉｓｔの一覧を端子２４のユーザインタフェースへ出力する。ユーザは、ＰｌａｙＬｉｓｔの一覧から再生したいＰｌａｙＬｉｓｔを選択し、再生を指定されたＰｌａｙＬｉｓｔに関する情報が制御部２３へ入力される。
【００５８】
図３は、アングル切り替え点の直前の切り替え元アングルの一部のビデオストリームとアングル切り替え点の直後の切り替え先アングルの一部のビデオストリームが連続する切り替えビデオストリームとしてのＢｒｉｄｇｅ−Ｃｌｉｐを利用したマルチアングルにおいてシームレス（再生画像または音声が、アングル切り替え時に途絶えることなく）アングル変更の再生を行うことができるようにするために、本発明において採用される構成を示す。
【００５９】
例えば、マルチアングル区間の中に３つのアングルＡｎｇｌｅ＃１，Ａｎｇｌｅ＃２，およびＡｎｇｌｅ＃３があるとする。このとき、それぞれのアングルが１つのＰｌａｙＬｉｓｔを構成する。図３の例の場合、Ａｎｇｌｅ＃１，Ａｎｇｌｅ＃２，およびＡｎｇｌｅ＃３は、ＰｌａｙＬｉｓｔ＃１，ＰｌａｙＬｉｓｔ＃２，およびＰｌａｙＬｉｓｔ＃３により、それぞれ構成されている。Ａｎｇｌｅ＃１，Ａｎｇｌｅ＃２，およびＡｎｇｌｅ＃３の再生区間に対応するＡＶストリームデータを、それぞれ、Ｃｌｉｐ１（ＣｌｉｐＡＶｓｔｒｅａｍ１），Ｃｌｉｐ２（ＣｌｉｐＡＶｓｔｒｅａｍ２），およびＣｌｉｐ３（ＣｌｉｐＡＶｓｔｒｅａｍ３）とする。
【００６０】
また、図３の例の場合、再生区間は、１つのアングルから他のアングルに移行可能なタイミングの位置（アングル切り替え点）で、異なるＰｌａｙＩｔｅｍに分けられる。例えば、Ａｎｇｌｅ＃１の再生区間を３つに区分するとき、ＰｌａｙＬｉｓｔ＃１は、各再生区間ａ１，ａ２，およびａ３に対応して、３つのＰｌａｙＩｔｅｍで構成され、それぞれの再生区間ａ１，ａ２，およびａ３に対応するＣｌｉｐ１のＡＶストリームデータがＡ１，Ａ２，およびＡ３とされる。Ａｎｇｌｅ＃２の再生区間を３つに区分するとき、ＰｌａｙＬｉｓｔ＃２は、各再生区間ｂ１，ｂ２，およびｂ３に対応して、３つのＰｌａｙＩｔｅｍで構成され、それぞれの再生区間ｂ１，ｂ２，およびｂ３に対応するＣｌｉｐ２のＡＶストリームデータがＢ１，Ｂ２，およびＢ３とされる。Ａｎｇｌｅ＃３の再生区間を３つに区分するとき、ＰｌａｙＬｉｓｔ＃３は、各再生区間ｃ１，ｃ２，およびｃ３に対応して、３つのＰｌａｙＩｔｅｍで構成され、それぞれの再生区間ｃ１，ｃ２，およびｃ３に対応するＣｌｉｐ３のＡＶストリームデータがＣ１，Ｃ２，およびＣ３とされる。なお、再生区間ａ１，ａ２，およびａ３の境界は、ＧＯＰの境界である必要はない。再生区間ｂ１，ｂ２，およびｂ３と再生区間ｃ１，ｃ２，およびｃ３についても同様である。従って、境界の自由度が向上する。
【００６１】
図４のフローチャートを参照して、Ｂｒｉｄｇｅ−Ｃｌｉｐを利用したマルチアングルにおいてシームレスにアングルを変更する場合の基本的な処理について説明する。
【００６２】
ステップＳ１において、制御部２３は、ユーザからいま再生しているアングルを切り替えるように指示されたか否かを判定する。アングルの変更が指示されていないと判定された場合、ステップＳ２に進み、制御部２３は、ユーザにより再生の終了が指示されたか否かを判定する。再生の終了が指示されたと判定された場合、処理は終了される。終了が指示されていない場合、処理はステップＳ１に戻り、それ以降の処理が繰り返される。
【００６３】
ステップＳ１において、アングルの切り替えが指示されたと判定された場合、ステップ３において、制御部２３は、再生位置がＡＶストリームデータの所定の位置であるか否かを判定する。現在の位置がＡＶストリームデータの所定の位置ではない場合、制御部２３は、再生位置がＡＶストリームデータの所定の位置に達するまで待機する。
【００６４】
ステップＳ３において、再生位置がＡＶストリームデータの所定の位置に達したと判定された場合、制御部２３は、ステップＳ４において、切り替え元のアングルと切り替え先アングルの間のＢｒｉｄｇｅ−Ｃｌｉｐを再生し、ステップＳ５において、再生位置を、指定されたアングルのＡＶストリーム（Ｃｌｉｐ）の先頭の位置に移行させる。そして、そのＡＶストリームのデータが再生される。その後、処理はステップＳ１に戻り、それ以降の処理が繰り返される。なお、上述における所定の位置に関する情報は、Ｂｒｉｄｇｅ−Ｃｌｉｐの付属情報（図１１を参照して後述する）のＳＰＮ＿ｅｘｉｔ＿ｆｒｏｍ＿ｐｒｅｃｅｄｉｎｇ＿ＣｌｉｐとＳＰＮ＿ｅｎｔｅｒ＿ｔｏ＿ｆｏｌｌｏｗｉｎｇ＿Ｃｌｉｐから与えられる。
【００６５】
このようにして、図３の例では、Ａｎｇｌｅ＃１の再生区間ａ１に対応するＣｌｉｐＡＶｓｔｒｅａｍ１のＡＶストリームデータＡ１が再生され、Ｂｒｉｄｇｅ＿Ｃｌｉｐ＿Ａ１ｔｏＢ２（ＡＶストリームデータＡ１とＢ２の間のＣｌｉｐ）を介して、Ａｎｇｌｅ＃２の再生区間ｂ２に対応するＣｌｉｐＡＶｓｔｒｅａｍ２のＡＶストリームデータＢ２が再生され、次に、Ｂｒｉｄｇｅ＿Ｃｌｉｐ＿Ｂ２ｔｏＣ３（ＡＶストリームデータＢ２とＣ３の間のＣｌｉｐ）を介して、Ａｎｇｌｅ＃３の再生区間ｃ３に対応するＣｌｉｐＡＶｓｔｒｅａｍ３のＡＶストリームデータＣ３が順次再生される。
【００６６】
各ＰｌａｙＩｔｅｍとデータサイズ（バイト量）の先頭アドレスと終了アドレスの情報、並びにデータサイズ（バイト量）は、各ＣｌｉｐのＣｌｉｐＩｎｆｏｒｍａｔｉｏｎｆｉｌｅから得られる。
【００６７】
Ｂｒｉｄｇｅ−Ｃｌｉｐは、あるＣｌｉｐの任意のフレームから別のＣｌｉｐの任意のフレームへのシームレスな接続を作るための特別なＡＶストリームデータである。Ｂｒｉｄｇｅ−Ｃｌｉｐは、Ｃｌｉｐに比較すると、一般には小さなデータ量を持つ。ＡＶストリームデータがＭＰＥＧ２ビデオの場合、あるＣｌｉｐの任意のフレームから別のＣｌｉｐの任意のフレームへのシームレスな接続を作るためには、一般には接続点付近の数枚のピクチャを再エンコードしなければならない。Ｂｒｉｄｇｅ−Ｃｌｉｐは、それら再エンコードされたピクチャを含む。なお、Ｂｒｉｄｇｅ−Ｃｌｉｐの内容については、後述する。
【００６８】
図３において、Ｂｒｉｄｇｅ＿Ｃｌｉｐ＿Ａ１ｔｏＢ２は、再生区間ａ１から再生区間ｂ２へのシームレスな接続を作るためのＢｒｉｄｇｅ−Ｃｌｉｐであり、また、Ｂｒｉｄｇｅ＿Ｃｌｉｐ＿Ｂ２ｔｏＣ３は、再生区間ｂ２から再生区間ｃ３へのシームレスな接続を作るためのＢｒｉｄｇｅ−Ｃｌｉｐである。
【００６９】
図５は、シームレスなマルチアングルを実現するためのＣｌｉｐとＢｒｉｄｇｅ−Ｃｌｉｐの関係を表している。
【００７０】
Ａｎｇｌｅ＃１の切り替えタイミングは、再生区間ａ１，ａ２，およびａ３（ＡＶストリームデータＡ１，Ａ２，Ａ３）のそれぞれの終了点であり、Ａｎｇｌｅ＃２の切り替えタイミングは、再生区間ｂ１，ｂ２，およびｂ３（ＡＶストリームデータＢ１，Ｂ２，Ｂ３）のそれぞれの終了点であり、Ａｎｇｌｅ＃３の切り替えタイミングは、再生区間ｃ１，ｃ２，およびｃ３（ＡＶストリームデータＣ１，Ｃ２，Ｃ３）のそれぞれの終了点である。
【００７１】
Ｂｒｉｄｇｅ＿Ｃｌｉｐ＿Ａ１ｔｏＢ２は、再生区間ａ１から再生区間ｂ２へのシームレスな接続を作るためのＢｒｉｄｇｅ−Ｃｌｉｐである。Ｂｒｉｄｇｅ＿Ｃｌｉｐ＿Ａ１ｔｏＣ２は、再生区間ａ１から再生区間ｃ２へのシームレスな接続を作るためのＢｒｉｄｇｅ−Ｃｌｉｐである。図５におけるそのほかのＢｒｉｄｇｅ−Ｃｌｉｐについても、記号の意味は同様である。すなわち、本発明において、各切り替え元のアングルの切り替え点において、そこから切り替え可能なすべての切り替え先のアングルのＢｒｉｄｇｅ−Ｃｌｉｐが生成される。
【００７２】
次に、Ｂｒｉｄｇｅ−Ｃｌｉｐの内容について説明する。
【００７３】
Ｂｒｉｄｇｅ−Ｃｌｉｐは、本実施の形態において、アングル切り替えにおけるＰｌａｙＩｔｅｍ間のビデオとオーディオのシームレス接続をサポートする。アングル間をシームレスに接続するということは、記録再生装置に”データの連続供給”と”シームレスな復号処理”を保証するということである。
【００７４】
”データの連続供給”とは、ファイルシステムが、デコーダにバッファのアンダーフローを起こさせることのないように必要なビットレートでデータを供給することを保証することである。これにより、データのリアルタイム性を保証して、データをディスクから読み出すことができるように、データが十分な大きさの連続したブロック単位でストアされるようにする。
【００７５】
”シームレスな復号処理”とは、記録再生装置が、デコーダの再生出力にポーズやギャップを起こさせることなく、ディスクに記録されたオーディオビデオデータを表示することである。
【００７６】
シームレス接続されている２つのアングル区間が参照するＡＶストリームについて説明する。先行するＰｌａｙＩｔｅｍ（アングル区間）と現在のＰｌａｙＩｔｅｍ（アングル区間）の接続が、シームレス表示できるように保証されているかどうかは、現在のＰｌａｙＩｔｅｍにおいて定義されているｃｏｎｎｅｃｔｉｏｎ＿ｃｏｎｄｉｔｉｏｎフィールドから判断することができる。
【００７７】
図６は、Ｂｒｉｄｇｅ−Ｃｌｉｐを使用する場合の先行する（時間的に前の）ＰｌａｙＩｔｅｍと現在のＰｌａｙＩｔｅｍの関係を示している。図６においては、再生装置が読み出すストリームデータが、影をつけて示されている。図６に示したＴＳ１は、Ｃｌｉｐ１（ＣｌｉｐＡＶストリーム）の影を付けられた部分のストリームデータと、Ｂｒｉｄｇｅ−Ｃｌｉｐの１番目のＡＴＣ−ｓｅｑｕｅｎｃｅで指されるＡＶストリームデータから構成される。
【００７８】
ＴＳ１のＣｌｉｐ１の影を付けられた部分のＡＶストリームデータは、先行するＰｌａｙＩｔｅｍのＩＮ＿ｔｉｍｅ（図６においてＩＮ＿ｔｉｍｅ１で図示されている）に対応するプレゼンテーションユニットを復号するために必要なストリームのアドレスから、ＳＰＮ＿ｅｘｉｔ＿ｆｒｏｍ＿ｐｒｅｃｅｄｉｎｇ＿Ｃｌｉｐで参照されるソースパケットまでのＡＶストリームデータである。なお、図６において、ＴＳ１とＴＳ２は、ソースパケット（図１０において後述する）の連続したストリームである。
【００７９】
ビデオビットストリームの制限について説明する。図７は、ピクチャの表示順序で表すシームレス接続の例を示す図である。接続点においてビデオストリームをシームレスに表示できるためには、ＯＵＴ＿ｔｉｍｅ１（Ｃｌｉｐ１のＯＵＴ＿ｔｉｍｅ）の後とＩＮ＿ｔｉｍｅ２（Ｃｌｉｐ２のＩＮ＿ｔｉｍｅ）の前に表示される不必要なピクチャは、接続点付近のＣｌｉｐの部分的なストリームを再エンコードするプロセスにより、除去されなければならない。
【００８０】
図７に示したような場合において、Ｂｒｉｄｇｅ−Ｃｌｉｐを使用してシームレス接続を実現する例を、図８に示す。Ｂｒｉｄｇｅ−Ｃｌｉｐの１番目のＡＴＣ−ｓｅｑｕｅｎｃｅの中のビデオストリームは、Ｃｌｉｐ１のＯＵＴ＿ｔｉｍｅ１に対応するピクチャまでの符号化ビデオストリームから構成される。そして、そのビデオストリームは先行するＣｌｉｐ１のビデオストリームに接続され、１つの連続でＭＰＥＧ２規格に従ったエレメンタリーストリームとなるように再エンコードされている。
【００８１】
同様にして、Ｂｒｉｄｇｅ−Ｃｌｉｐの２番目のＡＴＣ−ｓｅｑｕｅｎｃｅの中のビデオストリームは、Ｃｌｉｐ２のＩＮ＿ｔｉｍｅ２に対応するピクチャ以後の符号化ビデオストリームから成る。そして、そのビデオストリームは、正しくデコード開始することができて、これに続くＣｌｉｐ２のビデオストリームに接続され、１つの連続でＭＰＥＧ２規格に従ったエレメンタリーストリームとなるように再エンコードされている。Ｂｒｉｄｇｅ−Ｃｌｉｐを作るためには、一般に、数枚のピクチャは再エンコードしなければならず、それ以外のピクチャはオリジナルのＣｌｉｐからコピーすることができる。
【００８２】
ビデオストリームの符号化制限について説明するに、まず、ＴＳ１とＴＳ２のビデオストリームのフレームレートは、等しくなければならない。ＴＳ１のビデオストリームは、ｓｅｑｕｅｎｃｅ＿ｅｎｄ＿ｃｏｄｅで終端しなければならない。ＴＳ２のビデオストリームは、ＳｅｑｕｅｎｃｅＨｅａｄｅｒ、ＧＯＰＨｅａｄｅｒ、そしてＩ−ピクチャで開始しなければならない。ＴＳ２のビデオストリームは、クローズドＧＯＰで開始しなければならない。
【００８３】
ビットストリームの中で定義されるビデオプレゼンテーションユニット（フレームまたはフィールド）は、接続点を挟んで連続でなければならない。接続点において、フレームまたはフィールドのギャップがあってはならない。接続点において、トップボトムのフィールドシーケンスは連続でなければならない。３−２プルダウンを使用するエンコードの場合は、”ｔｏｐ＿ｆｉｅｌｄ＿ｆｉｒｓｔ”および”ｒｅｐｅａｔ＿ｆｉｒｓｔ＿ｆｉｅｌｄ”フラグを書き換える必要がある。またはフィールドギャップの発生を防ぐために局所的に再エンコードするようにしても良い。
【００８４】
オーディオビットストリームの符号化制限について説明するに、ＴＳ１とＴＳ２のオーディオのサンプリング周波数は、同じでなければならない。ＴＳ１とＴＳ２のオーディオの符号化方法（例．ＭＰＥＧ１レイヤ２，ＡＣ−３，ＳＥＳＦＬＰＣＭ，ＡＡＣ）は、同じでなければならない。
【００８５】
次に、ＭＰＥＧ−２トランスポートストリームの符号化制限について説明するに、ＴＳ１のオーディオストリームの最後のオーディオフレームは、ＴＳ１の最後の表示ピクチャの表示終了時に等しい表示時刻を持つオーディオサンプルを含んでいなければならない。ＴＳ２のオーディオストリームの最初のオーディオフレームは、ＴＳ２の最初の表示ピクチャの表示開始時に等しい表示時刻を持つオーディオサンプルを含んでいなければならない。
【００８６】
接続点において、オーディオプレゼンテーションユニットのシーケンスにギャップがあってはならない。図９に示すように、２オーディオフレーム区間未満のオーディオプレゼンテーションユニットの長さで定義されるオーバーラップがあっても良い。ＴＳ２のエレメンタリーストリームを伝送する最初のパケットは、ビデオパケットでなければならない。接続点におけるトランスポートストリームは、ＤＶＲ−ＳＴＤに従わなくてはならない。なお、ＤＶＲ−ＳＴＤは、ＤＶＲＭＰＥＧ２トランスポートストリームの生成および検証の際におけるデコード処理をモデル化するための概念モデルである。
【００８７】
ＰｌａｙＩｔｅｍの制限について説明するに、先行するＰｌａｙＩｔｅｍのＯＵＴ＿ｔｉｍｅ（図６と図７において示されるＯＵＴ＿ｔｉｍｅ１）は、ＴＳ１の最後のビデオプレゼンテーションユニットの表示終了時刻を示さなければならない。現在のＰｌａｙＩｔｅｍのＩＮ＿ｔｉｍｅ（図６と図７において示されるＩＮ＿ｔｉｍｅ２）は、ＴＳ２の最初のビデオプレゼンテーションユニットの表示開始時刻を示さなければならない。
【００８８】
Ｂｒｉｄｇｅ−Ｃｌｉｐを使用する場合のデータアロケーションの制限について説明すると、シームレス接続は、ファイルシステムによってデータの連続供給が保証されるように作られなければならない。これは、Ｃｌｉｐ１（ＣｌｉｐＡＶストリームファイル）とＣｌｉｐ２（ＣｌｉｐＡＶストリームファイル）に接続されるＢｒｉｄｇｅ−ＣｌｉｐＡＶストリームを、データアロケーション規定を満たすように配置することによって行われなければならない。
【００８９】
ＳＰＮ＿ｅｘｉｔ＿ｆｒｏｍ＿ｐｒｅｃｅｄｉｎｇ＿Ｃｌｉｐ以前のＣｌｉｐ１（ＣｌｉｐＡＶストリームファイル）のストリーム部分が、所定の大きさ以上の連続領域に配置されているように、ＳＰＮ＿ｅｘｉｔ＿ｆｒｏｍ＿ｐｒｅｃｅｄｉｎｇ＿Ｃｌｉｐが選択されなければならない。Ｂｒｉｄｇｅ−ＣｌｉｐＡＶストリームのデータ長は、所定の大きさ以上の連続領域に配置されるように、選択されなければならない。ＳＰＮ＿ｅｎｔｅｒ＿ｔｏ＿ｆｏｌｌｏｗｉｎｇ＿Ｃｌｉｐ以後のＣｌｉｐ２（ＣｌｉｐＡＶストリームファイル）のストリーム部分が、所定の大きさ以上の連続領域に配置されているように、ＳＰＮ＿ｅｎｔｅｒ＿ｔｏ＿ｆｏｌｌｏｗｉｎｇ＿Ｃｌｉｐが選択されなければならない。
【００９０】
所定のビットレートを持つディジタルＡＶ信号が、ディスク上に断片化して記録されている場合、記録されたディジタルＡＶ信号を所定のビットレートで記録媒体から読み出せることを保証するためには、１つの連続記録領域の大きさが次の条件を満たさなければならない。
Ｓ×８／（Ｓ×８／Ｒｕｄ＋Ｔｓ）＞＝Ｒｍａｘ
ここで、
Ｓ：１つの連続記録領域の最小の大きさ［Ｂｙｔｅ］
Ｔｓ：１つの記録領域から次の記録領域へのフルストロークのアクセス時間［ｓｅｃｏｎｄ］
Ｒｕｄ：記録メディアからの読み出しビットレート［ｂｉｔ／ｓｅｃｏｎｄ］
Ｒｍａｘ：ＡＶストリームのビットレート［ｂｉｔ／ｓｅｃｏｎｄ］
すなわち、ディスク上で、Ｓバイト以上にＡＶストリームのデータが連続して記録されるようにデータを配置しなければならない。上述の所定の大きさが、Ｓバイト以上となるようにデータを配置しなければならない。
【００９１】
ＤＶＲＭＰＥＧ−２トランスポートストリームについて説明する。図１０は、ＡＶストリームファイルの構造を示す。
【００９２】
ＡＶストリームファイルは、ＤＶＲＭＰＥＧ２トランスポートストリームの構造を持つ。ＤＶＲＭＰＥＧ２トランスポートストリームは、整数個のアラインドユニット（Ａｌｉｇｎｅｄｕｎｉｔ）から構成される。Ａｌｉｇｎｅｄｕｎｉｔの大きさは、６１４４バイト（２０４８×３バイト）である。Ａｌｉｇｎｅｄｕｎｉｔは、ソースパケットの第１バイト目から始まる。ソースパケットは、１９２バイト長である。１つのソースパケットは、ＴＰ＿ｅｘｔｒａ＿ｈｅａｄｅｒとトランスポートパケットから成る。ＴＰ＿ｅｘｔｒａ＿ｈｅａｄｅｒは、４バイト長であり、またトランスポートパケットは、１８８バイト長である。
【００９３】
１つのＡｌｉｇｎｅｄｕｎｉｔは、３２個のソースパケットから成る。ＤＶＲＭＰＥＧ２トランスポートストリームの中の最後のＡｌｉｇｎｅｄｕｎｉｔも、また３２個のソースパケットから成る。よって、ＤＶＲＭＰＥＧ２トランスポートストリームは、Ａｌｉｇｎｅｄｕｎｉｔの境界で終端する。記録媒体（ディスク）１００に記録される入力トランスポートストリームのトランスポートパケットの数が３２の倍数でない時、ヌルパケット（ＰＩＤ＝０ｘ１ＦＦＦのトランスポートパケット）を持ったソースパケットが最後のＡｌｉｇｎｅｄｕｎｉｔに使用される。ファイルシステム（制御部２３）は、ＤＶＲＭＰＥＧ２トランスポートストリームに余分な情報（有効情報）は付加しない。
【００９４】
図１１は、Ｂｒｉｄｇｅ−ＣｌｉｐＡＶｓｔｒｅａｍの付属情報を示す。
【００９５】
Ｃｌｉｐ＿ｓｔｒｅａｍ＿ｔｙｐｅは、そのＣｌｉｐのＡＶストリームファイルがＣｌｉｐＡＶストリームファイルであるか、それともＢｒｉｄｇｅ−ＣｌｉｐＡＶストリームファイルであるかを示す。Ｃｌｉｐ＿ｓｔｒｅａｍ＿ｔｙｐｅがＢｒｉｄｇｅ−ＣｌｉｐＡＶストリームファイルを示す場合、次のシンタクスフィールドが続く。
【００９６】
ｐｒｅｃｅｄｉｎｇ＿Ｃｌｉｐ＿Ｉｎｆｏｒｍａｔｉｏｎ＿ｆｉｌｅ＿ｎａｍｅは、そのＢｒｉｄｇｅ−ＣｌｉｐＡＶストリームファイルの前に接続されるＣｌｉｐのＣｌｉｐＩｎｆｏｒｍａｔｉｏｎファイル名を示す。
【００９７】
ＳＰＮ＿ｅｘｉｔ＿ｆｒｏｍ＿ｐｒｅｃｅｄｉｎｇ＿Ｃｌｉｐは、ｐｒｅｃｅｄｉｎｇ＿Ｃｌｉｐ＿Ｉｎｆｏｒｍａｔｉｏｎ＿ｆｉｌｅ＿ｎａｍｅで示されるＣｌｉｐＡＶストリームファイル上のソースパケットのソースパケット番号であり、そのソースパケットに続いてＢｒｉｄｇｅ−ＣｌｉｐＡＶストリームファイルの最初のソースパケットが接続される。そのソースパケット番号は、ＣｌｉｐＡＶストリームファイルの最初のソースパケットからゼロを初期値としてカウントされる値である。
【００９８】
ｆｏｌｌｏｗｉｎｇ＿Ｃｌｉｐ＿Ｉｎｆｏｒｍａｔｉｏｎ＿ｆｉｌｅ＿ｎａｍｅは、そのＢｒｉｄｇｅ−ＣｌｉｐＡＶストリームファイルの後ろに接続されるＣｌｉｐのＣｌｉｐＩｎｆｏｒｍａｔｉｏｎファイル名を示す。
【００９９】
ＳＰＮ＿ｅｎｔｅｒ＿ｔｏ＿ｆｏｌｌｏｗｉｎｇ＿Ｃｌｉｐは、ｆｏｌｌｏｗｉｎｇ＿Ｃｌｉｐ＿Ｉｎｆｏｒｍａｔｉｏｎ＿ｆｉｌｅ＿ｎａｍｅで示されるＣｌｉｐＡＶストリームファイル上のソースパケットのソースパケット番号であり、そのソースパケットの前にＢｒｉｄｇｅ−ＣｌｉｐＡＶストリームファイルの最後のソースパケットが接続される。そのソースパケット番号は、ＣｌｉｐＡＶストリームファイルの最初のソースパケットからゼロを初期値としてカウントされる値である。
【０１００】
図１２のフローチャートを参照して、マルチアングルに用いるＡＶ信号を記録媒体１００に記録する処理について説明する。
【０１０１】
ステップＳ２１において、制御部２３は、それぞれの再生区間の開始点と終了点のデータを、ユーザインタフェース２４から取得する。ステップＳ２２において、制御部２３は、マルチアングルを構成する各アングルの区間を、複数の所定の区間に区切ることを、ユーザインタフェース２４を介してユーザに指示する。ユーザは、この指示に基づいて、各アングル全体の区間を、切り替え点に区分する（例えば、図３のＡｎｇｌｅ＃１を再生区間ａ１，ａ２，およびａ３に区分する）指令を入力すると、制御部２３はこれを取得する。
【０１０２】
ステップＳ２３において、制御部２３は、読み出し部２８に、切り替え元のアングルの最後のピクチャと切り替え先のアングルの最初のピクチャを再生するために必要なデータの読み出しを指示する。読み出し部２８は、記録媒体１００からこれらデータを読み出し、それらデータは、復調部２９、ＥＣＣ復号部３０、ソースデパケッタイザ３１を介して、デマルチプレクサ２６に出力される。
【０１０３】
ステップＳ２４において、制御部２３は、各部を制御し、切り替え元アングルと切り替え先アングルの接続点付近（例えば、図３のＡｎｇｌｅ＃１の再生区間ａ１とＡｎｇｌｅ＃２の再生区間ｂ２の接続点付近）において、ビデオストリームを部分的に再符号化と再多重化を行なわせる。
【０１０４】
すなわち、このとき、デマルチプレクサ２６は、入力されたストリームをビデオストリーム（Ｖ）、オーディオストリーム（Ａ）、およびシステム情報（Ｓ）に分離する。ビデオストリームは、ＡＶデコーダ２７に入力されるデータとマルチプレクサ１６に入力されるデータがある。前者のデータは、再エンコードするために必要なデータ（Ｂｒｉｄｇｅ−Ｃｌｉｐのデータ）であり、これはＡＶデコーダ２７で復号され、復号されたピクチャはＡＶエンコーダ１５で再符号化されて、ビデオストリームにされ、マルチプレクサに供給される。後者のデータは、再エンコードをしないで、オリジナルのストリームからコピーされるデータである。オーディオストリーム、システム情報については、マルチプレクサ１６に直接入力される。マルチプレクサ１６は、制御部２３から入力された情報に基づいて、入力ストリームを多重化し、多重化ストリームを出力する。すなわち、ここで、Ｂｒｉｄｇｅ−Ｃｌｉｐが作成される。
【０１０５】
ステップＳ２５において、多重化ストリームは、ＥＣＣ符号化部２０、変調部２１で処理されて、書き込み部２２に入力される。書き込み部２２は、制御部２３から供給される制御信号に基づいて、記録媒体１００にＡＶストリームを記録する。これにより、切り替え元のアングルと切り替え先のアングルの接続点付近のビデオストリームが部分的に再エンコードされたビデオを含むＢｒｉｄｇｅ−Ｃｌｉｐが記録媒体１００に記録されたことになる。
【０１０６】
ステップＳ２６において、制御部２３は、Ｂｒｉｄｇｅ−Ｃｌｉｐのデータベースを作成する。すなわち、切り替え元アングルに対応する第１のＡＶストリームからＢｒｉｄｇｅ−Ｃｌｉｐの先頭へデータ読み出しを切り替える時における第１のＡＶストリーム上のデータアドレス情報（ＳＰＮ＿ｅｘｉｔ＿ｆｒｏｍ＿ｐｒｅｃｅｄｉｎｇ＿Ｃｌｉｐ）とＢｒｉｄｇｅ−Ｃｌｉｐの最後から切り替え先アングルに対応する第２のＡＶストリームへデータ読み出しを切り替える時における第２のＡＶストリーム上のデータアドレス情報（ＳＰＮ＿ｅｎｔｅｒ＿ｔｏ＿ｆｏｌｌｏｗｉｎｇ＿Ｃｌｉｐ）とを持つＢｒｉｄｇｅ−Ｃｌｉｐのデータベースを作成する。
【０１０７】
ステップＳ２７において、制御部２３は、ＡＶストリームのデータベース（Ｃｌｉｐ）、ＡＶストリームの再生区間（ＰｌａｙＩｔｅｍ）をグループ化したもの（ＰｌａｙＬｉｓｔ）のデータベースを作成する。ステップＳ２８において、これらの情報から構成されるアプリケーションデータベース情報は、ＡＶストリームと同様にして、ＥＣＣ符号化部２０、変調部２１で処理されて、書き込み部２２に入力される。書き込み部２２は、制御部２３から出力される制御信号に基づいて、記録媒体１００へデータベースファイルを記録する。
【０１０８】
次に、図１３のフローチャートを参照して、以上のように記録されたマルチアングルのＡＶストリームデータを再生する処理について説明する。
【０１０９】
ステップＳ５１において、制御部２３は、記録媒体１００からアプリケーションデータベース情報を読み出す。読み出されたアプリケーションデータベース情報は、復調部２９、ＥＣＣ復号部３０の処理を経て、制御部２３に入力される。
【０１１０】
ステップＳ５２において、制御部２３は、ステップＳ５１の処理で読み出したアプリケーションデータベース情報に基づいて、記録媒体１００に記録されているＰｌａｙＬｉｓｔの一覧を、端子２４を介してユーザインタフェースに出力する。ユーザはこの一覧から再生したいＰｌａｙＬｉｓｔを選択し、その選択信号をユーザインタフェースから入力する。ステップＳ５３で、制御部２３は、この再生が指定されたＰｌａｙＬｉｓｔを取得する。ステップＳ５４において、制御部２３は、指定されたＰｌａｙＬｉｓｔに基づいて、ＡＶストリームの所定の再生区間を再生させる。再生区間にマルチアングルが存在する場合、ステップＳ５５で制御部２３は、ユーザインタフェースにマルチアングルであることを表示させる。
【０１１１】
ステップＳ５６において、制御部２３は、ユーザが、ユーザインタフェース２４を介して、アングルの切り替えを指示したか否かを判定する。アングル切り替えが指示されていないと判定された場合、ステップＳ５７において、制御部２３は、再生の終了がユーザにより指示されたか否かを判定する。終了が指示されている場合、処理が終了されるが、指示されていない場合、処理はステップＳ５５に戻り、再生区間がマルチアングルであれば、マルチアングルの表示が行われる（マルチアングルでなければ、表示は行われない）。
【０１１２】
ステップＳ５６において、アングルを切り替えることが指示されたと判定された場合、ステップＳ５８において、制御部２３は、切り替え元アングルの現在の再生時間に最も近い未来にある切り替え先アングルへの切り替え点を見つけ、切り替え方法を決定する。例えば、図３のＡｎｇｌｅ＃１の再生区間ａ１を再生中に、Ａｎｇｌｅ＃２への切り替えを指示された場合、再生区間ａ１の終了点がＡｎｇｌｅ＃２の再生区間ｂ２の開始点への切り替え点として検索される。
【０１１３】
ステップＳ５９において制御部２３は、上記アングル切り替えの再生に必要なＢｒｉｄｇｅ−Ｃｌｉｐを決定する。例えば、図３のＡｎｇｌｅ＃１の再生区間ａ１からＡｎｇｌｅ＃２の再生区間ｂ２に切り替える場合、Ｂｒｉｄｇｅ＿Ｃｌｉｐ＿Ａ１ｔｏＢ２がこの場合のＢｒｉｄｇｅ−Ｃｌｉｐとして決定される。
【０１１４】
ステップＳ６０において、制御部２３は、Ｂｒｉｄｇｅ−Ｃｌｉｐのデータベースを取得する。そして、制御部２３は、このデータベースから、切り替え元アングルに対応する第１のＡＶストリームからＢｒｉｄｇｅ−Ｃｌｉｐの先頭へデータ読み出しを切り替える時における第１のＡＶストリーム上のデータアドレス情報（ＳＰＮ＿ｅｘｉｔ＿ｆｒｏｍ＿ｐｒｅｃｅｄｉｎｇ＿Ｃｌｉｐ）と、Ｂｒｉｄｇｅ−Ｃｌｉｐの最後から切り替え先アングルに対応する第２のＡＶストリームへデータ読み出しを切り替える時における第２のＡＶストリーム上のデータアドレス情報（ＳＰＮ＿ｅｎｔｅｒ＿ｔｏ＿ｆｏｌｌｏｗｉｎｇ＿Ｃｌｉｐ）とを取得する。
【０１１５】
ステップＳ６１において、制御部２３は、現在の読み出し点が、ＡＶストリームデータの所定の位置、すなわち、第１のＡＶストリーム上のデータアドレス情報（ＳＰＮ＿ｅｘｉｔ＿ｆｒｏｍ＿ｐｒｅｃｅｄｉｎｇ＿Ｃｌｉｐ）で示される位置であるか否かを判定する。現在の読み出し点が、ＡＶストリームデータの所定の位置でない場合、所定の位置となるまで待機し、所定の位置に達したとき、ステップＳ６２に進む。
【０１１６】
ステップＳ６２において、制御部２３は、再生位置をＢｒｉｄｇｅ−Ｃｌｉｐの先頭にジャンプさせ、そのＡＶストリームファイルのデータの読み出しを、読み出し部２８に指示する。さらに、ステップＳ６３において、制御部２３は、Ｂｒｉｄｇｅ−Ｃｌｉｐの終端に達したとき、読み出し点を、第２のＡＶストリーム上のデータアドレス情報（ＳＰＮ＿ｅｎｔｅｒ＿ｔｏ＿ｆｏｌｌｏｗｉｎｇ＿Ｃｌｉｐ）で表される位置にジャンプさせ、そのＡＶストリームデータの読み出しを指示する。読み出し部２８は、その指示に従い、記録媒体１００から対応するＡＶストリームを読み出し復調部２９に出力する。復調部２９に入力されたＡＶストリームは、所定の処理が施されることにより復調され、さらにＥＣＣ復号部３０の処理を経て、ソースデパケッタイザ３１出力される。
【０１１７】
ソースデパケッタイザ３１は、トランスポートパケットを取り出して、それをデマルチプレクサ２６に出力する。デマルチプレクサ２６は、制御部２３により指定されたＡＶストリームの再生経路を構成するビデオストリーム（Ｖ）、オーディオストリーム（Ａ）、およびＡＶ同期等のシステム情報（Ｓ）を、ＡＶデコーダ２７に出力する。ＡＶデコーダ２７は、ビデオストリームとオーディオストリームを復号し、再生ビデオ信号と再生オーディオ信号を、それぞれ対応する端子３２と端子３３から出力する。その後、処理はステップＳ５５に戻り、それ以降の処理が実行される。
【０１１８】
上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。この場合、例えば、記録再生装置１は、図１４に示されるようなパーソナルコンピュータにより構成される。
【０１１９】
図１４において、ＣＰＵ１３１は、ＲＯＭ１３２に記憶されているプログラム、または記憶部１３８からＲＡＭ１３３にロードされたプログラムに従って各種の処理を実行する。ＲＡＭ１３３にはまた、ＣＰＵ１３１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０１２０】
ＣＰＵ１３１、ＲＯＭ１３２、およびＲＡＭ１３３は、バス１３４を介して相互に接続されている。このバス１３４にはまた、入出力インターフェース１３５も接続されている。
【０１２１】
入出力インターフェース１３５には、キーボード、マウスなどよりなる入力部１３６、ＣＲＴ、ＬＣＤなどよりなるディスプレイ、並びにスピーカなどよりなる出力部１３７、ハードディスクなどより構成される記憶部１３８、モデム、ターミナルアダプタなどより構成される通信部１３９が接続されている。通信部１３９は、インターネット（図示せず）を含むネットワークを介しての通信処理を行う。
【０１２２】
入出力インターフェース１３５にはまた、必要に応じてドライブ１４０が接続され、磁気ディスク１５１、光ディスク１５２、光磁気ディスク１５３、或いは半導体メモリ１５４などが適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部１３８にインストールされる。
【０１２３】
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを格納するプログラム格納媒体は、図１４に示されるように、磁気ディスク１５１（フロッピディスクを含む）、光ディスク１５２（ＣＤ−ＲＯＭ（ＣｏｍｐａｃｔＤｉｓｋ−ＲｅａｄＯｎｌｙＭｅｍｏｒｙ），ＤＶＤ（ＤｉｇｉｔａｌＶｅｒｓａｔｉｌｅＤｉｓｋ）を含む）、光磁気ディスク１５３（ＭＤ（Ｍｉｎｉ−Ｄｉｓｋ）を含む）、もしくは半導体メモリ１５４などよりなるパッケージメディア、または、プログラムが一時的もしくは永続的に格納されるＲＯＭ１３２や、記憶部１３８を構成するハードディスクなどにより構成される。プログラム格納媒体へのプログラムの格納は、必要に応じてルータ、モデムなどのインタフェースを介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
【０１２４】
なお、本明細書において、プログラム格納媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１２５】
また、本発明は、本発明の実施の形態において、マルチアングルの記録再生におけるアングルの切り替えに適用されているが、例えば、マルチストーリーやレイティング制御などの再生パスにも適用することができる。
【０１２６】
【発明の効果】
以上のように、本発明によれば、ビデオストリームを記録し、再生することができる。また、それぞれの再生パスをビデオエンコードするとき、制約条件を小さくすることができ、ビデオの符号化の効率を高めることができる。さらに、再生パスの切り替えをフレーム精度で決定することが可能になる。
【図面の簡単な説明】
【図１】ＤＶＤビデオのマルチアングルのフォーマットを説明する図である。
【図２】本発明を適用した記録再生装置の内部の構成を示すブロック図である。
【図３】マルチアングルにおいてシームレスなアングル変更を説明する図である。
【図４】マルチアングルにおいてシームレスなアングル変更する場合の処理を説明するフローチャートである。
【図５】シームレスなマルチアングルを実現するためのＣｌｉｐとＢｒｉｄｇｅ−Ｃｌｉｐを説明する図である。
【図６】Ｂｒｉｄｇｅ−Ｃｌｉｐを使用する場合の先行するＰｌａｙＩｔｅｍと現在のＰｌａｙＩｔｅｍの関係を説明する図である。
【図７】ピクチャの表示順序で表すシームレス接続の例を示す図である。
【図８】図７においてＢｒｉｄｇｅ−Ｃｌｉｐを用いてシームレス接続を実現する例を示す図である。
【図９】オーディオオーバーラップを説明する図である。
【図１０】ＡＶストリームファイルの構造を示す図である。
【図１１】Ｂｒｉｄｇｅ−ＣｌｉｐＡＶｓｔｒｅａｍの付属情報を示す図である。
【図１２】マルチアングルに用いるＡＶ信号を記録する処理を説明するフローチャートである。
【図１３】記録されたマルチアングルのＡＶストリームデータを再生する処理を説明するフローチャートである
【図１４】パーソナルコンピュータの構成例を示すブロック図である。
【符号の説明】
１記録再生装置、１１乃至１３端子、１４解析部、１５ＡＶエンコーダ、１６マルチプレクサ、１７スイッチ、１８多重化ストリーム解析部、１９ソースパケッタイザ、２０ＥＣＣ符号化部、２１変調部、２２書き込み部、２３制御部、２４ユーザインタフェース、２６デマルチプレクサ、２７ＡＶデコーダ、２８読み出し部、２９復調部、３０ＥＣＣ復号部、３１ソースパケッタイザ、３２，３３端子[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an information processing apparatus and method, a recording medium, and a program, and more particularly, to an information processing apparatus and method, a recording medium, and a recording medium capable of rapidly reproducing address information of a reproduction path recorded on a recording medium. About the program.
[0002]
[Prior art]
When playing back a moving image having a plurality of data such as video data and audio data recorded on a recording medium, as a method of playing back the continuity of separately recorded moving images, the following method is used. It is known (for example, see Patent Document 1).
[0003]
The method is that when continuously reproducing Clip1 and Clip2 recorded separately, a Bridge-Clip having a role of bridging from Clip1 to Clip2 is generated, and a portion where the Bridge-Clip switches from Clip1 to Clip2, This is a method in which Clip1 and Clip2 recorded separately can be continuously reproduced by configuring them from corresponding portions of Clip1 and Clip2.
[0004]
In particular, DVD (Digital Versatile Disc) video is a recording medium on which a moving image having a plurality of data composed of the above-described video data and audio data is recorded, and a DVD (Digital Versatile Disc) video format is used. Specifies multi-angle playback. In a predetermined playback section in which multi-angle playback is possible, the user can select an angle that matches his / her preference, and at that time, switching between the angles can be seamlessly played back by the recording and playback device.
[0005]
FIG. 1 is a diagram illustrating a multi-angle format of a DVD video.
[0006]
A multi-angle playback section is composed of a plurality of one playback sections, and one playback section is called a cell. In the example of FIG. 1, a multi-angle playback section is composed of three angles Cell # i + 1 to Cell # i + 3 of Angle 1 (Angle # 1) to Angle 3 (Angle # 3). Here, the actual AV stream data corresponding to the Cell is called a VOB (Video Object). The VOBs corresponding to the respective cells constituting the multi-angle are divided into units called ILVUs (Interleaved Units) not shown, and the plurality of VOBs constituting the multi-angle are multiplexed in units of the ILVU. Each ILVU starts from a closed GOP (Group Of Pictures).
[0007]
The reproduction of the seamless angle change in the multi-angle of the DVD video will be described. For example, when the user switches the reproduction path between Angle 2, Angle 1, and Angle 3, the recording / reproducing apparatus sequentially reads the data of ILVU1, ILVU2, and ILVU3 (all not shown) while jumping on the disc. Play them. Each ILVU starts from DSI (Data Search Information), and the DSI has an address of a jump destination to the ILVU at each next angle.
[0008]
[Patent Document 1]
JP-A-2002-158974
[0009]
[Problems to be solved by the invention]
However, at the time of ILVU video encoding, for example, there is a restriction on the condition that encoding must be performed by Closed GOP, so that video encoding efficiency is low and it is difficult to create a multi-angle. was there. Further, the ILVU has to be configured from a plurality of GOPs, and there is a problem that an angle switching point cannot be determined based on frame accuracy.
[0010]
The present invention has been made in view of such a situation, and an object of the present invention is to make it possible to reduce restrictions on multi-angle video encoding conditions.
[0011]
[Means for Solving the Problems]
The first information processing apparatus according to the present invention comprises: First generation means for generating a switching video stream in which a switching source playback path and a switching destination playback path can be continuously played back, and a first video stream of the switching source playback path starting from the first video stream of the switching source playback path And the data address information of the first video stream when the read point is switched, and the data of the second video stream when the data read point is switched from the end of the switched video stream to the second video stream of the playback path to be switched to Second generating means for generating address information; Third generation means for generating reproduction management information for each reproduction path in units of sections divided by path switching points, and recording the switching video stream on a recording medium and recording the reproduction management information on a recording medium Recording means for performing the operation.
[0012]
According to a first information processing method of the present invention, a part of a video stream of a switching source reproduction path immediately before a reproduction path switching point and a part of a switching destination reproduction path immediately after a reproduction path switching point are A first generation step of generating a switching video stream in which a part of the video stream of the switching source playback path and a part of the video stream of the switching destination playback path can be continuously played back, and a switching source playback path Data address information of the first video stream when the read point is switched from the first video stream to the beginning of the switching video stream, and data reading from the end of the switching video stream to the second video stream of the playback path to be switched to Data address information of the second video stream when switching points A second generation step of generating reproduction management information for each reproduction path in units of each section of the video stream divided by the reproduction path switching point; and Recording on a recording medium and recording reproduction management information on the recording medium.
[0013]
The program of the first recording medium according to the present invention comprises the following: a part of the video stream of the switching source playback path immediately before the playback path switching point and a part of the video stream of the switching destination playback path immediately after the playback path switching point. A first generation step of generating a switching video stream in which a part of the video stream of the switching source playback path and a part of the video stream of the switching destination playback path can be continuously played back, and the switching source playback The data address information of the first video stream when the read point is switched from the first video stream of the path to the beginning of the switching video stream, and the data is stored in the second video stream of the playback path from the end of the switching video stream to the switching destination The data address of the second video stream when switching the read point A second generation step of generating address information, a third generation step of generating reproduction management information for each reproduction path in units of each section of the video stream divided by a reproduction path switching point, and a switching video. Recording a stream on a recording medium and recording reproduction management information on the recording medium.
[0014]
A first program according to the present invention is configured to convert a part of a video stream of a playback path immediately before a playback path switching point and a part of a video stream of a switching path immediately after a playback path switching point into a switching source path. A first generation step of generating a switching video stream in which a part of the video stream of the reproduction path and a part of the video stream of the reproduction path of the switching destination can be continuously reproduced; The data address information of the first video stream when the read point is switched from one video stream to the beginning of the switching video stream, and the data reading point from the end of the switching video stream to the second video stream of the playback path to be switched from the end. Data address information of the second video stream when switching A second generation step of generating, a third generation step of generating reproduction management information for each reproduction path in units of each section of the video stream divided by the reproduction path switching point, and recording the switched video stream And a recording step of recording the reproduction management information on the recording medium while recording the information on the recording medium.
[0015]
A second information processing apparatus according to the present invention reads out playback management information given for each playback path in units of each section divided by a playback path switching point of a video stream, and reads a playback path from a switching source. Data address information of the first video stream when the read point is switched from the first video stream to the beginning of the switching video stream, and data reading from the end of the switching video stream to the second video stream of the playback path to be switched to Reading means for reading the data address information of the second video stream at the time of switching the point; reproducing means for reproducing the video stream recorded on the recording medium based on the reproduction management information read by the reading means; When the playback path switching is instructed, the switching source Searching means for searching for a switching point of a switching destination playback path in the future closest to the current playback time of the path; and a first video of the switching source playback path based on the data address information of the first video stream. A first switching unit for switching a read point from a stream to a head of a switching video stream, and a second video stream of a playback path to be switched from the end of the switching video stream to the second video stream based on data address information of the second video stream. A second switching unit for switching a data read point.
[0016]
A second information processing method according to the present invention reads out reproduction management information provided for each reproduction path in units of each section divided by a reproduction path switching point of a video stream, Data address information of the first video stream when the read point is switched from the first video stream to the beginning of the switching video stream, and data reading from the end of the switching video stream to the second video stream of the playback path to be switched to A reading step of reading data address information of a second video stream when switching points; a reproducing step of reproducing a video stream recorded on a recording medium based on the reproduction management information read in the reading step; When switching the playback path is instructed, A search step of searching for a switching point of a switching destination playback path in the future closest to the current playback time of the switching source playback path; and a switching source playback path of the switching source playback path based on the data address information of the first video stream. A first switching step of switching the read point from the first video stream to the beginning of the switching video stream; and a second switching path of the switching path from the end of the switching video stream to the switching destination based on the data address information of the second video stream. And a second switching step of switching the data read point to the video stream.
[0017]
The program of the second recording medium of the present invention reads out the reproduction management information given for each reproduction path in units of each section divided by the reproduction path switching point of the video stream, and reads the reproduction source of the switching source. The data address information of the first video stream when the read point is switched from the first video stream of the path to the beginning of the switching video stream, and the data is stored in the second video stream of the playback path from the end of the switching video stream to the switching destination A reading step of reading data address information of a second video stream when switching a reading point; and a reproducing step of reproducing a video stream recorded on a recording medium based on the reproduction management information read in the reading step. , Switching of playback path was instructed A search step for searching for a switching point of a switching destination playback path in the future closest to the current playback time of the switching source playback path; and a switching source playback path based on the data address information of the first video stream. A first switching step of switching the read point from the first video stream of the path to the beginning of the switching video stream, and a reproduction path of the switching destination from the end of the switching video stream based on the data address information of the second video stream. And a second switching step of switching a data read point to a second video stream.
[0018]
A second program according to the present invention reads out the playback management information given for each playback path in units of each section divided by a playback path switching point of a video stream, and reads the playback management information of the switching source playback path. The data address information of the first video stream when the read point is switched from one video stream to the beginning of the switching video stream, and the data reading point from the end of the switching video stream to the second video stream of the playback path to be switched from the end. A reading step of reading data address information of the second video stream at the time of switching, a reproducing step of reproducing the video stream recorded on the recording medium based on the reproduction management information read by the reading step, When switching to A search step for searching for a switching point of a switching destination playback path in the future closest to the current playback time of the original playback path, and a switching point of the switching source playback path based on the data address information of the first video stream. A first switching step of switching the read point from the first video stream to the beginning of the switching video stream; and a second switching path of the switching path from the end of the switching video stream to the switching destination based on the data address information of the second video stream. And a second switching step of switching the data read point to the video stream of (i).
[0019]
In the first information processing apparatus and method, the recording medium, and the program according to the present invention, a part of the video stream of the switching source playback path immediately before the playback path switching point and the switching destination playback path immediately after the playback path switching point A switching video stream in which a part of the switching video stream is continuous is generated, and the data address information of the first video stream when the read point is switched from the first video stream of the switching source playback path to the beginning of the switching video stream. The entity management information including the data address information of the second video stream at the time of switching the data read point from the end of the switching video stream to the second video stream of the playback path of the switching destination is generated. Each section divided by That the reproduction management information for each playback path is created and recorded on the recording medium together with the video stream.
[0020]
According to the second information processing apparatus and method, the recording medium, and the program of the present invention, the reproduction management information provided for each reproduction path of the video stream is read, and the data address information of the first video stream; When the data address information of the second video stream is read and switching of the playback path is instructed, the video stream of the switching source playback path is switched to the switching video stream based on the data address information of the first video stream. The read point is switched, and based on the data address information of the second video stream, the read point is switched to the video stream of the switching playback path.
[0021]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0022]
FIG. 2 shows an internal configuration of the recording / reproducing apparatus 1 to which the present invention is applied.
[0023]
First, the configuration of the recording unit 2 that performs an operation of recording an externally input signal on a recording medium will be described. The recording / reproducing device 1 is configured to be able to input and record analog data or digital data.
[0024]
An analog video signal is input to the terminal 11, and an analog audio signal is input to the terminal 12. The video signal input to the terminal 11 is output to the analysis unit 14 and the AV encoder 15, respectively. The audio signal input to the terminal 12 is output to the analysis unit 14 and the AV encoder 15. The analysis unit 14 extracts a feature point such as a scene change from the input video signal and audio signal.
[0025]
The AV encoder 15 encodes the input video signal and audio signal, respectively, and outputs an encoded video stream (V), an encoded audio stream (A), and system information (S) such as AV synchronization to the multiplexer 16. I do.
[0026]
The coded video stream is, for example, a video stream coded according to the MPEG (Moving Picture Expert Group) 2 method, and the coded audio stream is, for example, an audio stream coded according to the MPEG1 method or a Dolby AC3 method ( Trademark). The multiplexer 16 multiplexes the input video and audio streams based on the input system information, and outputs the multiplexed stream to the multiplexed stream analyzer 18 and the source packetizer 19 via the switch 17.
[0027]
The multiplexed stream is, for example, an MPEG2 transport stream or an MPEG2 program stream. The source packetizer 19 encodes the input multiplexed stream into an AV stream composed of source packets according to an application format of the recording medium 100 for recording the stream. The AV stream is subjected to ECC code addition and modulation processing by an ECC (error correction) coding unit 20 and a modulation unit 21 and output to a writing unit 22. The writing unit 22 writes (records) an AV stream file on a recording medium (disk) 100 made of, for example, a DVD, based on a control signal output from the control unit 23.
[0028]
A transport stream such as a digital television broadcast input from a digital interface or a digital television tuner (both not shown) is input to a terminal 13. There are two types of recording methods for the transport stream input to the terminal 13, a transparent recording method and a recording method after re-encoding for the purpose of lowering the recording bit rate. . The instruction information of the recording method is input to the control unit 23 from a terminal 24 as a user interface.
[0029]
When recording the input transport stream transparently, the transport stream input to the terminal 13 is output to the multiplexed stream analyzer 18 and the source packetizer 19 via the switch 17. Subsequent processing until the AV stream is recorded on the recording medium 100 is the same processing as when the analog input audio signal and video signal are encoded and recorded, and thus the description thereof is omitted.
[0030]
When recording after re-encoding the input transport stream, the transport stream input to the terminal 13 is input from the switch 25 to the demultiplexer 26. The demultiplexer 26 performs demultiplex processing on the input transport stream, and extracts a video stream (V), an audio stream (A), and system information (S).
[0031]
Of the streams (information) extracted by the demultiplexer 26, the video stream is output to the AV decoder 27, and the audio stream and system information are output to the multiplexer 16. The AV decoder 27 decodes the input video stream and outputs the reproduced video signal to the AV encoder 15. The AV encoder 15 encodes an input video signal and outputs an encoded video stream (V) to the multiplexer 16.
[0032]
On the other hand, the audio stream and the system information output from the demultiplexer 26 and input to the multiplexer 16 and the video stream output from the AV encoder 15 are multiplexed based on the input system information to form a multiplexed stream. The multiplexed stream is output to the multiplexed stream analyzer 18 and the source packetizer 19 via the switch 17. Subsequent processing until the AV stream is recorded on the recording medium 100 is the same processing as when the analog input audio signal and video signal are encoded and recorded, and thus the description thereof is omitted.
[0033]
The recording / reproducing apparatus 1 of the present embodiment records an AV stream file on the recording medium 100, and also records application database information describing the file. The application database information is created by the control unit 23. The input information to the control unit 23 is the characteristic information of the moving image from the analysis unit 14, the characteristic information of the AV stream from the multiplexed stream analysis unit 18, and the instruction information from the user input from the terminal 24.
[0034]
The feature information of a moving image supplied from the analysis unit 14 is generated by the analysis unit 14 when the AV encoder 15 encodes a video signal. The analysis unit 14 analyzes the contents of the input video signal and the audio signal, and generates information related to a characteristic image (clip mark) in the input moving image signal. This is, for example, the instruction information of an image of a characteristic clip mark point such as a program start point, a scene change point or a CM commercial start point / end point in an input video signal, a title or a telop, and It includes a thumbnail of the image. Further, information such as a switching point of the audio signal between stereo and monaural and a silent section is also included.
[0035]
The instruction information of these images is input to the multiplexer 16 via the control unit 23. When multiplexing the coded picture specified as the clip mark from the control unit 23, the multiplexer 16 returns information for specifying the coded picture on the AV stream to the control unit 23. Specifically, this information is the PTS (presentation time stamp) of the picture or the address information of the encoded picture on the AV stream. The control unit 23 associates and stores the characteristic image type and information for specifying the encoded picture on the AV stream.
[0036]
The characteristic information of the AV stream from the multiplexed stream analyzer 18 is information related to the encoded information of the AV stream to be recorded, and is generated by the analyzer 18. For example, it includes the time stamp and address information of the I picture in the AV stream, information on the discontinuity of the system time clock, the coding parameters of the AV stream, and information on the changing points of the coding parameters in the AV stream. When the transport stream input from the terminal 13 is recorded transparently, the multiplexed stream analysis unit 18 detects the image of the above-mentioned clip mark from the input transport stream, and determines the type and the clip mark. Generates information for specifying a picture to be specified.
[0037]
The user's instruction information from the terminal 24 includes, in the AV stream, specification information of a reproduction section specified by the user, character characters describing the contents of the reproduction section, and bookmarks and resume points set by the user in a favorite scene. Information.
[0038]
The control unit 23, based on the above input information, stores a database (Clip) of the AV stream, a database of a group of playback sections (PlayItem) of the AV stream (PlayList), and management information of the recorded contents of the recording medium 100 (PlayList). info.dvr) and thumbnail image information. The application database information composed of these pieces of information is processed by the ECC encoding unit 20 and the modulation unit 21 and input to the writing unit 22 in the same manner as the AV stream. The writing unit 22 records a database file on the recording medium 100 based on a control signal output from the control unit 23.
[0039]
Details of the application database information will be described later.
[0040]
When the AV stream file (the image data and audio data file) and the application database information thus recorded on the recording medium 100 are reproduced by the reproducing unit 3, first, the control unit 23 Then, an instruction to read application database information from the recording medium 100 is issued. Then, the reading unit 28 reads the application database information from the recording medium 100. The application database information is input to the control unit 23 through demodulation of the demodulation unit 29 and the ECC decoding unit 30 and error correction processing.
[0041]
The control unit 23 outputs a list of PlayLists recorded on the recording medium 100 to the user interface of the terminal 24 based on the application database information. The user selects a PlayList to be played from the list of PlayLists, and information about the PlayList designated to be played is input from the terminal 24 to the control unit 23. The control unit 23 instructs the reading unit 28 to read an AV stream file required for playing the PlayList. The reading unit 28 reads the corresponding AV stream from the recording medium 100 and outputs the read AV stream to the demodulation unit 29 according to the instruction. The AV stream input to the demodulation unit 29 is demodulated by performing predetermined processing, and is further output to the source depacketizer 31 through the processing of the ECC decoding unit 30.
[0042]
The source depacketizer 31 converts an application format AV stream read from the recording medium 100 and subjected to predetermined processing into a stream that can be processed by the demultiplexer 26. The demultiplexer 26 converts a video stream (V), an audio stream (A), and system information (S) such as AV synchronization, which constitute a playback section (PlayItem) of the AV stream specified by the control unit 23, into an AV decoder 27. Output to The AV decoder 27 decodes the video stream and the audio stream, and outputs a reproduced video signal and a reproduced audio signal from the corresponding terminals 32 and 33, respectively.
[0043]
Further, when information for instructing random access reproduction or special reproduction is input from a terminal 24 as a user interface, the control unit 23 transmits the AV data from the storage medium 100 based on the contents of the AV stream database (Clip). The stream reading position is determined, and the reading of the AV stream is instructed to the reading unit 28. For example, when playing the PlayList selected by the user from a predetermined time, the control unit 23 instructs the reading unit 28 to read data from an I picture having a time stamp closest to the specified time.
[0044]
In addition, in the database of the AV stream that constitutes the application database information, the start point and the scene change point of the program stored in the ClipMark in the Clip Information attached to the AV stream (Clip) are stored. When the user selects a certain clip mark (for example, this operation displays a thumbnail image list of a cue point or a scene change point of a program stored in ClipMark on a user interface, and allows the user to select a thumbnail image from the list). The control unit 23 determines a reading position of the AV stream from the recording medium 100 based on the contents of the Clip Information, and instructs the reading unit 28 to read the AV stream. . That is, the read unit 28 is instructed to read data from the I picture at the address closest to the address on the AV stream in which the image selected by the user is stored. The read unit 28 reads data from the designated address, and the read data is input to the demultiplexer 26 through the processing of the demodulation unit 29, the ECC decoding unit 30, and the source depacketizer 31, and is input to the AV decoder 27. And the AV data indicated by the address of the picture at the mark point is reproduced.
[0045]
Further, when the user instructs fast-forward playback, the control unit 23 reads the I picture data in the AV stream sequentially and continuously based on the AV stream database (Clip). An instruction is given to the reading unit 28.
[0046]
The reading unit 28 reads the data of the AV stream from the random access point specified as the position where the I picture is recorded, and the read data is reproduced through the processing of each unit at the subsequent stage.
[0047]
A case will be described where a video creator (not shown) creates a multi-angle video title using an AV signal recorded on the recording medium 100 as a source. The video creator selects two or more playback sections from a plurality of AV signal sources recorded on the recording medium 100 and sets each playback section as one angle to create a multi-angle having two or more angles. If so, information on the start point and end point of each playback section is input to the control unit 23 from a terminal 24 as a user interface.
[0048]
Next, the control unit 23 determines a point at which the angle can be switched among the above angles based on the instruction of the creator or judges by itself, and divides each playback section into several small sections. (For example, Angle # 1 in FIG. 3 described later is divided into playback sections a1, a2, and a3).
[0049]
Next, the control unit 23 reads the vicinity of the connection point between the switching source angle and the switching destination angle (for example, the vicinity of the end of the playback section a1 of Angle # 1 in FIG. 3 (the vicinity of the connection point), and the playback of Angle # 2. Re-encoding and re-multiplexing of a part of the video stream near the head of the section b2 (near the connection point) are performed.
[0050]
For this purpose, information of “the last picture of the switching source angle” and information of “the first picture of the switching destination angle” are input to the control unit 23. The control unit 23 instructs the reading unit 28 to read data necessary for reproducing the “last picture of the switching source angle” and the “first picture of the switching destination angle”. Then, the reading unit 28 reads data from the recording medium 100, and outputs the data to the demultiplexer 26 via the demodulation unit 29, the ECC decoding unit 30, and the source depacketizer 31.
[0051]
The control unit 23 analyzes the data input to the demultiplexer 26, determines a video stream re-encoding method (change of picture_coding_type, allocation of a coded bit amount to be re-encoded), and a re-multiplexing method. The system is supplied to the AV encoder 15 and the multiplexer 16.
[0052]
Next, the demultiplexer 26 separates the input stream into a video stream (V), an audio stream (A), and system information (S). The video stream includes “data input to the AV decoder 27” and “data input to the multiplexer 16”. The former data is data necessary for re-encoding, and is decoded by the AV decoder 27, and the decoded picture is re-encoded by the AV encoder 15, converted into a video stream, and supplied to the multiplexer 16. . The latter data is data copied from the original stream without re-encoding. Audio streams and system information are directly input to the multiplexer 16.
[0053]
The multiplexer 16 multiplexes the input stream based on the information input from the control unit 23, and outputs a multiplexed stream. The multiplexed stream is processed by the source packetizer 19, the ECC encoder 20, and the modulator 21, and is input to the writer 22. The writing unit 22 records an AV stream on the recording medium 100 based on a control signal supplied from the control unit 23. In this way, a Bridge-Clip including a video obtained by partially re-encoding a video stream near the connection point between the switching source angle and the switching destination angle is created.
[0054]
The control unit 23 creates a Bridge-Clip database. That is, data address information (SPN_exit_from_preceding_Clip) on the first AV stream when data reading is switched from the first AV stream corresponding to the switching source angle to the top of the Bridge-Clip, and the switching destination angle from the end of the Bridge-Clip. A data of the Bridge-Clip having the data address information (SPN_enter_to_following_Clip) on the second AV stream when switching the data reading to the second AV stream corresponding to.
[0055]
The control unit 23 creates a database of an AV stream database (Clip) and a database of a group of playback sections (PlayItems) of the AV stream (PlayList). The application database information composed of such information is processed by the ECC encoding unit 20 and the modulation unit 21 in the same manner as the AV stream, and is input to the writing unit 22. The writing unit 22 records a database file on the recording medium 100 based on a control signal output from the control unit 23.
[0056]
When the AV stream file (image data and audio data file) and the application database information thus recorded on the recording medium 100 are reproduced, first, the control unit 23 sends the reading unit 28 100 to instruct to read application database information. Then, the reading unit 28 reads the application database information from the recording medium 100, and the application database information is input to the control unit 23 through the processing of the demodulation unit 29 and the ECC decoding unit 30.
[0057]
The control unit 23 outputs a list of PlayLists recorded on the recording medium 100 to the user interface of the terminal 24 based on the application database information. The user selects a PlayList to be played from the list of PlayLists, and information on the PlayList designated to be played is input to the control unit 23.
[0058]
FIG. 3 shows a multi-stream using a Bridge-Clip as a switching video stream in which a part of a video stream of a source angle immediately before an angle switching point and a part of a video stream of a destination angle immediately after the angle switching point are continuous. A configuration adopted in the present invention to enable seamless reproduction of an angle change in an angle (a reproduced image or audio is not interrupted when the angle is switched) will be described.
[0059]
For example, assume that there are three angles Angle # 1, Angle # 2, and Angle # 3 in a multi-angle section. At this time, each angle constitutes one PlayList. In the case of the example of FIG. 3, Angle # 1, Angle # 2, and Angle # 3 are respectively configured by PlayList # 1, PlayList # 2, and PlayList # 3. The AV stream data corresponding to the playback sections of Angle # 1, Angle # 2, and Angle # 3 is Clip1 (Clip AV stream1), Clip2 (Clip AV stream2), and Clip3 (Clip AV stream3), respectively.
[0060]
In the case of the example of FIG. 3, the playback section is divided into different PlayItems at timings (angle switching points) at which timing can be shifted from one angle to another angle. For example, when the playback section of Angle # 1 is divided into three, PlayList # 1 is composed of three PlayItems corresponding to the playback sections a1, a2, and a3, and each of the playback sections a1, a2, The AV stream data of Clip1 corresponding to and a3 are A1, A2, and A3. When the playback section of Angle # 2 is divided into three, PlayList # 2 is composed of three PlayItems corresponding to playback sections b1, b2, and b3, and playback sections b1, b2, and b3, respectively. Are defined as B1, B2, and B3. When the playback section of Angle # 3 is divided into three, PlayList # 3 is composed of three PlayItems corresponding to the playback sections c1, c2, and c3, and each of the playback sections c1, c2, and c3. Are defined as C1, C2, and C3. Note that the boundaries between the reproduction sections a1, a2, and a3 do not need to be the boundaries of GOPs. The same applies to the playback sections b1, b2, and b3 and the playback sections c1, c2, and c3. Therefore, the degree of freedom of the boundary is improved.
[0061]
With reference to the flowchart of FIG. 4, a description will be given of a basic process in a case where the angle is seamlessly changed in a multi-angle using Bridge-Clip.
[0062]
In step S1, the control unit 23 determines whether or not the user has instructed to switch the angle currently being reproduced. When it is determined that the angle change has not been instructed, the process proceeds to step S2, and the control unit 23 determines whether or not the user has instructed to end the reproduction. If it is determined that the end of the reproduction has been instructed, the processing is ended. If the end has not been instructed, the process returns to step S1, and the subsequent processes are repeated.
[0063]
When it is determined in step S1 that the angle switching has been instructed, in step 3, the control unit 23 determines whether or not the reproduction position is a predetermined position of the AV stream data. If the current position is not the predetermined position of the AV stream data, the control unit 23 waits until the reproduction position reaches the predetermined position of the AV stream data.
[0064]
If it is determined in step S3 that the reproduction position has reached the predetermined position of the AV stream data, the control unit 23 reproduces the Bridge-Clip between the switching source angle and the switching destination angle in step S4, In step S5, the playback position is shifted to the head position of the AV stream (Clip) of the designated angle. Then, the data of the AV stream is reproduced. Thereafter, the process returns to step S1, and the subsequent processes are repeated. Note that the information on the predetermined position in the above is provided from SPN_exit_from_preceding_Clip and SPN_enter_to_following_Clip of the accessory information of Bridge-Clip (described later with reference to FIG. 11).
[0065]
In this way, in the example of FIG. 3, the AV stream data A1 of the Clip AV stream 1 corresponding to the playback section a1 of Angle # 1 is reproduced, and via the Bridge_Clip_A1toB2 (Clip between the AV stream data A1 and B2), The AV stream data B2 of the Clip AV stream2 corresponding to the playback section b2 of Angle # 2 is played back, and then, via Bridge_Clip_B2toC3 (Clip between the AV stream data B2 and C3), to the playback section c3 of Angle # 3. The AV stream data C3 of the corresponding Clip AV stream3 is sequentially reproduced.
[0066]
The information of each PlayItem, the start address and the end address of the data size (byte amount), and the data size (byte amount) are obtained from the Clip Information file of each Clip.
[0067]
Bridge-Clip is special AV stream data for making a seamless connection from an arbitrary frame of one Clip to an arbitrary frame of another Clip. The Bridge-Clip generally has a smaller data amount than the Clip. When the AV stream data is MPEG2 video, in order to make a seamless connection from any frame of one Clip to any frame of another Clip, generally, several pictures near the connection point must be re-encoded. No. The Bridge-Clip contains those re-encoded pictures. The contents of the Bridge-Clip will be described later.
[0068]
In FIG. 3, Bridge_Clip_A1 to B2 is a Bridge-Clip for creating a seamless connection from the playback section a1 to the playback section b2, and a Bridge_Clip_B2 to C3 is for creating a seamless connection from the playback section b2 to the playback section c3. Bridge-Clip.
[0069]
FIG. 5 shows the relationship between Clip and Bridge-Clip for realizing a seamless multi-angle.
[0070]
The switching timing of Angle # 1 is the end point of each of the playback sections a1, a2, and a3 (AV stream data A1, A2, A3), and the switching timing of Angle # 2 is the playback sections b1, b2, and b3. (AV stream data B1, B2, B3), and the switching timing of Angle # 3 is at the respective end points of the playback sections c1, c2, and c3 (AV stream data C1, C2, C3). is there.
[0071]
Bridge_Clip_A1 to B2 is a Bridge-Clip for creating a seamless connection from the playback section a1 to the playback section b2. Bridge_Clip_A1 to C2 is a Bridge-Clip for making a seamless connection from the playback section a1 to the playback section c2. The meaning of the symbols is the same for the other Bridge-Clips in FIG. That is, in the present invention, at the switching point of each switching source angle, Bridge-Clips of all switching destination angles that can be switched from that switching point are generated.
[0072]
Next, the contents of the Bridge-Clip will be described.
[0073]
In the present embodiment, the Bridge-Clip supports seamless video and audio connection between PlayItems in angle switching. Seamlessly connecting the angles means "continuous supply of data" and "seamless decoding processing" to the recording / reproducing apparatus.
[0074]
"Continuous supply of data" is to ensure that the file system supplies data at the required bit rate so as not to cause the decoder to underflow the buffer. This ensures that the data is stored in a continuous block unit of a sufficient size so that the data can be read from the disk while guaranteeing the real-time property of the data.
[0075]
"Seamless decoding processing" means that the recording / reproducing apparatus displays audio / video data recorded on the disc without causing a pause or gap in the reproduction output of the decoder.
[0076]
An AV stream referred to by two seamlessly connected angle sections will be described. Whether or not the connection between the preceding PlayItem (angle section) and the current PlayItem (angle section) is guaranteed to enable seamless display can be determined from the connection_condition field defined in the current PlayItem.
[0077]
FIG. 6 shows the relationship between the preceding (temporally previous) PlayItem and the current PlayItem when using the Bridge-Clip. In FIG. 6, stream data read by the playback device is shaded. TS1 shown in FIG. 6 includes stream data of a shadowed portion of Clip1 (Clip AV stream) and AV stream data indicated by the first ATC-sequence of Bridge-Clip.
[0078]
The AV stream data of the shaded portion of Clip1 of TS1 is obtained from SPN_exit_from_preceding_Clip from the address of the stream necessary for decoding the presentation unit corresponding to IN_time (shown as IN_time1 in FIG. 6) of the preceding PlayItem. Is the AV stream data up to the source packet referred to by. In FIG. 6, TS1 and TS2 are continuous streams of source packets (described later in FIG. 10).
[0079]
The limitation of the video bit stream will be described. FIG. 7 is a diagram illustrating an example of seamless connection represented in the display order of pictures. In order to be able to seamlessly display the video stream at the connection point, unnecessary pictures displayed after OUT_time1 (OUT_time of Clip1) and before IN_time2 (IN_time of Clip2) are a part of the Clip near the connection point. It must be removed by the process of re-encoding the stream.
[0080]
FIG. 8 shows an example in which seamless connection is realized using Bridge-Clip in the case shown in FIG. The video stream in the first ATC-sequence of the Bridge-Clip includes an encoded video stream up to a picture corresponding to OUT_time1 of Clip1. The video stream is connected to the preceding Clip1 video stream, and is re-encoded so as to be one continuous elementary stream according to the MPEG2 standard.
[0081]
Similarly, the video stream in the second ATC-sequence of the Bridge-Clip includes an encoded video stream after the picture corresponding to IN_time2 of Clip2. Then, the video stream can start decoding correctly, is connected to the subsequent Clip2 video stream, and is re-encoded so as to be one continuous elementary stream according to the MPEG2 standard. In order to create a Bridge-Clip, generally, several pictures must be re-encoded, and other pictures can be copied from the original Clip.
[0082]
To describe the encoding restrictions of the video stream, first, the frame rates of the TS1 and TS2 video streams must be equal. The video stream of TS1 must end with sequence_end_code. The video stream of TS2 must start with Sequence Header, GOP Header, and I-picture. The video stream of TS2 must start with a closed GOP.
[0083]
The video presentation units (frames or fields) defined in the bitstream must be continuous across the connection point. There must be no frame or field gaps at the connection points. At the junction, the top-bottom field sequence must be continuous. In the case of encoding using 3-2 pull-down, it is necessary to rewrite the “top_field_first” and “repeat_first_field” flags. Alternatively, re-encoding may be performed locally in order to prevent occurrence of a field gap.
[0084]
To explain the encoding restrictions of the audio bitstream, the audio sampling frequencies of TS1 and TS2 must be the same. The encoding method of the audio of TS1 and TS2 (eg, MPEG1 Layer 2, AC-3, SESF LPCM, AAC) must be the same.
[0085]
Next, the encoding restriction of the MPEG-2 transport stream will be described. The last audio frame of the audio stream of TS1 includes audio samples having the same display time at the end of display of the last display picture of TS1. There must be. The first audio frame of the audio stream of TS2 must include audio samples having a display time equal to the start of display of the first display picture of TS2.
[0086]
At the junction, there must be no gaps in the sequence of audio presentation units. As shown in FIG. 9, there may be an overlap defined by the length of the audio presentation unit less than two audio frame periods. The first packet transmitting the elementary stream of TS2 must be a video packet. The transport stream at the connection point must follow DVR-STD. The DVR-STD is a conceptual model for modeling a decoding process when generating and verifying a DVR MPEG2 transport stream.
[0087]
To explain the limitation of PlayItem, OUT_time of the preceding PlayItem (OUT_time1 shown in FIGS. 6 and 7) must indicate the display end time of the last video presentation unit of TS1. The IN_time of the current PlayItem (IN_time2 shown in FIGS. 6 and 7) must indicate the display start time of the first video presentation unit of TS2.
[0088]
Describing the limitations of data allocation when using Bridge-Clip, a seamless connection must be made such that a continuous supply of data is guaranteed by the file system. This must be performed by arranging the Bridge-Clip AV stream connected to Clip1 (Clip AV stream file) and Clip2 (Clip AV stream file) so as to satisfy the data allocation rules.
[0089]
SPN_exit_from_preceding_Clip must be selected so that the stream portion of Clip1 (Clip AV stream file) before SPN_exit_from_preceding_Clip is arranged in a continuous area of a predetermined size or more. The data length of the Bridge-Clip AV stream must be selected so as to be arranged in a continuous area of a predetermined size or more. SPN_enter_to_following_Clip must be selected so that the stream portion of Clip2 (Clip AV stream file) after SPN_enter_to_following_Clip is arranged in a continuous area of a predetermined size or more.
[0090]
When a digital AV signal having a predetermined bit rate is recorded in a fragmented manner on a disk, one assurance that the recorded digital AV signal can be read from a recording medium at a predetermined bit rate is used. The size of the continuous recording area must satisfy the following conditions.
S × 8 / (S × 8 / Rud + Ts) >> = Rmax
here,
S: Minimum size of one continuous recording area [Byte]
Ts: Full stroke access time [second] from one recording area to the next recording area
Rud: Read bit rate from recording media [bit / second]
Rmax: AV stream bit rate [bit / second]
That is, the data must be arranged on the disk so that the data of the AV stream is continuously recorded in S bytes or more. The data must be arranged so that the above-mentioned predetermined size is S bytes or more.
[0091]
The DVR MPEG-2 transport stream will be described. FIG. 10 shows the structure of an AV stream file.
[0092]
An AV stream file has the structure of a DVR MPEG2 transport stream. The DVR MPEG2 transport stream is composed of an integer number of aligned units. The size of the aligned unit is 6144 bytes (2048 × 3 bytes). Aligned unit starts from the first byte of the source packet. The source packet is 192 bytes long. One source packet includes TP_extra_header and a transport packet. TP_extra_header is 4 bytes long, and the transport packet is 188 bytes long.
[0093]
One Aligned unit consists of 32 source packets. The last Aligned unit in the DVR MPEG2 transport stream also consists of 32 source packets. Therefore, the DVR MPEG2 transport stream ends at the boundary of the Aligned unit. When the number of transport packets of the input transport stream recorded on the recording medium (disk) 100 is not a multiple of 32, a source packet having a null packet (transport packet of PID = 0x1FFF) is used for the last aligned unit. Is done. The file system (control unit 23) does not add extra information (effective information) to the DVR MPEG2 transport stream.
[0094]
FIG. 11 shows additional information of the Bridge-Clip AV stream.
[0095]
Clip_stream_type indicates whether the AV stream file of the Clip is a Clip AV stream file or a Bridge-Clip AV stream file. When Clip_stream_type indicates a Bridge-Clip AV stream file, the next syntax field follows.
[0096]
“preceding_Clip_Information_file_name” indicates the Clip Information file name of the Clip connected before the Bridge-Clip AV stream file.
[0097]
SPN_exit_from_preceding_Clip is the source packet number of the source packet on the Clip AV stream file indicated by predicating_Clip_Information_file_name, and the first source packet of the Bridge-Clip AV stream file is connected to the source packet. The source packet number is a value counted starting from zero as an initial value from the first source packet of the Clip AV stream file.
[0098]
The following_Clip_Information_file_name indicates the Clip Information file name of the Clip connected after the Bridge-Clip AV stream file.
[0099]
SPN_enter_to_following_Clip is the source packet number of the source packet on the Clip AV stream file indicated by following_Clip_Information_file_name, and the last source packet of the Bridge-Clip AV stream file is connected before the source packet. The source packet number is a value counted starting from zero as an initial value from the first source packet of the Clip AV stream file.
[0100]
With reference to the flowchart of FIG. 12, a process of recording an AV signal used for multi-angle on the recording medium 100 will be described.
[0101]
In step S21, the control unit 23 acquires the data of the start point and the end point of each playback section from the user interface 24. In step S22, the control unit 23 instructs the user via the user interface 24 to divide each angle section constituting the multi-angle into a plurality of predetermined sections. Based on this instruction, the user inputs a command that divides the entire section of each angle into switching points (for example, divides Angle # 1 in FIG. 3 into playback sections a1, a2, and a3). 23 acquires this.
[0102]
In step S23, the control unit 23 instructs the reading unit 28 to read data necessary for reproducing the last picture of the switching source angle and the first picture of the switching destination angle. The reading unit 28 reads these data from the recording medium 100, and outputs the data to the demultiplexer 26 via the demodulation unit 29, the ECC decoding unit 30, and the source depacketizer 31.
[0103]
In step S24, the control unit 23 controls each unit, and the vicinity of the connection point of the switching source angle and the switching destination angle (for example, the connection point of the playback section a1 of Angle # 1 and the connection point of the playback section b2 of Angle # 2 in FIG. 3). ) Causes the video stream to be partially re-encoded and re-multiplexed.
[0104]
That is, at this time, the demultiplexer 26 separates the input stream into a video stream (V), an audio stream (A), and system information (S). The video stream includes data input to the AV decoder 27 and data input to the multiplexer 16. The former data is data (Bridge-Clip data) necessary for re-encoding, which is decoded by the AV decoder 27, and the decoded picture is re-encoded by the AV encoder 15 to form a video stream. And supplied to the multiplexer. The latter data is data copied from the original stream without re-encoding. Audio streams and system information are directly input to the multiplexer 16. The multiplexer 16 multiplexes the input stream based on the information input from the control unit 23, and outputs a multiplexed stream. That is, a Bridge-Clip is created here.
[0105]
In step S25, the multiplexed stream is processed by the ECC encoding unit 20 and the modulation unit 21, and is input to the writing unit 22. The writing unit 22 records an AV stream on the recording medium 100 based on a control signal supplied from the control unit 23. As a result, a Bridge-Clip including a video in which a video stream near the connection point between the switching source angle and the switching destination angle is partially re-encoded has been recorded on the recording medium 100.
[0106]
In step S26, the control unit 23 creates a Bridge-Clip database. That is, the data address information (SPN_exit_from_preceding_Clip) on the first AV stream when switching the data reading from the first AV stream corresponding to the switching source angle to the beginning of the Bridge-Clip and the end of the Bridge-Clip to the switching destination angle. A Bridge-Clip database having data address information (SPN_enter_to_following_Clip) on the second AV stream when data reading is switched to the corresponding second AV stream is created.
[0107]
In step S27, the control unit 23 creates a database of the AV stream database (Clip) and a database of the AV stream playback sections (PlayItem) grouped (PlayList). In step S28, the application database information composed of these pieces of information is processed by the ECC encoding unit 20 and the modulation unit 21 and input to the writing unit 22 in the same manner as the AV stream. The writing unit 22 records a database file on the recording medium 100 based on a control signal output from the control unit 23.
[0108]
Next, a process of reproducing the multi-angle AV stream data recorded as described above will be described with reference to a flowchart of FIG.
[0109]
In step S51, the control unit 23 reads application database information from the recording medium 100. The read application database information is input to the control unit 23 through the processing of the demodulation unit 29 and the ECC decoding unit 30.
[0110]
In step S52, the control unit 23 outputs a list of PlayLists recorded on the recording medium 100 to the user interface via the terminal 24 based on the application database information read in the processing in step S51. The user selects a PlayList to be reproduced from this list, and inputs a selection signal from the user interface. In step S53, the control unit 23 acquires the PlayList for which the reproduction is specified. In step S54, the control unit 23 reproduces a predetermined reproduction section of the AV stream based on the designated PlayList. If there is a multi-angle in the playback section, the control unit 23 causes the user interface to display that the angle is a multi-angle in step S55.
[0111]
In step S56, the control unit 23 determines whether or not the user has instructed to switch the angle via the user interface 24. When it is determined that the angle switching has not been instructed, in step S57, the control unit 23 determines whether or not the end of the reproduction has been instructed by the user. If the end is instructed, the process is ended. If not, the process returns to step S55, and if the playback section is a multi-angle, a multi-angle display is performed (if not, the multi-angle is not displayed). , Is not displayed).
[0112]
If it is determined in step S56 that it has been instructed to switch the angle, in step S58, the control unit 23 finds a switching point to a switching destination angle in the future closest to the current playback time of the switching source angle, Determine the switching method. For example, when switching to Angle # 2 is instructed during playback of the playback section a1 of Angle # 1 in FIG. 3, the end point of the playback section a1 is switched to the start point of the playback section b2 of Angle # 2. Is searched as
[0113]
In step S59, the control unit 23 determines a Bridge-Clip necessary for reproducing the angle switching. For example, when switching from the playback section a1 of Angle # 1 to the playback section b2 of Angle # 2 in FIG. 3, the Bridge_Clip_A1 to B2 is determined as the Bridge-Clip in this case.
[0114]
In step S60, the control unit 23 acquires a Bridge-Clip database. Then, the control unit 23 reads, from the database, data address information (SPN_exit_from_preceding_Clip) on the first AV stream when switching data reading from the first AV stream corresponding to the switching source angle to the beginning of the Bridge-Clip, Data address information (SPN_enter_to_following_Clip) on the second AV stream when data reading is switched from the end of the Bridge-Clip to the second AV stream corresponding to the switching destination angle is acquired.
[0115]
In step S61, the control unit 23 determines whether or not the current read point is a predetermined position of the AV stream data, that is, a position indicated by data address information (SPN_exit_from_preceding_Clip) on the first AV stream. . If the current read point is not at the predetermined position of the AV stream data, the process waits until it reaches the predetermined position, and when it reaches the predetermined position, proceeds to step S62.
[0116]
In step S62, the control unit 23 causes the playback position to jump to the top of the Bridge-Clip, and instructs the reading unit 28 to read the data of the AV stream file. Further, in step S63, when reaching the end of the Bridge-Clip, the control unit 23 jumps the read point to the position represented by the data address information (SPN_enter_to_following_Clip) on the second AV stream, and the AV stream Instructs data reading. The reading unit 28 reads the corresponding AV stream from the recording medium 100 and outputs the read AV stream to the demodulation unit 29 according to the instruction. The AV stream input to the demodulation unit 29 is demodulated by performing predetermined processing, and is further output to the source depacketizer 31 through the processing of the ECC decoding unit 30.
[0117]
The source depacketizer 31 extracts the transport packet and outputs it to the demultiplexer 26. The demultiplexer 26 outputs, to the AV decoder 27, a video stream (V), an audio stream (A), and system information (S) such as AV synchronization, which constitute a playback path of the AV stream specified by the control unit 23. . The AV decoder 27 decodes the video stream and the audio stream, and outputs a reproduced video signal and a reproduced audio signal from the corresponding terminals 32 and 33, respectively. Thereafter, the process returns to step S55, and the subsequent processes are executed.
[0118]
The above-described series of processes can be executed by hardware or can be executed by software. In this case, for example, the recording / reproducing apparatus 1 is configured by a personal computer as shown in FIG.
[0119]
14, a CPU 131 executes various processes according to a program stored in a ROM 132 or a program loaded from a storage unit 138 to a RAM 133. The RAM 133 also appropriately stores data necessary for the CPU 131 to execute various processes.
[0120]
The CPU 131, the ROM 132, and the RAM 133 are mutually connected via a bus 134. The input / output interface 135 is also connected to the bus 134.
[0121]
The input / output interface 135 includes an input unit 136 including a keyboard and a mouse, a display including a CRT and an LCD, an output unit 137 including a speaker, a storage unit 138 including a hard disk, a modem, a terminal adapter, and the like. The configured communication unit 139 is connected. The communication unit 139 performs communication processing via a network including the Internet (not shown).
[0122]
A drive 140 is connected to the input / output interface 135 as necessary, and a magnetic disk 151, an optical disk 152, a magneto-optical disk 153, a semiconductor memory 154, or the like is appropriately mounted. It is installed in the storage unit 138 as needed.
[0123]
As shown in FIG. 14, a program storage medium that is installed in a computer and stores a program that can be executed by the computer includes a magnetic disk 151 (including a floppy disk) and an optical disk 152 (CD-ROM (Compact Disk)). A package medium including a read only memory (DVD) (including a digital versatile disk), a magneto-optical disk 153 (including an MD (mini-disk)), or a semiconductor memory 154, or a program temporarily or permanently. And a hard disk constituting the storage unit 138. The storage of the program in the program storage medium is performed using a wired or wireless communication medium such as a local area network, the Internet, or digital satellite broadcasting via an interface such as a router or a modem as necessary.
[0124]
In this specification, the steps of describing a program stored in a program storage medium may be performed in chronological order according to the described order, or may be performed in parallel, even if not necessarily performed in chronological order. Alternatively, it also includes individually executed processing.
[0125]
Although the present invention is applied to switching of angles in multi-angle recording / reproducing in the embodiment of the present invention, the present invention can be applied to, for example, a reproducing path such as multi-story or rating control.
[0126]
【The invention's effect】
As described above, according to the present invention, a video stream can be recorded and reproduced. In addition, when video encoding is performed on each reproduction path, the constraint condition can be reduced, and the efficiency of video encoding can be increased. Further, switching of the reproduction path can be determined with frame accuracy.
[Brief description of the drawings]
FIG. 1 is a diagram illustrating a multi-angle format of a DVD video.
FIG. 2 is a block diagram showing an internal configuration of a recording / reproducing apparatus to which the present invention has been applied.
FIG. 3 is a diagram illustrating seamless angle change in multi-angle.
FIG. 4 is a flowchart illustrating a process in the case of seamless angle change in multi-angle.
FIG. 5 is a diagram illustrating Clip and Bridge-Clip for realizing a seamless multi-angle.
FIG. 6 is a diagram illustrating a relationship between a preceding PlayItem and a current PlayItem when using Bridge-Clip.
FIG. 7 is a diagram illustrating an example of seamless connection represented by a display order of pictures.
FIG. 8 is a diagram illustrating an example of realizing seamless connection using Bridge-Clip in FIG. 7;
FIG. 9 is a diagram illustrating audio overlap.
FIG. 10 is a diagram showing the structure of an AV stream file.
FIG. 11 is a diagram showing additional information of a Bridge-Clip AV stream.
FIG. 12 is a flowchart illustrating a process of recording an AV signal used for multi-angle.
FIG. 13 is a flowchart illustrating a process of reproducing recorded multi-angle AV stream data.
FIG. 14 is a block diagram illustrating a configuration example of a personal computer.
[Explanation of symbols]
Reference Signs List 1 recording / reproducing device, 11 to 13 terminals, 14 analyzer, 15 AV encoder, 16 multiplexer, 17 switch, 18 multiplexed stream analyzer, 19 source packetizer, 20 ECC encoder, 21 modulator, 22 writing unit, 23 control unit, 24 user interface, 26 demultiplexer, 27 AV decoder, 28 reading unit, 29 demodulation unit, 30 ECC decoding unit, 31 source packetizer, 32, 33 terminals

Claims

In an information processing apparatus that records a video stream having a plurality of playback paths,
From the video stream of a part of the playback path of the switching source immediately before the switching point of the playback path and the video stream of the playback path of the switching destination immediately after the switching point of the playback path, the playback path of the switching source and the switching destination First generating means for generating a switching video stream in which the reproduction paths of the reproduction paths can be continuously reproduced;
Data address information of the first video stream when a read point is switched from the first video stream of the switching source playback path to the beginning of the switching video stream, and playback of the switching destination from the end of the switching video stream Second generating means for generating data address information of the second video stream when switching the data read point to the second video stream of the path;
Third generation means for generating reproduction management information for each reproduction path in units of each section of the video stream divided by the reproduction path switching point;
An information processing apparatus comprising: a recording unit that records the switching video stream on a recording medium and records the reproduction management information on the recording medium.

In an information processing method of an information processing apparatus that records a video stream having a plurality of reproduction paths,
From a part of the video stream of the reproduction path of the switching source immediately before the reproduction path switching point and a part of the video stream of the reproduction path of the switching destination immediately after the reproduction path switching point, A first generation step of generating a switching video stream in which the video stream and a part of the video stream of the switching destination reproduction path can be continuously reproduced;
Data address information of the first video stream when the read point is switched from the first video stream of the switching source playback path to the beginning of the switching video stream, and playback of the switching destination from the end of the switching video stream A second generation step of generating data address information of the second video stream when switching a data read point to a second video stream of a path;
A third generation step of generating reproduction management information for each reproduction path in units of each section of the video stream divided by the reproduction path switching point;
Recording the switching video stream on a recording medium and recording the reproduction management information on the recording medium.

A program for an information processing device that records a video stream having a plurality of playback paths,
From a part of the video stream of the reproduction path of the switching source immediately before the reproduction path switching point and a part of the video stream of the reproduction path of the switching destination immediately after the reproduction path switching point, A first generation step of generating a switching video stream in which the video stream and a part of the video stream of the switching destination reproduction path can be continuously reproduced;
Data address information of the first video stream when the read point is switched from the first video stream of the switching source playback path to the beginning of the switching video stream, and playback of the switching destination from the end of the switching video stream A second generation step of generating data address information of the second video stream when switching a data read point to a second video stream of a path;
A third generation step of generating reproduction management information for each reproduction path in units of each section of the video stream divided by the reproduction path switching point;
A recording step of recording the switching video stream on a recording medium and recording the reproduction management information on the recording medium.

In an information processing apparatus for reproducing a video stream having a plurality of reproduction paths,
Reads out the playback management information given for each playback path in units of each section of the video stream divided by the switching point of the playback path, and switches the video stream from the first video stream of the switching source playback path. The data address information of the first video stream when the read point is switched to the beginning of the second video stream, and the second address when the data read point is switched from the end of the switched video stream to the second video stream of the playback path to be switched to Reading means for reading data address information of a video stream of
Playback means for playing back the video stream recorded on a recording medium based on the playback management information read by the reading means;
A search unit configured to search for a switching point of a switching destination playback path in the future closest to the current playback time of the switching source playback path when a switching of the playback path is instructed;
First switching means for switching a read point from a first video stream of the playback path of the switching source to a head of the switching video stream based on data address information of the first video stream;
A second switching unit that switches a data read point from the end of the switching video stream to a second video stream of the switching destination reproduction path based on data address information of the second video stream. Information processing device.

In an information processing method of an information processing apparatus for reproducing a video stream having a plurality of reproduction paths,
Reads out the playback management information given for each playback path in units of each section of the video stream divided by the switching point of the playback path, and switches the video stream from the first video stream of the switching source playback path. The data address information of the first video stream when the read point is switched to the beginning of the second video stream, and the second address when the data read point is switched from the end of the switched video stream to the second video stream of the playback path to be switched to A reading step of reading data address information of the video stream of
A reproduction step of reproducing the video stream recorded on a recording medium based on the reproduction management information read by the reading step;
A search step for searching for a switching point of a switching destination playback path in the future closest to the current playback time of the switching source playback path when the switching of the playback path is instructed;
A first switching step of, based on data address information of the first video stream, switching a read point from a first video stream of the playback path of the switching source to a head of the switching video stream;
And a second switching step of switching a data read point from the end of the switching video stream to a second video stream of the switching destination playback path based on the data address information of the second video stream. Information processing method.

A program for an information processing device for reproducing a video stream having a plurality of reproduction paths,
Reads out the playback management information given for each playback path in units of each section of the video stream divided by the switching point of the playback path, and switches the video stream from the first video stream of the switching source playback path. The data address information of the first video stream when the read point is switched to the beginning of the second video stream, and the second address when the data read point is switched from the end of the switched video stream to the second video stream of the playback path to be switched to A reading step of reading data address information of the video stream of
A reproduction step of reproducing the video stream recorded on a recording medium based on the reproduction management information read by the reading step;
A search step for searching for a switching point of a switching destination playback path in the future closest to the current playback time of the switching source playback path when the switching of the playback path is instructed;
A first switching step of, based on data address information of the first video stream, switching a read point from a first video stream of the playback path of the switching source to a head of the switching video stream;
A second switching step of switching a data read point from the end of the switching video stream to a second video stream of the switching playback path from the end of the switching video stream based on the data address information of the second video stream. Recording medium on which a computer-readable program is recorded.

A program for an information processing device for reproducing a video stream having a plurality of reproduction paths,
Reads out the playback management information given for each playback path in units of each section of the video stream divided by the switching point of the playback path, and switches the video stream from the first video stream of the switching source playback path. The data address information of the first video stream when the read point is switched to the beginning of the second video stream, and the second address when the data read point is switched from the end of the switched video stream to the second video stream of the playback path to be switched to A reading step of reading data address information of the video stream of
A reproduction step of reproducing the video stream recorded on a recording medium based on the reproduction management information read by the reading step;
A search step for searching for a switching point of a switching destination playback path in the future closest to the current playback time of the switching source playback path when the switching of the playback path is instructed;
A first switching step of, based on data address information of the first video stream, switching a read point from a first video stream of the playback path of the switching source to a head of the switching video stream;
A second switching step of switching a data read point from the end of the switching video stream to the second video stream of the switching destination playback path based on the data address information of the second video stream. A program characterized by that: