JP3920921B2 - テレシネ変換されたビデオデータのシームレス接続エンコード方法及びその装置 - Google Patents
テレシネ変換されたビデオデータのシームレス接続エンコード方法及びその装置 Download PDFInfo
- Publication number
- JP3920921B2 JP3920921B2 JP51414497A JP51414497A JP3920921B2 JP 3920921 B2 JP3920921 B2 JP 3920921B2 JP 51414497 A JP51414497 A JP 51414497A JP 51414497 A JP51414497 A JP 51414497A JP 3920921 B2 JP3920921 B2 JP 3920921B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- video
- vob
- stream
- encoding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000000034 method Methods 0.000 title description 123
- 238000006243 chemical reaction Methods 0.000 claims description 76
- 230000003111 delayed effect Effects 0.000 claims description 14
- 238000003860 storage Methods 0.000 claims description 8
- 238000012217 deletion Methods 0.000 claims description 7
- 230000037430 deletion Effects 0.000 claims description 7
- 238000001514 detection method Methods 0.000 claims description 3
- 239000000872 buffer Substances 0.000 description 143
- 230000008569 process Effects 0.000 description 62
- 238000012545 processing Methods 0.000 description 53
- 238000010586 diagram Methods 0.000 description 47
- 102100037812 Medium-wave-sensitive opsin 1 Human genes 0.000 description 44
- 239000010410 layer Substances 0.000 description 29
- 239000000463 material Substances 0.000 description 28
- 230000015654 memory Effects 0.000 description 21
- 230000003287 optical effect Effects 0.000 description 20
- 230000002093 peripheral effect Effects 0.000 description 18
- 239000010408 film Substances 0.000 description 16
- 239000000758 substrate Substances 0.000 description 15
- 238000007906 compression Methods 0.000 description 11
- 230000006835 compression Effects 0.000 description 11
- 239000002356 single layer Substances 0.000 description 11
- 238000004804 winding Methods 0.000 description 11
- 239000002355 dual-layer Substances 0.000 description 10
- AGGKEGLBGGJEBZ-UHFFFAOYSA-N tetramethylenedisulfotetramine Chemical compound C1N(S2(=O)=O)CN3S(=O)(=O)N1CN2C3 AGGKEGLBGGJEBZ-UHFFFAOYSA-N 0.000 description 8
- 101150073618 ST13 gene Proteins 0.000 description 7
- 230000008859 change Effects 0.000 description 7
- 230000001276 controlling effect Effects 0.000 description 7
- 238000011161 development Methods 0.000 description 7
- 101000969688 Homo sapiens Macrophage-expressed gene 1 protein Proteins 0.000 description 6
- 102100021285 Macrophage-expressed gene 1 protein Human genes 0.000 description 6
- 239000000284 extract Substances 0.000 description 6
- 230000002441 reversible effect Effects 0.000 description 6
- 238000012546 transfer Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 230000014509 gene expression Effects 0.000 description 5
- 230000003014 reinforcing effect Effects 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 230000002123 temporal effect Effects 0.000 description 4
- 239000010409 thin film Substances 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 229910052751 metal Inorganic materials 0.000 description 3
- 239000002184 metal Substances 0.000 description 3
- 238000003822 preparative gas chromatography Methods 0.000 description 3
- 238000003672 processing method Methods 0.000 description 3
- 239000011241 protective layer Substances 0.000 description 3
- 230000002829 reductive effect Effects 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000001678 irradiating effect Effects 0.000 description 2
- 238000005304 joining Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000001568 sexual effect Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- CIWBSHSKHKDKBQ-JLAZNSOCSA-N Ascorbic acid Chemical compound OC[C@H](O)[C@H]1OC(=O)C(O)=C1O CIWBSHSKHKDKBQ-JLAZNSOCSA-N 0.000 description 1
- 206010010071 Coma Diseases 0.000 description 1
- 101001123331 Homo sapiens Peroxisome proliferator-activated receptor gamma coactivator 1-alpha Proteins 0.000 description 1
- 102100028960 Peroxisome proliferator-activated receptor gamma coactivator 1-alpha Human genes 0.000 description 1
- 239000012790 adhesive layer Substances 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000000465 moulding Methods 0.000 description 1
- PUIBPGHAXSCVRF-QHFGJBOXSA-N prostaglandin C1 Chemical compound CCCCC[C@H](O)\C=C\C1=CCC(=O)[C@@H]1CCCCCCC(O)=O PUIBPGHAXSCVRF-QHFGJBOXSA-N 0.000 description 1
- CMBOTAQMTNMTBD-KLASNZEFSA-N prostaglandin C2 Chemical compound CCCCC[C@H](O)\C=C\C1=CCC(=O)[C@@H]1C\C=C/CCCC(O)=O CMBOTAQMTNMTBD-KLASNZEFSA-N 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 230000000087 stabilizing effect Effects 0.000 description 1
- 238000000547 structure data Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
- G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
- G11B27/30—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
- G11B27/3027—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
- G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
- G11B27/327—Table of contents
- G11B27/329—Table of contents on a disc [VTOC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2537—Optical discs
- G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/84—Television signal recording using optical recording
- H04N5/85—Television signal recording using optical recording on discs or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/806—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
- H04N9/8063—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Television Signal Processing For Recording (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Description
技術分野
この発明は、一連の関連付けられた内容を有する各タイトルを構成する動画像データ、オーディオデータ、副映像データの情報を搬送するビットストリームに様々な処理を施して、ユーザーの要望に応じた内容を有するタイトルを構成するべくビットストリームを生成し、その生成されたビットストリームを所定の記録媒体に効率的に記録する記録装置と記録媒体、及び再生する再生装置及びオーサリングシステムに用いられる、フィルムで撮影された映画素材をテレシネ変換と呼ばれるフレームレート変換手法によってレート変換によって生成されるビデオデータををエンコードーヂ媒体に記録再生する方法及びその装置に関する。
背景技術
近年、レーザーディスクやビデオＣＤ等を利用したシステムに於いて、動画像、オーディオ、副映像などのマルチメディアデータをデジタル処理して、一連の関連付けられた内容を有するタイトルを構成するオーサリングシステムが実用化されている。
特に、ビデオＣＤを用いたシステムに於いては、約６００Ｍバイトの記憶容量を持ち本来ディジタルオーディオの記録用であったＣＤ媒体上に、ＭＰＥＧと呼ばれる高圧縮率の動画像圧縮手法により、動画像データの記録を実現している。カラオケをはじめ従来のレーザーディスクのタイトルがビデオＣＤに置き替わりつつある。
年々、各タイトルの内容及び再生品質に対するユーザーの要望は、より複雑及び高度になって来ている。このようなユーザーの要望に応えるには、従来より深い階層構造を有するビットストリームにて各タイトルを構成する必要がある。このようにより深い階層構造を有するビットストリームにより、構成されるマルチメディアデータのデータ量は、従来の十数倍以上になる。更に、タイトルの細部に対する内容を、きめこまかく編集する必要があり、それには、ビットストリームをより下位の階層データ単位でデータ処理及び制御する必要がある。
このように、多階層構造を有する大量のデジタルビットストリームを、各階層レベルで効率的な制御を可能とする、ビットストリーム構造及び、記録再生を含む高度なデジタル処理方法の確立が必要である。更に、このようなデジタル処理を行う装置、この装置でデジタル処理されたビットストリーム情報を効率的に記録保存し、記録された情報を迅速に再生することが可能な記録媒体も必要である。
このような状況に鑑みて、記録媒体に関して言えば、従来用いられている光ディスクの記憶容量を高める検討が盛んに行われている。光ディスクの記憶容量を高めるには光ビームのスポット径Ｄを小さくする必要があるが、レーザの波長をλ、対物レンズの開口数をＮＡとすると、前記スポット径Ｄは、λ／ＮＡに比例し、λが小さくＮＡが大きいほど記憶容量を高めるのに好適である。
ところが、ＮＡが大きいレンズを用いた場合、例えば米国特許５、２３５、５８１に記載の如く、チルトと呼ばれるディスク面と光ビームの光軸の相対的な傾きにより生じるコマ収差が大きくなり、これを防止するためには透明基板の厚さを薄くする必要がある。透明基板を薄くした場合は機械的強度が弱くなると言う問題がある。
また、データ処理に関しては、動画像、オーディオ、グラフィックスなどの信号データを記録再生する方式として従来のＭＰＥＧ１より、大容量データを高速転送が可能なＭＰＥＧ２が開発され、実用されている。ＭＰＥＧ２では、ＭＰＥＧ１と多少異なる圧縮方式、データ形式が採用されている。ＭＰＥＧ１とＭＰＥＧ２の内容及びその違いについては、ＩＳＯ１１１７２、及びＩＳＯ１３８１８のＭＰＥＧ規格書に詳述されているので説明を省く。
ＭＰＥＧ２に於いても、ビデオエンコードストリームの構造に付いては、規定しているが、システムストリームの階層構造及び下位の階層レベルの処理方法を明らかにしていない。
上述の如く、従来のオーサリングシステムに於いては、ユーザーの種々の要求を満たすに十分な情報を持った大量のデータストリームを処理することができない。さらに、処理技術が確立したとしても、大容量のデータストリームを効率的に記録、再生に十分用いることが出来る大容量記録媒体がないので、処理されたデータを有効に繰り返し利用することができない。
言い換えれば、タイトルより小さい単位で、ビットストリームを処理するには、記録媒体の大容量化、デジタル処理の高速化と言うハードウェア、及び洗練されたデータ構造を含む高度なデジタル処理方法の考案と言うソフトウェアに対する過大な要求を解消する必要があった。
本発明は、このように、ハードウェア及びソフトウェアに対して高度な要求を有する、タイトル以下の単位で、マルチメディアデータのビットストリームを制御して、よりユーザーの要望に合致した効果的なオーサリングシステムを提供することを目的とする。
このようなマルチメディアデータから構成されるタイトル内容を再生するプレーヤは、テレビ受像機に接続して、再生情報をユーザが容易に利用できることが望ましい。また、タイトルとしてフィルムで撮影された映画を素材として利用されることが多いであろう。このような場合、記録ビットストリームを作成する際に、編集の容易さから、記録信号作成装置への素材の供給にはデジタルのＶＴＲが使用される。そのために、フィルムで撮影された映画素材は、テレシネ変換と呼ばれるフレームレート変換手法によってレート変換を行って後、記録信号が作成される。
テレシネ変換は基本的には、周期的に同一パリティのフィールドをコピーした冗長フィールドを挿入することによって、フレームレートの変換が実現される。フィルムのフレームレートとビデオのフレームレートとは簡単な整数比の関係になっていないため、周期的な処理の合間に通常と異なる変換パターンが挟まれることになる。このようにして得られたテレシネ画像を圧縮符号化する際に、ビデオのフレームレートそのままで圧縮符号化を行ったのではコピーされた冗長フィールドまでも符号化することになり、効率が悪くなる。従って、コピーされた冗長フィールドを検出削除する逆テレシネ変換した後に圧縮符号化を行い、各フレームについて冗長フィールドを削除したかどうかを示すフラグと、フレームの２つのフィールドの表示順を示すフラグとを付加して記録する。
しかしながら、逆テレシネ変換を行った複数のタイトル編集単位のＶＯＢを、連続して再生しようとした場合に、連続再生するＶＯＢ同士のつなぎ目でトップフィールドが連続してしまう。このような場合のＭＰＥＧデコーダの振る舞いは一般に保証されておらず、ＤＶＤプレーヤに於いては、フィールドが１つ挿入されたり削除されたりして再生画像のつじつま合わせが行われるか、最悪の場合、無関係なフィールドが挿入されることになる。前者の場合であっても、音声との同期ずれが発生する恐れがある。従って、完全なシームレスの再生が実現できないことになる。
本発明に於いては、ＶＯＢ同士を連続して再生しても、ボトムフィールド同士、或いはトップフィールド同士が連続することなく、セルの境界に於いてもシームレス再生を実現することが出来るデータ構造を有するシステムストリームの生成方法、記録装置、再生装置、及びその様なシステムストリームが記録する媒体を提供することを目的とするデータ構造をもつ光ディスクおよび光ディスク記録方法を提供することを目的とする。なお、本出願は日本国特許出願番号Ｈ７−２５２７３３（１９９５年９月２９日出願）に基づいて出願されるものであって、該明細書による開示事項はすべて本発明の開示の一部となすものである。
発明の開示
特定のフィールドを複数回繰り返すことにより信号源のフレームレートより大きなフレームレートに変換されたビデオ信号を、この繰り返された冗長フィールドを除去して元の信号源のフレームレートにほぼ等しいフレームレートをもつ中間信号に変換し、さらにこの中間信号を圧縮符号化して記録信号を得、該フィールドを除去したことを示すフラグ及び結果として得られた各ビデオフレームの２つのフィールドのどちらが時間的に先行しているかを示すフラグと共に、記録媒体に記録する信号記録方法において、同一の記録媒体に複数の論理的な記録区間を設ける際に、各記録区間の先頭及び終端での前記フラグが所定の値を持つように前記ビデオ信号から前記録再信号への変換を行う信号変換記録方法。
【図面の簡単な説明】
図１は、マルチメディアビットストリームのデータ構造を示す図であり、図２は、オーサリングエンコーダを示す図であり、
図３は、オーサリングデコーダを示す図であり、
図４は、単一の記録面を有するＤＶＤ記録媒体の断面を示す図であり、
図５は、単一の記録面を有するＤＶＤ記録媒体の断面を示す図であり、
図６は、単一の記録面を有するＤＶＤ記録媒体の断面を示す図であり、
図７は、複数の記録面（片面２層型）を有するＤＶＤ記録媒体の断面を示す図であり、
図８は、複数の記録面（両面１層型）を有するＤＶＤ記録媒体の断面を示す図であり、
図９は、ＤＶＤ記録媒体の平面図であり、
図１０は、ＤＶＤ記録媒体の平面図であり、
図１１は、片面２層型ＤＶＤ記録媒体の展開図であり、
図１２は、片面２層型ＤＶＤ記録媒体の展開図であり、
図１３は、両面一層型ＤＶＤ記録媒体の展開図であり、
図１４は、両面一層型ＤＶＤ記録媒体の展開図であり、
図１５は、マルチレイティッドタイトルストリームの一例を示す図であり、
図１６は、ＶＴＳのデータ構造を示す図であり、
図１７は、システムストリームのデータ構造を示す図であり、
図１８は、システムストリームのデータ構造を示す図であり、
図１９は、システムストリームのパックデータ構造を示す図であり、
図２０は、ナブパックＮＶのデータ構造を示す図であり、
図２１は、ＤＶＤマルチシーンのシナリオ例を示す図であり、
図２２は、ＤＶＤのデータ構造を示す図であり、
図２３は、マルチアングル制御のシステムストリームの接続を示す図であり、
図２４は、マルチシーンに対応するＶＯＢの例を示す図であり、
図２５は、ＤＶＤオーサリングエンコーダを示す図であり、
図２６は、ＤＶＤオーサリングデコーダを示す図であり、
図２７は、ＶＯＢセットデータ列を示す図であり、
図２８は、ＶＯＢデータ列を示す図であり、
図２９は、エンコードパラメータを示す図であり、
図３０は、ＤＶＤマルチシーンのプログラムチェーン構成例を示す図であり、
図３１は、ＤＶＤマルチシーンのＶＯＢ構成例を示す図であり、
図３２は、テレシネ変換と逆テレシネ変換の様子を示す図であり、
図３３は、マルチアングル制御の概念を示す図であり、
図３４は、エンコード制御フローチャートを示す図であり、
図３５は、非シームレス切り替えマルチアングルのエンコードパラメータ生成フローチャートを示す図であり、
図３６は、エンコードパラメータ生成の共通フローチャートを示す図であり、
図３７は、シームレス切り替えマルチアングルのエンコードパラメータ生成フローチャートを示す図であり、
図３８は、パレンタル制御のエンコードパラメータ生成フローチャートを示す図であり、
図３９は、逆テレシネ変換器のブロック図であり、
図４０は、パレンタル接続例を示す図であり、
図４１は、テレシネ変換と逆テレシネ変換の様子を示す図であり、
図４２は、逆テレシネ変換器のタイミングチャートを示す。
図４３は、パレンタル接続例を示す図であり、
図４４は、テレシネ変換と逆テレシネ変換の様子を示す図であり、
図４５は、逆テレシネ変換器のブロック図であり、
図４６は、逆テレシネ変換器のタイミングチャートを示す。
図４７は、デコードシステムテーブルを示す図であり、
図４８は、デコードテーブルを示す図であり、
図４９は、デコーダのフローチャートを示す図であり、
図５０は、ＰＧＣ再生のフローチャートを示す図であり、
図５１は、ストリームバッファ内のデータデコード処理フローチャートを示す図であり、
図５２は、各デコーダの同期処理フローチャートを示す図であり、
図５３は、単一シーンのエンコードパラメータ生成フローチャートを示す図であり、
図５４は、インターリーブブロック構成例を示す図であり、
図５５は、ＶＴＳのＶＯＢブロック構成例を示す図であり、
図５６は、連続ブロック内のデータ構造を示す図であり、
図５７は、インターリーブブロック内のデータ構造を示す図である。
発明を実施するための最良の形態
本発明をより詳細に説明するために、添付の図面に従ってこれを説明する。
オーサリングシステムのデータ構造
先ず、図１を参照して、本発明に於ける記録装置、記録媒体、再生装置および、それらの機能を含むオーサリングシステムに於いて処理の対象されるマルチメディアデータのビットストリームの論理構造を説明する。ユーザが内容を認識し、理解し、或いは楽しむことができる画像及び音声情報を１タイトルとする。このタイトルとは、映画でいえば、最大では一本の映画の完全な内容を、そして最小では、各シーンの内容を表す情報量に相当する。
所定数のタイトル分の情報を含むビットストリームデータから、ビデオタイトルセットＶＴＳが構成される。以降、簡便化の為に、ビデオタイトルセットをＶＴＳと呼称する。ＶＴＳは、上述の各タイトルの中身自体を表す映像、オーディオなどの再生データと、それらを制御する制御データを含んでいる。
所定数のＶＴＳから、オーサリングシステムに於ける一ビデオデータ単位であるビデオゾーンＶＺが形成される。以降、簡便化の為にビデオゾーンをＶＺと呼称する。一つのＶＺに、Ｋ＋１個のＶＴＳ＃０〜ＶＴＳ＃Ｋ（Ｋは、０を含む正の整数）が直線的に連続して配列される。そしてその内一つ、好ましくは先頭のＶＴＳ＃０が、各ＶＴＳに含まれるタイトルの中身情報を表すビデオマネージャとして用いられる。この様に構成された、所定数のＶＺから、オーサリングシステムに於ける、マルチメディアデータのビットストリームの最大管理単位であるマルチメディアビットストリームＭＢＳが形成される。
オーサリングエンコーダＥＣ
図２に、ユーザーの要望に応じた任意のシナリオに従い、オリジナルのマルチメディアビットストリームをエンコードして、新たなマルチメディアビットストリームＭＢＳを生成する本発明に基づくオーサリングエンコーダＥＣの一実施形態を示す。なお、オリジナルのマルチメディアビットストリームは、映像情報を運ぶビデオストリームＳｔ１、キャプション等の補助映像情報を運ぶサブピクチャストリームＳｔ３、及び音声情報を運ぶオーディオストリームＳｔ５から構成されている。ビデオストリーム及びオーディオストリームは、所定の時間の間に対象から得られる画像及び音声の情報を含むストリームである。
一方、サブピクチャストリームは一画面分、つまり瞬間の映像情報を含むストリームである。必要であれば、一画面分のサブピクチャをビデオメモリ等にキャプチャして、そのキャプチャされたサブピクチャ画面を継続的に表示することができる。
これらのマルチメディアソースデータＳｔ１、Ｓｔ３、及びＳｔ５は、実況中継の場合には、ビデオカメラ等の手段から映像及び音声信号がリアルタイムで供給される。また、ビデオテープ等の記録媒体から再生された非リアルタイムな映像及び音声信号であったりする。尚、同図に於ては、簡便化のために、３種類のマルチメディアソースストリームとして、３種類以上で、それぞれが異なるタイトル内容を表すソースデータが入力されても良いことは言うまでもない。このような複数のタイトルの音声、映像、補助映像情報を有するマルチメディアソースデータを、マルチタイトルストリームと呼称する。
オーサリングエンコーダＥＣは、編集情報作成部１００、エンコードシステム制御部２００、ビデオエンコーダ３００、ビデオストリームバッファ４００、サブピクチャエンコーダ５００、サブピクチャストリームバッファ６００、オーディオエンコーダ７００、オーディオストリームバッファ８００、システムエンコーダ９００、ビデオゾーンフォーマッタ１３００、記録部１２００、及び記録媒体Ｍから構成されている。
同図に於いて、本発明のエンコーダによってエンコードされたビットストリームは、一例として光ディスク媒体に記録される。
オーサリングエンコーダＥＣは、オリジナルのマルチメディアタイトルの映像、サブピクチャ、及び音声に関するユーザの要望に応じてマルチメディアビットストリームＭＢＳの該当部分の編集を指示するシナリオデータとして出力できる編集情報生成部１００を備えている。編集情報作成部１００は、好ましくは、ディスプレイ部、スピーカ部、キーボード、ＣＰＵ、及び、ソースストリームバッファ部等で構成される。編集情報作成部１００は、上述の外部マルチメディアストリーム源に接続されており、マルチメディアソースデータＳｔ１、Ｓｔ３、及びＳｔ５の供給を受ける。
ユーザーは、マルチメディアソースデータをディスプレイ部及びスピーカを用いて映像及び音声を再生し、タイトルの内容を認識することができる。更に、ユーザは再生された内容を確認しながら、所望のシナリオに沿った内容の編集指示を、キーボード部を用いて入力する。編集指示内容とは、複数のタイトル内容を含む各ソースデータの全部或いは、其々に対して、所定時間毎に各ソースデータの内容を一つ以上選択し、それらの選択された内容を、所定の方法で接続再生するような情報を言う。
ＣＰＵは、キーボード入力に基づいて、マルチメディアソースデータのそれぞれのストリームＳｔ１、Ｓｔ３、及びＳｔ５の編集対象部分の位置、長さ、及び各編集部分間の時間的相互関係等の情報をコード化したシリオデータ（Scenario data）Ｓｔ７を生成する。
ソースストリームバッファは所定の容量を有し、マルチメディアソースデータの各ストリームＳｔ１、Ｓｔ３、及びＳｔ５を所定の時間Ｔｄ遅延させた後に、出力する。
これは、ユーザーがシナリオデータＳｔ７を作成するのと同時にエンコードを行う場合、つまり逐次エンコード処理の場合には、後述するようにシナリオデータＳｔ７に基づいて、マルチメディアソースデータの編集処理内容を決定するのに若干の時間Ｔｄを要するので、実際に編集エンコードを行う場合には、この時間Ｔｄだけマルチメディアソースデータを遅延させて、編集エンコードと同期する必要があるからである。このような、逐次編集処理の場合、遅延時間Ｔｄは、システム内の各要素間での同期調整に必要な程度であるので、通常ソースストリームバッファは半導体メモリ等の高速記録媒体で構成される。
しかしながら、タイトルの全体を通してシナリオデータＳｔ７を完成させた後に、マルチメディアソースデータを一気にエンコードする、いわゆるバッチ編集時に於いては、遅延時間Ｔｄは、一タイトル分或いはそれ以上の時間必要である。このような場合には、ソースストリームバッファは、ビデオテープ、磁気ディスク、光ディスク等の低速大容量記録媒体を利用して構成できる。つまり、ソースストリームバッファは遅延時間Ｔｄ及び製造コストに応じて、適当な記憶媒体を用いて構成すれば良い。
エンコードシステム制御部２００は、編集情報作成部１００に接続されており、シナリオデータＳｔ７を編集情報作成部１００から受け取る。エンコードシステム制御部２００は、シナリオデータＳｔ７に含まれる編集対象部の時間的位置及び長さに関する情報に基づいて、マルチメディアソースデータの編集対象分をエンコードするためのそれぞれのエンコードパラメータデータ及びエンコード開始、終了のタイミング信号Ｓｔ９、Ｓｔ１１、及びＳｔ１３をそれぞれ生成する。なお、上述のように、各マルチメディアソースデータＳｔ１、Ｓｔ３、及びＳｔ５は、ソースストリームバッファによって、時間Ｔｄ遅延して出力されるので、各タイミングＳｔ９、Ｓｔ１１、及びＳｔ１３と同期している。
つまり、信号Ｓｔ９はビデオストリームＳｔ１からエンコード対象部分を抽出して、ビデオエンコード単位を生成するために、ビデオストリームＳｔ１をエンコードするタイミングを指示するビデオエンコード信号である。同様に、信号Ｓｔ１１は、サブピクチャエンコード単位を生成するために、サブピクチャストリームＳｔ３をエンコードするタイミングを指示するサブピクチャストリームエンコード信号である。また、信号Ｓｔ１３は、オーディオエンコード単位を生成するために、オーディオストリームＳｔ５をエンコードするタイミングを指示するオーディオエンコード信号である。
エンコードシステム制御部２００は、更に、シナリオデータＳｔ７に含まれるマルチメディアソースデータのそれぞれのストリームＳｔ１、Ｓｔ３、及びＳｔ５のエンコード対象部分間の時間的相互関係等の情報に基づいて、エンコードされたマルチメディアエンコードストリームを、所定の相互関係になるように配列するためのタイミング信号Ｓｔ２１、Ｓｔ２３、及びＳｔ２５を生成する。
エンコードシステム制御部２００は、１ビデオゾーンＶＺ分の各タイトルのタイトル編集単位（ＶＯＢ）に付いて、そのタイトル編集単位（ＶＯＢ）の再生時間を示す再生時間情報ＩＴおよびビデオ、オーディオ、サブピクチャのマルチメディアエンコードストリームを多重化（マルチプレクス）するシステムエンコードのためのエンコードパラメータを示すストリームエンコードデータＳｔ３３を生成する。
エンコードシステム制御部２００は、所定の相互的時間関係にある各ストリームのタイトル編集単位（ＶＯＢ）から、マルチメディアビットストリームＭＢＳの各タイトルのタイトル編集単位（ＶＯＢ）の接続または、各タイトル編集単位を重畳しているインターリーブタイトル編集単位（ＶＯＢs）を生成するための、各タイトル編集単位（ＶＯＢ）をマルチメディアビットストリームＭＢＳとして、フォーマットするためのフォーマットパラメータを規定する配列指示信号Ｓｔ３９を生成する。
ビデオエンコーダ３００は、編集情報作成部１００のソースストリームバッファ及び、エンコードシステム制御部２００に接続されており、ビデオストリームＳｔ１とビデオエンコードのためのエンコードパラメータデータ及びエンコード開始終了のタイミング信号のＳｔ９、例えば、エンコードの開始終了タイミング、ビットレート、エンコード開始終了時にエンコード条件、素材の種類として、ＮＴＳＣ信号またはＰＡＬ信号あるいはテレシネ素材であるかなどのパラメータがそれぞれ入力される。ビデオエンコーダ３００は、ビデオエンコード信号Ｓｔ９に基づいて、ビデオストリームＳｔ１の所定の部分をエンコードして、ビデオエンコードストリームＳｔ１５を生成する。
同様に、サブピクチャエンコーダ５００は、編集情報作成部１００のソースバッファ及び、エンコードシステム制御部２００に接続されており、サブピクチャストリームＳｔ３とサブピクチャストリームエンコード信号Ｓｔ１１がそれぞれ入力される。サブピクチャエンコーダ５００は、サブピクチャストリームエンコードのためのパラメータ信号Ｓｔ１１に基づいて、サブピクチャストリームＳｔ３の所定の部分をエンコードして、サブピクチャエンコードストリームＳｔ１７を生成する。
オーディオエンコーダ７００は、編集情報作成部１００のソースバッファ及び、エンコードシステム制御部２００に接続されており、オーディオストリームＳｔ５とオーディオエンコード信号Ｓｔ１３がそれぞれ入力される。オーディオエンコーダ７００は、オーディオエンコードのためのパラメータデータ及びエンコード開始終了タイミングの信号Ｓｔ１３に基づいて、オーディオストリームＳｔ５の所定の部分をエンコードして、オーディオエンコードストリームＳｔ１９を生成する。
ビデオストリームバッファ４００は、ビデオエンコーダ３００に接続されており、ビデオエンコーダ３００から出力されるビデオエンコードストリームＳｔ１５を保存する。ビデオストリームバッファ４００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２１の入力に基づいて、保存しているビデオエンコードストリームＳｔ１５を、調時ビデオエンコードストリームＳｔ２７として出力する。
同様に、サブピクチャストリームバッファ６００は、サブピクチャエンコーダ５００に接続されており、サブピクチャエンコーダ５００から出力されるサブピクチャエンコードストリームＳｔ１７を保存する。サブピクチャストリームバッファ６００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２３の入力に基づいて、保存しているサブピクチャエンコードストリームＳｔ１７を、調時サブピクチャエンコードストリームＳｔ２９として出力する。
また、オーディオストリームバッファ８００は、オーディオエンコーダ７００に接続されており、オーディオエンコーダ７００から出力されるオーディオエンコードストリームＳｔ１９を保存する。オーディオストリームバッファ８００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２５の入力に基づいて、保存しているオーディオエンコードストリームＳｔ１９を、調時オーディオエンコードストリームＳｔ３１として出力する。
システムエンコーダ９００は、ビデオストリームバッファ４００、サブピクチャストリームバッファ６００、及びオーディオストリームバッファ８００に接続されており、調時ビデオエンコードストリームＳｔ２７、調時サブピクチャエンコードストリームＳｔ２９、及び調時オーディオエンコードＳｔ３１が入力される。システムエンコーダ９００は、またエンコードシステム制御部２００に接続されており、ストリームエンコードデータＳｔ３３が入力される。
システムエンコーダ９００は、システムエンコードのエンコードパラメータデータ及びエンコード開始終了タイミングの信号Ｓｔ３３に基づいて、各調時ストリームＳｔ２７、Ｓｔ２９、及びＳｔ３１に多重化処理を施して、タイトル編集単位（ＶＯＢ）Ｓｔ３５を生成する。
ビデオゾーンフォーマッタ１３００は、システムエンコーダ９００に接続されて、タイトル編集単位Ｓｔ３５を入力される。ビデオゾーンフォーマッタ１３００は更に、エンコードシステム制御部２００に接続されて、マルチメディアビットストリームＭＢＳをフォーマットするためのフォーマットパラメータデータ及びフォーマット開始終タイミングの信号Ｓｔ３９を入力される。ビデオゾーンフォーマッタ１３００は、タイトル編集単位Ｓｔ３９に基づいて、１ビデオゾーンＶＺ分のタイトル編集単位Ｓｔ３５を、ユーザの要望シナリオに沿う順番に、並べ替えて、編集済みマルチメディアビットストリームＳｔ４３を生成する。
このユーザの要望シナリオの内容に編集された、マルチメディアビットストリームＳｔ４３は、記録部１２００に転送される。記録部１２００は、編集マルチメディアビットストリームＭＢＳを記録媒体Ｍに応じた形式のデータＳｔ４３に加工して、記録媒体Ｍに記録する。この場合、マルチメディアビットストリームＭＢＳには、予め、ビデオゾーンフォーマッタ１３００によって生成された媒体上の物理アドレスを示すボリュームファイルストラクチャＶＦＳが含まれる。
また、エンコードされたマルチメディアビットストリームＳｔ３５を、以下に述べるようなデコーダに直接出力して、編集されたタイトル内容を再生するようにしても良い。この場合は、マルチメディアビットストリームＭＢＳには、ボリュームファイルストラクチャＶＦＳは含まれないことは言うまでもない。
オーサリングデコーダＤＣ
次に、図３を参照して、本発明にかかるオーサリングエンコーダＥＣによって、編集されたマルチメディアビットストリームＭＢＳをデコードして、ユーザの要望のシナリオに沿って各タイトルの内容を展開する、オーサリングデコーダＤＣの一実施形態について説明する。なお、本実施形態に於いては、記録媒体Ｍに記録されたオーサリングエンコーダＥＣによってエンコードされたマルチメディアビットストリームＳｔ４５は、記録媒体Ｍに記録されている。
オーサリングデコーダＤＣは、マルチメディアビットストリーム再生部２０００、シナリオ選択部２１００、デコードシステム制御部２３００、ストリームバッファ２４００、システムデコーダ２５００、ビデオバッファ２６００、サブピクチャバッファ２７００、オーディオバッファ２８００、同期制御部２９００、ビデオデコーダ３８００、サブピクチャデコーダ３１００、オーディオデコーダ３２００、合成部３５００、ビデオデータ出力端子３６００、及びオーディオデータ出力端子３７００から構成されている。
マルチメディアビットストリーム再生部２０００は、記録媒体Ｍを駆動させる記録媒体駆動ユニット２００４、記録媒体Ｍに記録されている情報を読み取り二値の読み取り信号Ｓｔ５７を生成する読取ヘッドユニット２００６、読み取り信号ＳＴ５７に種々の処理を施して再生ビットストリームＳｔ６１を生成する信号処理部２００８、及び機構制御部２００２から構成される。機構制御部２００２は、デコードシステム制御部２３００に接続されて、マルチメディアビットストリーム再生指示信号Ｓｔ５３を受けて、それぞれ記録媒体駆動ユニット（モータ）２００４及び信号処理部２００８をそれぞれ制御する再生制御信号Ｓｔ５５及びＳｔ５９を生成する。
デコーダＤＣは、オーサリングエンコーダＥＣで編集されたマルチメディアタイトルの映像、サブピクチャ、及び音声に関する、ユーザの所望の部分が再生されるように、対応するシナリオを選択して再生するように、オーサリングデコーダＤＣに指示を与えるシナリオデータとして出力できるシナリオ選択部２１００を備えている。
シナリオ選択部２１００は、好ましくは、キーボード及びＣＰＵ等で構成される。ユーザーは、オーサリングエンコーダＥＣで入力されたシナリオの内容に基づいて、所望のシナリオをキーボード部を操作して入力する。ＣＰＵは、キーボード入力に基づいて、選択されたシナリオを指示するシナリオ選択データＳｔ５１を生成する。シナリオ選択部２１００は、例えば、赤外線通信装置等によって、デコードシステム制御部２３００に接続されている。デコードシステム制御部２３００は、Ｓｔ５１に基づいてマルチメディアビットストリーム再生部２０００の動作を制御する再生指示信号Ｓｔ５３を生成する。
ストリームバッファ２４００は所定のバッファ容量を有し、マルチメディアビットストリーム再生部２０００から入力される再生信号ビットストリームＳｔ６１を一時的に保存すると共に、及び各ストリームのアドレス情報及び同期初期値データを抽出してストリーム制御データＳｔ６３を生成する。ストリームバッファ２４００は、デコードシステム制御部２３００に接続されており、生成したストリーム制御データＳｔ６３をデコードシステム制御部２３００に供給する。
同期制御部２９００は、デコードシステム制御部２３００に接続されて、同期制御データＳｔ８１に含まれる同期初期値データ（SCR）を受け取り、内部のシステムクロック（STC）セットし、リセットされたシステムクロックＳｔ７９をデコードシステム制御部２３００に供給する。
デコードシステム制御部２３００は、システムクロックＳｔ７９に基づいて、所定の間隔でストリーム読出信号Ｓｔ６５を生成し、ストリームバッファ２４００に入力する。
ストリームバッファ２４００は、読出信号Ｓｔ６５に基づいて、再生ビットストリームＳｔ６１を所定の間隔で出力する。
デコードシステム制御部２３００は、更に、シナリオ選択データＳｔ５１に基づき、選択されたシナリオに対応するビデオ、サブピクチャ、オーディオの各ストリームのＩＤを示すデコードストリーム指示信号Ｓｔ６９を生成して、システムデコーダ２５００に出力する。
システムデコーダ２５００は、ストリームバッファ２４００から入力されてくるビデオ、サブピクチャ、及びオーディオのストリームを、デコード指示信号Ｓｔ６９の指示に基づいて、それぞれ、ビデオエンコードストリームＳｔ７１としてビデオバッファ２６００に、サブピクチャエンコードストリームＳｔ７３としてサブピクチャバッファ２７００に、及びオーディオエンコードストリームＳｔ７５としてオーディオバッファ２８００に出力する。
システムデコーダ２５００は、各ストリームＳｔ６７の各最小制御単位での再生開始時間（PTS）及びデコード開始時間（DTS）を検出し、時間情報信号Ｓｔ７７を生成する。この時間情報信号Ｓｔ７７は、デコードシステム制御部２３００を経由して、同期制御データＳｔ８１として同期制御部２９００に入力される。
同期制御部２９００は、同期制御データＳｔ８１として、各ストリームについて、それぞれがデコード後に所定の順番になるようなデコード開始タイミングを決定する。同期制御部２９００は、このデコードタイミングに基づいて、ビデオストリームデコード開始信号Ｓｔ８９を生成し、ビデオデコーダ３８００に入力する。同様に、同期制御部２９００は、サブピクチャデコード開始信号Ｓｔ９１及びオーディオデコード開始信号ｔ９３を生成し、サブピクチャデコーダ３１００及びオーディオデコーダ３２００にそれぞれ入力する。
ビデオデコーダ３８００は、ビデオストリームデコード開始信号Ｓｔ８９に基づいて、ビデオ出力要求信号Ｓｔ８４を生成して、ビデオバッファ２６００に対して出力する。ビデオバッファ２６００はビデオ出力要求信号Ｓｔ８４を受けて、ビデオストリームＳｔ８３をビデオデコーダ３８００に出力する。ビデオデコーダ３８００は、ビデオストリームＳｔ８３に含まれる再生時間情報を検出し、再生時間に相当する量のビデオストリームＳｔ８３の入力を受けた時点で、ビデオ出力要求信号Ｓｔ８４を無効（disable）にする。このようにして、所定再生時間に相当するビデオストリームがビデオデコーダ３８００でデコードされて、再生されたビデオ信号Ｓｔ１０４が合成部３５００に出力される。
同様に、サブピクチャデコーダ３１００は、サブピクチャデコード開始信号Ｓｔ９１に基づいて、サブピクチャ出力要求信号Ｓｔ８６を生成し、サブピクチャバッファ２７００に供給する。サブピクチャバッファ２７００は、サブピクチャ出力要求信号Ｓｔ８６を受けて、サブピクチャストリームＳｔ８５をサブピクチャデコーダ３１００に出力する。サブピクチャデコーダ３１００は、サブピクチャストリームＳｔ８５に含まれる再生時間情報に基づいて、所定の再生時間に相当する量のサブピクチャストリームＳｔ８５をデコードして、サブピクチャ信号Ｓｔ９９を再生して、合成部３５００に出力される。
合成部３５００は、ビデオ信号Ｓｔ１０４及びサブピクチャ信号Ｓｔ９９を重畳させて、マルチピクチャビデオ信号Ｓｔ１０５を生成し、ビデオ出力端子３６００に出力する。
オーディオデコーダ３２００は、オーディオデコード開始信号Ｓｔ９３に基づいて、オーディオ出力要求信号Ｓｔ８８を生成し、オーディオバッファ２８００に供給する。オーディオバッファ２８００は、オーディオ出力要求信号Ｓｔ８８を受けて、オーディオストリームＳｔ８７をオーディオデコーダ３２００に出力する。オーディオデコーダ３２００は、オーディオストリームＳｔ８７に含まれる再生時間情報に基づいて、所定の再生時間に相当する量のオーディオストリームＳｔ８７をデコードして、オーディオ出力端子３７００に出力する。
このようにして、ユーザのシナリオ選択に応答して、リアルタイムにユーザの要望するマルチメディアビットストリームＭＢＳを再生する事ができる。つまり、ユーザが異なるシナリオを選択する度に、オーサリングデコーダＤＣはその選択されたシナリオに対応するマルチメディアビットストリームＭＢＳを再生することによって、ユーザの要望するタイトル内容を再生することができる。
以上述べたように、本発明のオーサリングシステムに於いては、基本のタイトル内容に対して、各内容を表す最小編集単位の複数の分岐可能なサブストリームを所定の時間的相関関係に配列するべく、マルチメディアソースデータをリアルタイム或いは一括してエンコードして、複数の任意のシナリオに従うマルチメディアビットストリームを生成する事ができる。
また、このようにエンコードされたマルチメディアビットストリームを、複数のシナリオの内の任意のシナリオに従って再生できる。そして、再生中であっても、選択したシナリオから別のシナリオを選択し（切り替えて）も、その新たな選択されたシナリオに応じた（動的に）マルチメディアビットストリームを再生できる。また、任意のシナリオに従ってタイトル内容を再生中に、更に、複数のシーンの内の任意のシーンを動的に選択して再生することができる。
このように、本発明に於けるオーサリングシステムに於いては、エンコードしてマルチメディアビットストリームＭＢＳをリアルタイムに再生するだけでなく、繰り返し再生することができる。尚、オーサリングシステムの詳細に関しては、本特許出願と同一出願人による１９９６年９月２７日付けの日本国特許出願に開示されている。
ＤＶＤ
図４に、単一の記録面を有するＤＶＤの一例を示す。本例に於けるＤＶＤ記録媒体ＲＣ１は、レーザー光線ＬＳを照射し情報の書込及び読出を行う情報記録面ＲＳ１と、これを覆う保護層ＰＬ１からなる。更に、記録面ＲＳ１の裏側には、補強層ＢＬ１が設けられている。このように、保護層ＰＬ１側の面を表面ＳＡ、補強層ＢＬ１側の面を裏面ＳＢとする。この媒体ＲＣ１のように、片面に単一の記録層ＲＳ１を有するＤＶＤ媒体を、片面一層ディスクと呼ぶ。
図５に、図４のＣ１部の詳細を示す。記録面ＲＳ１は、金属薄膜等の反射膜を付着した情報層４１０９によって形成されている。その上に、所定の厚さＴ１を有する第１の透明基板４１０８によって保護層ＰＬ１が形成される。所定の厚さＴ２を有する第二の透明基板４１１１によって補強層ＢＬ１が形成される。第一及び第二の透明基盤４１０８及び４１１１は、その間に設けられた接着層４１１０によって、互いに接着されている。
さらに、必要に応じて第２の透明基板４１１１の上にラベル印刷用の印刷層４１１２が設けられる。印刷層４１１２は補強層ＢＬ１の基板４１１１上の全領域ではなく、文字や絵の表示に必要な部分のみ印刷され、他の部分は透明基板４１１１を剥き出しにしてもよい。その場合、裏面ＳＢ側から見ると、印刷されていない部分では記録面ＲＳ１を形成する金属薄膜４１０９の反射する光が直接見えることになり、例えば、金属薄膜がアルミニウム薄膜である場合には背景が銀白色に見え、その上に印刷文字や図形が浮き上がって見える。印刷層４１１２は、補強層ＢＬ１の全面に設ける必要はなく、用途に応じて部分的に設けてもよい。
図６に、更に図５のＣ２部の詳細を示す。光ビームＬＳが入射し情報が取り出される表面ＳＡに於いて、第１の透明基板４１０８と情報層４１０９の接する面は、成形技術により凹凸のピットが形成され、このピットの長さと間隔を変えることにより情報が記録される。つまり、情報層４１０９には第１の透明基板４１０８の凹凸のピット形状が転写される。このピットの長さや間隔はＣＤの場合に比べ短くなり、ピット列で形成する情報トラックもピッチも狭く構成されている。その結果、面記録密度が大幅に向上している。
また、第１の透明基板４１０８のピットが形成されていない表面ＳＡ側は、平坦な面となっている。第２の透明基板４１１１は、補強用であり、第１の透明基板４１０８と同じ材質で構成される両面が平坦な透明基板である。そして所定の厚さＴ１及びＴ２は、共に同じく、例えば０．６ｍｍが好ましいが、それに限定されるものでは無い。
情報の取り出しは、ＣＤの場合と同様に、光ビームＬＳが照射されることにより光スポットの反射率変化として取り出される。ＤＶＤシステムに於いては、対物レンズの開口数ＮＡを大きく、そして光ビームの波長λ小さすることができるため、使用する光スポットＬｓの直径を、ＣＤでの光スポットの約１／１．６に絞り込むことができる。これは、ＣＤシステムに比べて、約１．６倍の解像度を有することを意味する。
ＤＶＤからのデータ読み出しには、波長の短い６５０ｎｍの赤色半導体レーザと対物レンズのＮＡ（開口数）を０．６ｍｍまで大きくした光学系とが用いれらる。これと透明基板の厚さＴを０．６ｍｍに薄くしたこととがあいまって、直径１２０ｍｍの光ディスクの片面に記録できる情報容量が５Ｇバイトを越える。
ＤＶＤシステムは、上述のように、単一の記録面ＲＳ１を有する片側一層ディスクＲＣ１に於いても、ＣＤに比べて記録可能な情報量が１０倍近いため、単位あたりのデータサイズが非常に大きい動画像を、その画質を損なわずに取り扱うことができる。その結果、従来のＣＤシステムでは、動画像の画質を犠牲にしても、再生時間が７４分であるのに比べて、ＤＶＤでは、高画質動画像を２時間以上に渡って記録再生可能である。このようにＤＶＤは、動画像の記録媒体に適しているという特徴がある。
図７及び図８に、上述の記録面ＲＳを複数有するＤＶＤ記録媒体の例を示す。図７のＤＶＤ記録媒体ＲＣ２は、同一側、つまり表側ＳＡに、二層に配された第一及び半透明の第二の記録面ＲＳ１及びＲＳ２を有している。第一の記録面ＲＳ１及び第二の記録面ＲＳ２に対して、それぞれ異なる光ビームＬＳ１及びＬＳ２を用いることにより、同時に二面からの記録再生が可能である。また、光ビームＬＳ１或いはＬＳ２の一方にて、両記録面ＲＳ１及びＲＳ２に対応させても良い。このように構成されたＤＶＤ記録媒体を片面二層ディスクと呼ぶ。この例では、２枚の記録層ＲＳ１及びＲＳ２を配したが、必要に応じて、２枚以上の記録層ＲＳを配したＤＶＤ記録媒体を構成できることは、言うまでもない。このようなディスクを、片面多層ディスクと呼ぶ。
一方、図８のＤＶＤ記録媒体ＲＣ３は、反対側、つまり表側ＳＡ側には第一の記録面ＲＳ１が、そして裏側ＳＢには第二の記録面ＲＳ２、それぞ設けれている。これらの例に於いては、一枚のＤＶＤに記録面を二層もうけた例を示したが、二層以上の多層の記録面を有するように構成できることは言うまでもない。図７の場合と同様に、光ビームＬＳ１及びＬＳ２を個別に設けても良いし、一つの光ビームで両方の記録面ＲＳ１及びＲＳ２の記録再生に用いることもできる。このように構成されたＤＶＤ記録媒体を両面一層ディスクと呼ぶ。また、片面に２枚以上の記録層ＲＳを配したＤＶＤ記録媒体を構成できることは、言うまでもない。このようなディスクを、両面多層ディスクと呼ぶ。
図９及び図１０に、ＤＶＤ記録媒体ＲＣの記録面ＲＳを光ビームＬＳの照射側から見た平面図をそれぞれ示す。ＤＶＤには、内周から外周方向に向けて、情報を記録するトラックＴＲが螺旋状に連続して設けられている。トラックＴＲは、所定のデータ単位毎に、複数のセクターに分割されている。尚、図９では、見易くするために、トラック１周あたり３つ以上のセクターに分割されているように表されている。
通常、トラックＴＲは、図９に示すように、ディスクＲＣＡの内周の端点ＩＡから外周の端点ＯＡに向けて時計回り方向ＤｒＡに巻回されている。このようなディスクＲＣＡを時計回りディスク、そのトラックを時計回りトラックＴＲＡと呼ぶ。また、用途によっては、図１０に示すように、ディスクＲＣＢの外周の端点ＯＢから内周の端点ＩＢに向けて、時計周り方向ＤｒＢに、トラックＴＲＢが巻回されている。この方向ＤｒＢは、内周から外周に向かって見れば、反時計周り方向であるので、図９のディスクＲＣＡと区別するために、反時計回りディスクＲＣＢ及び反時計回りトラックＴＲＢと呼ぶ。上述のトラック巻回方向ＤｒＡ及びＤｒＢは、光ビームが記録再生の為にトラックをスキャンする動き、つまりトラックパスである。トラック巻回方向ＤｒＡの反対方向ＲｄＡが、ディスクＲＣＡを回転させる方向である。トラック巻回方向ＤｒＢの反対方向ＲｄＢが、ディスクＲＣＢを回転させる方向である。
図１１に、図７に示す片側二層ディスクＲＣ２の一例であるディスクＲＣ２ｏの展開図を模式的に示す。下側の第一の記録面ＲＳ１は、図９に示すように時計回りトラックＴＲＡが時計回り方向ＤｒＡに設けられている。上側の第二の記録面ＲＳ２には、図１２に示すように反時計回りトラックＴＲＢが反時計回り方向ＤｒＢに設けられている。この場合、上下側のトラック外周端部ＯＢ及びＯＡは、ディスクＲＣ２ｏの中心線に平行な同一線上に位置している。上述のトラックＴＲの巻回方向ＤｒＡ及びＤｒＢは、共に、ディスクＲＣに対するデータの読み書きの方向でもある。この場合、上下のトラックの巻回方向は反対、つまり、上下の記録層のトラックパスＤｒＡ及びＤｒＢが対向している。
対向トラックパスタイプの片側二層ディスクＲＣ２ｏは、第一記録面ＲＳ１に対応してＲｄＡ方向に回転されて、光ビームＬＳがトラックパスＤｒＡに沿って、第一記録面ＲＳ１のトラックをトレースして、外周端部ＯＡに到達した時点で、光ビームＬＳを第二の記録面ＲＳ２の外周端部ＯＢに焦点を結ぶように調節することで、光ビームＬＳは連続的に第二の記録面ＲＳ２のトラックをトレースすることができる。このようにして、第一及び第二の記録面ＲＳ１及びＲＳ２のトラックＴＲＡとＴＲＢとの物理的距離は、光ビームＬＳの焦点を調整することで、瞬間的に解消できる。その結果、対向トラックパスタイプの片側二層ディスクＲＣｏに於いては、上下二層上のトラックを一つの連続したトラックＴＲとして処理することが容易である。故に、図１を参照して述べた、オーサリングシステムに於ける、マルチメディアデータの最大管理単位であるマルチメディアビットストリームＭＢＳを、一つの媒体ＲＣ２ｏの二層の記録層ＲＳ１及びＲＳ２に連続的に記録することができる。
尚、記録面ＲＳ１及びＲＳ２のトラックの巻回方向を、本例で述べたのと反対に、つまり第一記録面ＲＳ１に反時計回りトラックＴＲＢを、第二記録面に時計回りトラックＴＲＡを設け場合は、ディスクの回転方向をＲｄＢに変えることを除けば、上述の例と同様に、両記録面を一つの連続したトラックＴＲを有するものとして用いる。よって、簡便化の為にそのような例に付いての図示等の説明は省く。このように、ＤＶＤを構成することによって、長大なタイトルのマルチメディアビットストリームＭＢＳを一枚の対向トラックパスタイプ片面二層ディスクＲＣ２ｏに収録できる。このようなＤＶＤ媒体を、片面二層対向トラックパス型ディスクと呼ぶ。
図１２に、図７に示す片側二層ディスクＲＣ２の更なる例ＲＣ２ｐの展開図を模式に示す。第一及び第二の記録面ＲＳ１及びＲＳ２は、図９に示すように、共に時計回りトラックＴＲＡが設けられている。この場合、片側二層、ディスクＲＣ２ｐは、ＲｄＡ方向に回転されて、光ビームの移動方向はトラックの巻回方向と同じ、つまり、上下の記録層のトラックパスが互いに平行である（Parallel trackpath）。この場合に於いても、好ましくは、上下側のトラック外周端部ＯＡ及びＯＡは、ディスクＲＣ２ｐの中心線に平行な同一線上に位置している。それ故に、外周端部ＯＡに於いて、光ビームＬＳの焦点を調節することで、図１１で述べた媒体ＲＣ２ｏと同様に、第一記録面ＲＳ１のトラックＴＲＡの外周端部ＯＡから第二記録面ＲＳ２のトラックＴＲＡの外周端部ＯＡへ瞬間的に、アクセス先を変えることができる。
しかしながら、光ビームＬＳによって、第二の記録面ＲＳ２のトラックＴＲＡを時間的に連続してアクセスするには、媒体ＲＣ２ｐを逆（反ＲｄＡ方向に）回転させれば良い。しかし、光りビームの位置に応じて、媒体の回転方向を変えるのは効率が良くないので、図中で矢印で示されているように、光ビームＬＳが第一記録面ＲＳ１のトラック外周端部ＯＡに達した後に、光ビームを第二記録面ＲＳ２のトラック内周端部ＩＡに、移動させることで、論理的に連続した一つのトラックとして用いることができ。また、必要であれば、上下の記録面のトラックを一つの連続したトラックとして扱わずに、それぞれ別のトラックとして、各トラックにマルチメディアビットストリームＭＢＳを一タイトルづつ記録してもよい。このようなＤＶＤ媒体を、片面二層平行トラックパス型ディスクと呼ぶ。
尚、両記録面ＲＳ１及びＲＳ２のトラックの巻回方向を本例で述べたのと反対に、つまり反時計回りトラックＴＲＢを設けても、ディスクの回転方向をＲｄＢにすることを除けば同様である。この片面二層平行トラックパス型ディスクは、百科事典のような頻繁にランダムアクセスが要求される複数のタイトルを一枚の媒体ＲＣ２ｐに収録する用途に適している。
図１３に、図８に示す片面にそれぞれ一層の記録面ＲＳ１及びＲＳ２を有する両面一層型のＤＶＤ媒体ＲＣ３の一例ＲＣ３ｓの展開図を示す。一方の記録面ＲＳ１は、時計回りトラックＴＲＡが設けられ、他方の記録面ＲＳ２には、反時計回りトラックＴＲＢが設けられている。この場合に於いても、好ましくは、両記録面のトラック外周端部ＯＡ及びＯＢは、ディスクＲＣ３ｓの中心線に平行な同一線上に位置している。これらの記録面ＲＳ１とＲＳ２は、トラックの巻回方向は反対であるが、トラックパスが互いに面対称の関係にある。このようなディスクＲＣ３ｓを両面一層対称トラックパス型ディスクと呼ぶ。この両面一層対称トラックパス型ディスクＲＣ３ｓは、第一の記録媒体ＲＳ１に対応してＲｄＡ方向に回転される。その結果、反対側の第二の記録媒体ＲＳ２のトラックパスは、そのトラック巻回方向ＤｒＢと反対の方向、つまりＤｒＡである。この場合、連続、非連続的に関わらず、本質的に二つの記録面ＲＳ１及びＲＳ２に同一の光ビームＬＳでアクセスする事は実際的ではない。それ故に、表裏の記録面のそれぞれに、マルチメディアビットストリームＭＳＢを記録する。
図１４に、図８に示す両面一層ＤＶＤ媒体ＲＣ３の更なる例ＲＣ３ａの展開図を示す。両記録面ＲＳ１及びＲＳ２には、共に、図９に示すように時計回りトラックＴＲＡが設けられている。この場合に於いても、好ましくは、両記録面側ＲＳ１及びＲＳ２のトラック外周端部ＯＡ及びＯＡは、ディスクＲＣ３ａの中心線に平行な同一線上に位置している。但し、本例に於いては、先に述べた両面一層対象トラックパス型ディスクＲＣ３ｓと違って、これらの記録面ＲＳ１とＲＳ２上のトラックは非対称の関係にある。このようなディスクＲＣ３ａを両面一層非対象トラックパス型ディスクと呼ぶ。この両面一層非対象トラックパス型ディスクＲＣ３ｓは、第一の記録媒体ＲＳ１に対応してＲｄＡ方向に回転される。その結果、反対側の第二の記録面ＲＳ２のトラックパスは、そのトラック巻回方向ＤｒＡと反対の方向、つまりＤｒＢ方向である。
故に、単一の光ビームＬＳを第一記録面ＲＳ１の内周から外周へ、そして第二記録面ＲＳ２の外周から内周へと、連続的に移動させれば記録面毎に異なる光ビーム源を用意しなくても、媒体ＰＣ３ａを表裏反転させずに両面の記録再生が可能である。また、この両面一層非対象トラックパス型ディスクでは、両記録面ＲＳ１及びＲＳ２のトラックパスが同一である。それ故に、媒体ＰＣ３ａの表裏を反転することにより、記録面毎に異なる光ビーム源を用意しなくても、単一の光ビームＬＳで両面の記録再生が可能であり、その結果、装置を経済的に製造することができる。尚、両記録面ＲＳ１及びＲＳ２に、トラックＴＲＡの代わりにトラックＴＲＢを設けても、本例と基本的に同様である。
上述の如く、記録面の多層化によって、記録容量の倍増化が容易なＤＶＤシステムによって、１枚のディスク上に記録された複数の動画像データ、複数のオーディオデータ、複数のグラフィックスデータなどをユーザとの対話操作を通じて再生するマルチメディアの領域に於いてその真価を発揮する。つまり、従来ソフト提供者の夢であった、ひとつの映画を製作した映画の品質をそのまま記録で、多数の異なる言語圏及び多数の異なる世代に対して、一つの媒体により提供することを可能とする。
パレンタル
従来は、映画タイトルのソフト提供者は、同一のタイトルに関して、全世界の多数の言語、及び欧米各国で規制化されているパレンタルロックに対応した個別のパッケージとしてマルチレイティッドタイトルを制作、供給、管理しないといけなかった。この手間は、たいへん大きなものであった。また、これは、高画質もさることながら、意図した通りに再生できることが重要である。このような願いの解決に一歩近づく記録媒体がＤＶＤである。
マルチアングル
また、対話操作の典型的な例として、１つのシーンを再生中に、別の視点からのシーンに切替えるというマルチアングルという機能が要求されている。これは、例えば、野球のシーンであれば、バックネット側から見た投手、捕手、打者を中心としたアングル、バックネット側から見た内野を中心としたアングル、センター側から見た投手、捕手、打者を中心としたアングルなどいくつかのアングルの中から、ユーザが好きなものをあたかもカメラを切り替えているように、自由に選ぶというようなアプリケーションの要求がある。
ＤＶＤでは、このような要求に応えるべく動画像、オーディオ、グラフィックスなどの信号データを記録する方式としてビデオＣＤと同様のＭＰＥＧが使用されている。ビデオＣＤとＤＶＤとでは、その容量と転送速度および再生装置内の信号処理性能の差から同じＭＰＥＧ形式といっても、ＭＰＥＧ１とＭＰＥＧ２という多少異なる圧縮方式、データ形式が採用されている。ただし、ＭＰＥＧ１とＭＰＥＧ２の内容及びその違いについては、本発明の趣旨とは直接関係しないため説明を省略する（例えば、ＩＳＯ１１１７２、ＩＳＯ１３８１８のＭＰＥＧ規格書参照）。
本発明に掛かるＤＶＤシステムのデータ構造に付いて、図１６、図１７、図１８、図１９、及び図２０を参照して、後で説明する。
マルチシーン
上述の、パレンタルロック再生及びマルチアングル再生の要求を満たすために、各要求通りの内容のタイトルを其々に用意していれば、ほんの一部分の異なるシーンデータを有する概ね同一内容のタイトルを要求数だけ用意して、記録媒体に記録しておかなければならない。これは、記録媒体の大部分の領域に同一のデータを繰り返し記録することになるので、記録媒体の記憶容量の利用効率を著しく疎外する。さらに、ＤＶＤの様な大容量の記録媒体をもってしても、全ての要求に対応するタイトルを記録することは不可能である。この様な問題は、基本的に記録媒体の容量を増やせれば解決するとも言えるが、システムリソースの有効利用の観点から非常に望ましくない。
ＤＶＤシステムに於いては、以下にその概略を説明するマルチシーン制御を用いて、多種のバリエーションを有するタイトルを最低必要限度のデータでもって構成し、記録媒体等のシステムリソースの有効活用を可能としている。つまり、様々なバリエーションを有するタイトルを、各タイトル間での共通のデータからなる基本シーン区間と、其々の要求に即した異なるシーン群からなるマルチシーン区間とで構成する。そして、再生時に、ユーザが各マルチシーン区間での特定のシーンを自由、且つ随時に選択できる様にしておく。なお、パレンタルロック再生及びマルチアングル再生を含むマルチシーン制御に関して、後で、図２１を参照して説明する。
ＤＶＤシステムのデータ構造
図２２に、本発明に掛かるＤＶＤシステムに於ける、オーサリングデータのデータ構造を示す。ＤＶＤシステムでは、マルチメディアビットストリームＭＢＳを記録する為に、リードイン領域ＬＩ、ボリューム領域ＶＳと、リードアウト領域ＬＯに３つに大別される記録領域を備える。
リードイン領域ＬＩは、光ディスクの最内周部に、例えば、図９及び図１０で説明したディスクに於いては、そのトラックの内周端部ＩＡ及びＩＢに位置している。リードイン領域ＬＩには、再生装置の読み出し開始時の動作安定用のデータ等が記録される。
リードアウト領域ＬＯは、光ディスクの最外周に、つまり図９及び図１０で説明したトラックの外周端部ＯＡ及びＯＢに位置している。このリードアウト領域ＬＯには、ボリューム領域ＶＳが終了したことを示すデータ等が記録される。
ボリューム領域ＶＳは、リードイン領域ＬＩとリードアウト領域ＬＯの間に位置し、２０４８バイトの論理セクタＬＳが、ｎ＋１個（ｎは０を含む正の整数）一次元配列として記録される。各論理セクタＬＳはセクタナンバー（＃０、＃１、＃２、・・＃ｎ）で区別される。更に、ボリューム領域ＶＳは、ｍ＋１個の論理セクタＬＳ＃０〜ＬＳ＃ｍ（ｍはｎより小さい０を含む正の整数）から形成されるボリューム／ファイル管理領域ＶＦＳと、ｎ−ｍ個の論理セクタＬＳ＃ｍ＋１〜ＬＳ＃ｎから形成されるファイルデータ領域ＦＤＳに分別される。このファイルデータ領域ＦＤＳは、図１に示すマルチメディアビットストリームＭＢＳに相当する。
ボリューム／ファイル管理領域ＶＦＳは、ボリューム領域ＶＳのデータをファイルとして管理する為のファイルシステムであり、ディスク全体の管理に必要なデータの収納に必要なセクタ数ｍ（ｍはｎより小さい自然数）の論理セクタＬＳ＃０からＬＳ＃ｍによって形成されている。このボリューム／ファイル管理領域ＶＦＳには、例えば、ＩＳＯ９６６０、及びＩＳＯ１３３４６などの規格に従って、ファイルデータ領域ＦＤＳ内のファイルの情報が記録される。
ファイルデータ領域ＦＤＳは、ｎ−ｍ個の論理セクタＬＳ＃ｍ＋１〜ＬＳ＃ｎから構成されており、それぞれ、論理セクタの整数倍（２０４８×Ｉ、Ｉは所定の整数）のサイズを有するビデオマネージャＶＭＧと、及びｋ個のビデオタイトルセットＶＴＳ＃１〜ＶＴＳ＃ｋ（ｋは、１００より小さい自然数）を含む。
ビデオマネージャＶＭＧは、ディスク全体のタイトル管理情報を表す情報を保持すると共に、ボリューム全体の再生制御の設定／変更を行うためのメニューであるボリュームメニューを表す情報を有する。ビデオタイトルセットＶＴＳ＃ｋ‘は、単にビデオファイルとも呼び、動画、オーディオ、静止画などのデータからなるタイトルを表す。
図１６は、図２２のビデオタイトルセットＶＴＳの内部構造を示す。ビデオタイトルセットＶＴＳは、ディスク全体の管理情報を表すＶＴＳ情報（ＶＴＳＩ）と、マルチメディアビットストリームのシステムストリームであるＶＴＳタイトル用ＶＯＢＳ（VTSTT_VOBS）に大別される。先ず、以下にＶＴＳ情報について説明した後に、ＶＴＳタイトル用ＶＯＢＳについて説明する。
ＶＴＳ情報は、主に、ＶＴＳＩ管理テーブル（VTSI_MAT）及びＶＴＳＰＧＣ情報テーブル（VTS_PGCIT）を含む。
ＶＴＳＩ管理テーブルは、ビデオタイトルセットＶＴＳの内部構成及び、ビデオタイトルセットＶＴＳ中に含まれる選択可能なオーディオストリームの数、サブピクチャの数およびビデオタイトルセットＶＴＳの格納場所等が記述される。
ＶＴＳＰＧＣ情報管理テーブルは、再生順を制御するプログラムチェーン（ＰＧＣ）を表すｉ個（ｉは自然数）のＰＧＣ情報VTS_PGCI#1〜VTS_PGCI#Iを記録したテーブルである。各エントリーのＰＧＣ情報VTS_PGCI#Iは、プログラムチェーンを表す情報であり、ｊ個（ｊは自然数）のセル再生情報C_PBI#1〜C_PBI#jから成る。各セル再生情報C_PBI#jは、セルの再生順序や再生に関する制御情報を含む。
また、プログラムチェーンＰＧＣとは、タイトルのストーリーを記述する概念であり、セル（後述）の再生順を記述することでタイトルを形成する。上記ＶＴＳ情報は、例えば、メニューに関する情報の場合には、再生開始時に再生装置内のバッファに格納され、再生の途中でリモコンの「メニュー」キーが押下された時点で再生装置により参照され、例えば＃１のトップメニューが表示される。階層メニューの場合は、例えば、プログラムチェーン情報VTS_PGCI#1が「メニュー」キー押下により表示されるメインメニューであり、＃２から＃９がリモコンの「テンキー」の数字に対応するサブメニュー、＃１０以降がさらに下位層のサブメニューというように構成される。また例えば、＃１が「メニュー」キー押下により表示されるトップメニュー、＃２以降が「テン」キーの数字に対応して再生される音声ガイダンスというように構成される。
メニュー自体は、このテーブルに指定される複数のプログラムチェーンで表されるので、階層メニューであろうが、音声ガイダンスを含むメニューであろうが、任意の形態のメニューを構成することを可能にしている。
また例えば、映画の場合には、再生開始時に再生装置内のバッファに格納され、ＰＧＣ内に記述しているセル再生順序を再生装置が参照し、システムストリームを再生する。
ここで言うセルとは、システムストリームの全部または一部であり、再生時のアクセスポイントとして使用される。たとえば、映画の場合は、タイトルを途中で区切っているチャプターとして使用する事ができる。
尚、エントリーされたＰＧＣ情報C_PBI#jの各々は、セル再生処理情報及び、セル情報テーブルを含む。再生処理情報は、再生時間、繰り返し回数などのセルの再生に必要な処理情報から構成される。ブロックモード（ＣＢＭ）、セルブロックタイプ（CBT）、シームレス再生フラグ（SPF）、インターリーブブロック配置フラグ（IAF）、ＳＴＣ再設定フラグ（ＳＴＣＤＦ）、セル再生時間（C_PBTM）、シームレスアングル切替フラグ（SACF）、セル先頭ＶＯＢＵ開始アドレス（C_FVOBU_SA）、及びセル終端ＶＯＢＵ開始アドレス（C_LVOBU_SA）から成る。
ここで言う、シームレス再生とは、ＤＶＤシステムに於いて、映像、音声、副映像等のマルチメディアデータを、各データ及び情報を中断する事無く再生することであり、詳しくは、図２３及び図２４参照して後で説明する。
ブロックモードＣＢＭは複数のセルが１つの機能ブロックを構成しているか否かを示し、機能ブロックを構成する各セルのセル再生情報は、連続的にＰＧＣ情報内に配置され、その先頭に配置されるセル再生情報のＣＢＭには、“ブロックの先頭セル”を示す値、その最後に配置されるセル再生情報のＣＢＭには、“ブロックの最後のセル”を示す値、その間に配置されるセル再生情報のＣＢＭには、“ブロック内のセル”を示す値を示す。
セルブロックタイプCBTは、ブロックモードＣＢＭで示したブロックの種類を示すものである。例えばマルチアングル機能を設定する場合には、各アングルの再生に対応するセル情報を、前述したような機能ブロックとして設定し、さらにそのブロックの種類として、各セルのセル再生情報のCBTに“アングル”を示す値を設定する。
シームレス再生フラグSPFは、該セルが前に再生されるセルまたはセルブロックとシームレスに接続して再生するか否かを示すフラグであり、前セルまたは前セルブロックとシームレスに接続して再生する場合には、該セルのセル再生情報のSPFにはフラグ値１を設定する。そうでない場合には、フラグ値０を設定する。
インターリーブアロケーションフラグＩＡＦは、該セルがインターリーブ領域に配置されているか否かを示すフラグであり、インターリーブ領域に配置されている場合には、該セルのインターリーブアロケーションフラグＩＡＦにはフラグ値１を設定する。そうでない場合には、フラグ値０を設定する。
ＳＴＣ再設定フラグＳＴＣＤＦは、同期をとる際に使用するＳＴＣをセルの再生時に再設定する必要があるかないかの情報であり、再設定が必要な場合にはフラグ値１を設定する。そうでない場合には、フラグ値０を設定する。
シームレスアングルチェンジフラグＳＡＣＦは、該セルがアングル区間に属しかつ、シームレスに切替える場合、該セルのシームレスアングルチェンジフラグＳＡＣＦにはフラグ値１を設定する。そうでない場合には、フラグ値０を設定する。
セル再生時間（C_PBTM）はセルの再生時間をビデオのフレーム数精度で示している。
C_LVOBU_SAは、セル終端ＶＯＢＵ開始アドレスを示し、その値はＶＴＳタイトル用ＶＯＢＳ（VTSTT_VOBS）の先頭セルの論理セクタからの距離をセクタ数で示している。C_FVOBU_SAはセル先頭ＶＯＢＵ開始アドレスを示し、ＶＴＳタイトル用ＶＯＢＳ（VTSTT_VOBS）の先頭セルの論理セクタから距離をセクタ数で示している。
次に、ＶＴＳタイトル用ＶＯＢＳ、つまり、１マルチメディアシステムストリームデータVTSTT_VOBSに付いて説明する。システムストリームデータVTSTT_VOBSは、ビデオオブジェクトＶＯＢと呼ばれるｉ個（ｉは自然数）のシステムストリームＳＳからなる。各ビデオオブジェクトVOB#1〜VOB#iは、少なくとも１つのビデオデータで構成され、場合によっては最大８つのオーディオデータ、最大３２の副映像データまでがインターリーブされて構成される。
各ビデオオブジェクトＶＯＢは、ｑ個（ｑは自然数）のセルＣ＃１〜Ｃ＃ｑから成る。各セルＣは、ｒ個（ｒは自然数）のビデオオブジェクトユニットＶＯＢＵ＃１〜ＶＯＢＵ＃ｒから形成される。
各ＶＯＢＵは、ビデオエンコードのリフレッシュ周期であるＧＯＰの複数個及び、それに相当する時間のオーディオおよびサブピクチャからなる。また、各ＶＯＢＵの先頭には、該ＶＯＢＵの管理情報であるナブパックＮＶを含む。ナブパックＮＶの構成については、図１９を参照して後述する。
図１７に、ビデオゾーンＶＺ（図２２）の内部構造を示す。同図に於いて、ビデオエンコードストリームＳｔ１５は、ビデオエンコーダ３００によってエンコードされた、圧縮された一次元のビデオデータ列である。オーディオエンコードストリームＳｔ１９も、同様に、オーディオエンコーダ７００によってエンコードされた、ステレオの左右の各データが圧縮、及び統合された一次元のオーディオデータ列である。また、オーディオデータとしてサラウンド等のマルチチャネルでもよい。
システムストリームＳｔ３５は、図２２で説明した、２０４８バイトの容量を有する論理セクタＬＳ＃ｎに相当するバイト数を有するパックが一次元に配列された構造を有している。システムストリームＳｔ３５の先頭、つまりＶＯＢＵの先頭には、ナビゲーションパックＮＶと呼ばれる、システムストリーム内のデータ配列等の管理情報を記録した、ストリーム管理パックが配置される。
ビデオエンコードストリームＳｔ１５及びオーディオエンコードストリームＳｔ１９は、それぞれ、システムストリームのパックに対応するバイト数毎にパケット化される。これらパケットは、図中で、Ｖ１、Ｖ２、Ｖ３、Ｖ４、・・、及びＡ１、Ａ２、・・と表現されている。これらパケットは、ビデオ、オーディオ各データ伸長用のデコーダの処理時間及びデコーダのバッファサイズを考慮して適切な順番に図中のシステムストリームＳｔ３５としてインターリーブされ、パケットの配列をなす。例えば、本例ではＶ１、Ｖ２、Ａ１、Ｖ３、Ｖ４、Ａ２の順番に配列されている。
図１７では、一つの動画像データと一つのオーディオデータがインターリーブされた例を示している。しかし、ＤＶＤシステムに於いては、記録再生容量が大幅に拡大され、高速の記録再生が実現され、信号処理用ＬＳＩの性能向上が図られた結果、一つの動画像データに複数のオーディオデータや複数のグラフィックスデータである副映像データが、一つのＭＰＥＧシステムストリームとしてインターリーブされた形態で記録され、再生時に複数のオーディオデータや複数の副映像データから選択的な再生を行うことが可能となる。図１８に、このようなＤＶＤシステムで利用されるシステムストリームの構造を表す。
図１８に於いても、図１７と同様に、パケット化されたビデオエンコードストリームＳｔ１５は、Ｖ１、Ｖ２、Ｖ３、Ｖ４、・・・と表されている。但し、この例では、オーディオエンコードストリームＳｔ１９は、一つでは無く、Ｓｔ１９Ａ、Ｓｔ１９Ｂ、及びＳｔ１９Ｃと３列のオーディオデータ列がソースとして入力されている。更に、副画像データ列であるサブピクチャエンコードストリームＳｔ１７も、Ｓｔ１７Ａ及びＳｔ１７Ｂと二列のデータがソースとして入力されている。これら、合計６列の圧縮データ列が、一つのシステムストリームＳｔ３５にインターリーブされる。
ビデオデータはＭＰＥＧ方式で符号化されており、ＧＯＰという単位が圧縮の単位になっており、ＧＯＰ単位は、標準的にはＮＴＳＣの場合、１５フレームで１ＧＯＰを構成するが、そのフレーム数は可変になっている。インターリーブされたデータ相互の関連などの情報をもつ管理用のデータを表すストリーム管理パックも、ビデオデータを基準とするＧＯＰを単位とする間隔で、インターリーブされる事になり、ＧＯＰを構成するフレーム数が変われば、その間隔も変動する事になる。ＤＶＤでは、その間隔を再生時間長で、０．４秒から１．０秒の範囲内として、その境界はＧＯＰ単位としている。もし、連続する複数のＧＯＰの再生時間が１秒以下であれば、その複数ＧＯＰのビデオデータに対して、管理用のデータパックが１つのストリーム中にインターリーブされる事になる。
ＤＶＤではこのような、管理用データパックをナブパックＮＶと呼び、このナブパックＮＶから、次のナブパックＮＶ直前のパックまでをビデオオブジェクトユニット（以下ＶＯＢＵと呼ぶ）と呼び、一般的に１つのシーンと定義できる１つの連続した再生単位をビデオオブジェクトと呼び（以下ＶＯＢと呼ぶ）、１つ以上のＶＯＢＵから構成される事になる。また、ＶＯＢが複数集まったデータの集合をＶＯＢセット（以下ＶＯＢＳと呼ぶ）と呼ぶ。これらは、ＤＶＤに於いて初めて採用されたデータ形式である。
このように複数のデータ列がインターリーブされる場合、インターリーブされたデータ相互の関連を示す管理用のデータを表すナビゲーションパックＮＶも、所定のパック数単位と呼ばれる単位でインターリーブされる必要がある。ＧＯＰは、通常１２から１５フレームの再生時間に相当する約０．５秒のビデオデータをまとめた単位であり、この時間の再生に要するデータパケット数に一つのストリーム管理パケットがインターリーブされると考えられる。
図１９は、システムストリームを構成する、インターリーブされたビデオデータ、オーディオデータ、副映像データのパックに含まれるストリーム管理情報を示す説明図である。同図のようにシステムストリーム中の各データは、ＭＰＥＧ２に準拠するパケット化およびパック化された形式で記録される。ビデオ、オーディオ、及び副画像データ共、パケットの構造は、基本的に同じである。ＤＶＤシステムに於いては、１パックは、前述の如く２０４８バイトの容量を有し、ＰＥＳパケットと呼ばれる１パケットを含み、パックヘッダＰＫＨ、パケットヘッダＰＴＨ、及びデータ領域から成る。
パックヘッダＰＫＨ中には、そのパックが図２６におけるストリームバッファ２４００からシステムデコーダ２５００に転送されるべき時刻、つまりＡＶ同期再生のための基準時刻情報を示すＳＣＲが記録されている。ＭＰＥＧに於いては、このＳＣＲをデコーダ全体の基準クロックとすることを想定しているが、ＤＶＤなどのディスクメディアの場合には、個々のプレーヤに於いて閉じた時刻管理で良い為、別途にデコーダ全体の時刻の基準となるクロックを設けている。また、パケットヘッダＰＴＨ中には、そのパケットに含まれるビデオデータ或はオーディオデータがデコードされた後に再生出力として出力されるべき時刻を示すＰＴＳや、ビデオストリームがデコードされるべき時刻を示すＤＴＳなどが記録されているＰＴＳおよびＤＴＳは、パケット内にデコード単位であるアクセスユニットの先頭がある場合に置かれ、ＰＴＳはアクセスユニットの表示開始時刻を示し、ＤＴＳはアクセスユニットのデコード開始時刻を示している。また、ＰＴＳとＤＴＳが同時刻の場合、ＤＴＳは省略される。
更に、パケットヘッダＰＴＨには、ビデオデータ列を表すビデオパケットであるか、プライベートパケットであるか、ＭＰＥＧオーディオパケットであるかを示す８ビット長のフィールドであるストリームＩＤが含まれている。
ここで、プライベートパケットとは、ＭＰＥＧ２の規格上その内容を自由に定義してよいデータであり、本実施形態では、プライベートパケット１を使用してオーディオデータ（ＭＰＥＧオーディオ以外）および副映像データを搬送し、プライベートパケット２を使用してＰＣＩパケットおよびＤＳＩパケットを搬送している。
プライベートパケット１およびプライベートパケット２はパケットヘッダ、プライベートデータ領域およびデータ領域からなる。プライベートデータ領域には、記録されているデータがオーディオデータであるか副映像データであるかを示す、８ビット長のフィールドを有するサブストリームＩＤが含まれる。プライベートパケット２で定義されるオーディオデータは、リニアＰＣＭ方式、ＡＣ−３方式それぞれについて＃０〜＃７まで最大８種類が設定可能である。また副映像データは、＃０〜＃３１までの最大３２種類が設定可能である。
データ領域は、ビデオデータの場合はＭＰＥＧ２形式の圧縮データ、オーディオデータの場合はリニアＰＣＭ方式、ＡＣ−３方式又はＭＰＥＧ方式のデータ、副映像データの場合はランレングス符号化により圧縮されたグラフィックスデータなどが記録されるフィールドである。
また、ＭＰＥＧ２ビデオデータは、その圧縮方法として、固定ビットレート方式（以下「ＣＢＲ」とも記す）と可変ビットレート方式（以下「ＶＢＲ」とも記す）が存在する。固定ビットレート方式とは、ビデオストリームが一定レートで連続してビデオバッファへ入力される方式である。これに対して、可変ビットレート方式とは、ビデオストリームが間欠して（断続的に）ビデオバッファへ入力される方式であり、これにより不要な符号量の発生を抑えることが可能である。ＤＶＤでは、固定ビットレート方式および可変ビットレート方式とも使用が可能である。
ＭＰＥＧでは、動画像データは、可変長符号化方式で圧縮されるために、ＧＯＰのデータ量が一定でない。さらに、動画像とオーディオのデコード時間が異なり、光ディスクから読み出した動画像データとオーディオデータの時間関係とデコーダから出力される動画像データとオーディオデータの時間関係が一致しなくなる。このため、動画像とオーディオの時間的な同期をとる方法を、図２６を参照して、後程、詳述するが、一先ず、簡便のため固定ビットレート方式を基に説明をする。
図２０に、ナブパックＮＶの構造を示す。ナブパックＮＶは、ＰＣＩパケットとＤＳＩパケットからなり、先頭にパックヘッダＰＫＨを設けている。ＰＫＨには、前述したとおり、そのパックが図２６におけるストリームバッファ２４００からシステムデコーダ２５００に転送されるべき時刻、つまりＡＶ同期再生のための基準時刻情報、を示すＳＣＲが記録されている。
ＰＣＩパケットは、ＰＣＩ情報（PCI_GI）と非シームレスマルチアングル情報（NSML_AGLI）を有している。
ＰＣＩ情報（PCI_GI）には、該ＶＯＢＵに含まれるビデオデータの先頭ビデオフレーム表示時刻（VOBU_S_PTM）及び最終ビデオフレーム表示時刻（VOBU_E_PTM）をシステムクロック精度（９０ＫＨｚ）で記述する。
非シームレスマルチアングル情報（NSML_AGLI）には、アングルを切り替えた場合の読み出し開始アドレスをＶＯＢ先頭からのセクタ数として記述する。この場合、アングル数は９以下であるため、領域として９アングル分のアドレス記述領域（NSML_AGL_C1_DSTA〜NSML_AGL_C9_DSTA）を有す。
ＤＳＩパケットにはＤＳＩ情報（DSI_GI）、シームレス再生情報（SML_PBI）およびシームレスマルチアングル再生情報（SML_AGLI）を有している。
ＤＳＩ情報（DSI_GI）として該ＶＯＢＵ内の最終パックアドレス（VOBU_EA）をＶＯＢＵ先頭からのセクタ数として記述する。
シームレス再生に関しては後述するが、分岐あるいは結合するタイトルをシームレスに再生するために、連続読み出し単位をＩＬＶＵ（Interleaved Unit）として、システムストリームレベルでインターリーブ（多重化）する必要がある。複数のシステムストリームがＩＬＶＵを最小単位としてインターリーブ処理されている区間をインターリーブブロックと定義する。
このようにＩＬＶＵを最小単位としてインターリーブされたストリームをシームレスに再生するために、シームレス再生情報：Seamless Playback Information（SML_PBI）を記述する。シームレス再生情報（SML_PBI）には、該ＶＯＢＵがインターリーブブロックかどうかを示すインターリーブユニットフラグ（ILVU flag）を記述する。このフラグはインターリーブ領域に（後述）に存在するかを示すものであり、インターリーブ領域に存在する場合"1"を設定する。そうでない場合には、フラグ値０を設定する。
また、該ＶＯＢＵがインターリーブ領域に存在する場合、該ＶＯＢＵがＩＬＶＵの最終ＶＯＢＵかを示すユニットエンドフラグ（UNIT END Flag）を記述する。ＩＬＶＵは、連続読み出し単位であるので、現在読み出しているＶＯＢＵが、ＩＬＶＵの最後のＶＯＢＵであれば"1"を設定する。そうでない場合には、フラグ値０を設定する。
該ＶＯＢＵがインターリーブ領域に存在する場合、該ＶＯＢＵが属するＩＬＶＵの最終パックのアドレスを示すＩＬＶＵ最終パックアドレス（ILVU_EA）を記述する。ここでアドレスとして、該ＶＯＢＵのＮＶからのセクタ数で記述する。
また、該ＶＯＢＵがインターリーブ領域に存在する場合、次のＩＬＶＵの開始アドレス（NT_ILVU_SA）を記述する。ここでアドレスとして、該ＶＯＢＵのＮＶからのセクタ数で記述する。
また、２つのシステムストリームをシームレスに接続する場合に於いて、特に接続前と接続後のオーディオが連続していない場合（異なるオーディオの場合等）、接続後のビデオとオーディオの同期をとるためにオーディオを一時停止（ポーズ）する必要がある。例えば、ＮＴＳＣの場合、ビデオのフレーム周期は約33.33msecであり、オーディオＡＣ３のフレーム周期は32msecである。
このためにオーディオを停止する時間および期間情報を示すオーディオ再生停止時刻１（VOBU_A_STP_PTM1）、オーディオ再生停止時刻２（VOBU_A_STP_PTM2）、オーディオ再生停止期間１（VOB_A_GAP_LEN1）、オーディオ再生停止期間２：Audio Gap Length 2 inＶＯＢ（VOB_A_GAP_LEN2）を記述する。この時間情報はシステムクロック精度（９０ＫＨｚ）で記述される。
また、シームレスマルチアングル再生情報（SML_AGLI）として、アングルを切り替えた場合の読み出し開始アドレスを記述する。このフィールドはシームレスマルチアングルの場合に有効なフィールドである。このアドレスは該ＶＯＢＵのＮＶからのセクタ数で記述される。また、アングル数は９以下であるため、領域として９アングル分のアドレス記述領域：（SML_AGL_C1_DSTA〜SML_AGL_C9_DSTA）を有す。
ＤＶＤエンコーダ
図２５に、本発明に掛かるマルチメディアビットストリームオーサリングシステムを上述のＤＶＤシステムに適用した場合の、オーサリングエンコーダＥＣＤの一実施形態を示す。ＤＶＤシステムに適用したオーサリングエンコーダＥＣＤ（以降、ＤＶＤエンコーダと呼称する）は、図２に示したオーサリングエンコーダＥＣに、非常に類似した構成になっている。
ＤＶＤオーサリングエンコーダＥＣＤは、基本的には、オーサリングエンコーダＥＣのビデオゾーンフォーマッタ１３００が、ＶＯＢバッファ１０００とフォーマッタ１１００にとって変わられた構造を有している。言うまでもなく、本発明のエンコーダによってエンコードされたビットストリームは、ＤＶＤ媒体Ｍに記録される。以下に、ＤＶＤオーサリングエンコーダＥＣＤの動作をオーサリングエンコーダＥＣと比較しながら説明する。
ＤＶＤオーサリングエンコーダＥＣＤに於いても、オーサリングエンコーダＥＣと同様に、編集情報作成部１００から入力されたユーザーの編集指示内容を表すシナリオデータＳｔ７に基づいて、エンコードシステム制御部２００が、各制御信号Ｓｔ９、Ｓｔ１１、Ｓｔ１３、Ｓｔ２１、Ｓｔ２３、Ｓｔ２５、Ｓｔ３３、及びＳｔ３９を生成して、ビデオエンコーダ３００、サブピクチャエンコーダ５００、及びオーディオエンコーダ７００を制御する。
尚、ＤＶＤシステムに於ける編集指示内容とは、図２５を参照して説明したオーサリングシステムに於ける編集指示内容と同様に、複数のタイトル内容を含む各ソースデータの全部或いは、其々に対して、所定時間毎に各ソースデータの内容を一つ以上選択し、それらの選択された内容を、所定の方法で接続再生するような情報を含無と共に、更に、以下の情報を含む。つまり、マルチタイトルソースストリームを、所定時間単位毎に分割した編集単位に含まれるストリーム数、各ストリーム内のオーディオ数やサブピクチャ数及びその表示期間等のデータ、パレンタルあるいはマルチアングルなど複数ストリームから選択するか否か、設定されたマルチアングル区間でのシーン間の切り替え接続方法などの情報を含む。
尚、ＤＶＤシステムに於いては、シナリオデータＳｔ７には、メディアソースストリームをエンコードするために必要な、ＶＯＢ単位での制御内容、つまり、マルチアングルであるかどうか、パレンタル制御を可能とするマルチレイティッドタイトルの生成であるか、後述するマルチアングルやパレンタル制御の場合のインターリーブとディスク容量を考慮した各ストリームのエンコード時のビットレート、各制御の開始時間と終了時間、前後のストリームとシームレス接続するか否かの内容が含まれる。エンコードシステム制御部２００は、シナリオデータＳｔ７から情報を抽出して、エンコード制御に必要な、エンコード情報テーブル及びエンコードパラメータを生成する。エンコード情報テーブル及びエンコードパラメータについては、後程、図２７、図２８、及び図２９を参照して詳述する。
システムストリームエンコードパラメータデータ及びシステムエンコード開始終了タイミングの信号Ｓｔ３３には上述の情報をＤＶＤシステムに適用してＶＯＢ生成情報を含む。ＶＯＢ生成情報として、前後の接続条件、オーディオ数、オーディオのエンコード情報、オーディオＩＤ、サブピクチャ数、サブピクチャＩＤ、ビデオ表示を開始する時刻情報（ＶＰＴＳ）、オーディオ再生を開始する時刻情報（ＡＰＴＳ）等がある。更に、マルチメディア尾ビットストリームＭＢＳのフォーマットパラメータデータ及びフォーマット開始終了タイミングの信号Ｓｔ３９は、再生制御情報及びインターリーブ情報を含む。
ビデオエンコーダ３００は、ビデオエンコードのためのエンコードパラメータ信号及びエンコード開始終了タイミングの信号Ｓｔ９に基づいて、ビデオストリームＳｔ１の所定の部分をエンコードして、ＩＳＯ１３８１８に規定されるＭＰＥＧ２ビデオ規格に準ずるエレメンタリーストリームを生成する。そして、このエレメンタリーストリームをビデオエンコードストリームＳｔ１５として、ビデオストリームバッファ４００に出力する。
ここで、ビデオエンコーダ３００に於いてＩＳＯ１３８１８に規定されるＭＰＥＧ２ビデオ規格に準ずるエレメンタリストリームを生成するが、ビデオエンコードパラメータデータを含む信号Ｓｔ９に基に、エンコードパラメータとして、エンコード開始終了タイミング、ビットレート、エンコード開始終了時にエンコード条件、素材の種類として、ＮＴＳＣ信号またはＰＡＬ信号あるいはテレシネ素材であるかなどのパラメータ及びオープンＧＯＰ或いはクローズドＧＯＰのエンコードモードの設定がエンコードパラメータとしてそれぞれ入力される。
ＭＰＥＧ２の符号化方式は、基本的にフレーム間の相関を利用する符号化である。つまり、符号化対象フレームの前後のフレームを参照して符号化を行う。しかし、エラー伝播およびストリーム途中からのアクセス性の面で、他のフレームを参照しない（イントラフレーム）フレームを挿入する。このイントラフレームを少なくとも１フレームを有する符号化処理単位をＧＯＰと呼ぶ。
このＧＯＰに於いて、完全に該ＧＯＰ内で符号化が閉じているＧＯＰがクローズドＧＯＰであり、前のＧＯＰ内のフレームを参照するフレームが該ＧＯＰ内に存在する場合、該ＧＯＰをオープンＧＯＰと呼ぶ。
従って、クローズドＧＯＰを再生する場合は、該ＧＯＰのみで再生できるが、オープンＧＯＰを再生する場合は、一般的に１つ前のＧＯＰが必要である。
また、ＧＯＰの単位は、アクセス単位として使用する場合が多い。例えば、タイトルの途中からの再生する場合の再生開始点、映像の切り替わり点、あるいは早送りなどの特殊再生時には、ＧＯＰ内のフレーム内符号化フレームであるいフレームのみをＧＯＰ単位で再生する事により、高速再生を実現する。
サブピクチャエンコーダ５００は、サブピクチャストリームエンコード信号Ｓｔ１１に基づいて、サブピクチャストリームＳｔ３の所定の部分をエンコードして、ビットマップデータの可変長符号化データを生成する。そして、この可変長符号化データをサブピクチャエンコードストリームＳｔ１７として、サブピクチャストリームバッファ６００に出力する。
オーディオエンコーダ７００は、オーディオエンコード信号Ｓｔ１３に基づいて、オーディオストリームＳｔ５の所定の部分をエンコードして、オーディオエンコードデータを生成する。このオーディオエンコードデータとしては、ＩＳＯ１１１７２に規定されるＭＰＥＧ１オーディオ規格及びＩＳＯ１３８１８に規定されるＭＰＥＧ２オーディオ規格に基づくデータ、また、ＡＣ−３オーディオデータ、及びＰＣＭ（ＬＰＣＭ）データ等がある。これらのオーディオデータをエンコードする方法及び装置は公知である。
ビデオストリームバッファ４００は、ビデオエンコーダ３００に接続されており、ビデオエンコーダ３００から出力されるビデオエンコードストリームＳｔ１５を保存する。ビデオストリームバッファ４００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２１の入力に基づいて、保存しているビデオエンコードストリームＳｔ１５を、調時ビデオエンコードストリームＳｔ２７として出力する。
同様に、サブピクチャストリームバッファ６００は、サブピクチャエンコーダ５００に接続されており、サブピクチャエンコーダ５００から出力されるサブピクチャエンコードストリームＳｔ１７を保存する。サブピクチャストリームバッファ６００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２３の入力に基づいて、保存しているサブピクチャエンコードストリームＳｔ１７を、調時サブピクチャエンコードストリームＳｔ２９として出力する。
また、オーディオストリームバッファ８００は、オーディオエンコーダ７００に接続されており、オーディオエンコーダ７００から出力されるオーディオエンコードストリームＳｔ１９を保存する。オーディオストリームバッファ８００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２５の入力に基づいて、保存しているオーディオエンコードストリームＳｔ１９を、調時オーディオエンコードストリームＳｔ３１として出力する。
システムエンコーダ９００は、ビデオストリームバッファ４００、サブピクチャストリームバッファ６００、及びオーディオストリームバッファ８００に接続されており、調時ビデオエンコードストリームＳｔ２７、調時サブピクチャエンコードストリームＳｔ２９、及び調時オーディオエンコードＳｔ３１が入力される。システムエンコーダ９００は、またエンコードシステム制御部２００に接続されており、システムエンコードのためのエンコードパラメータデータを含むＳｔ３３が入力される。
システムエンコーダ９００は、エンコードパラメータデータ及びエンコード開始終了タイミング信号Ｓｔ３３に基づいて、各調時ストリームＳｔ２７、Ｓｔ２９、及びＳｔ３１に多重化（マルチプレクス）処理を施して、最小タイトル編集単位（ＶＯＢｓ）Ｓｔ３５を生成する。
ＶＯＢバッファ１０００はシステムエンコーダ９００に於いて生成されたＶＯＢを一時格納するバッファ領域であり、フォーマッタ１１００では、Ｓｔ３９に従ってＶＯＢバッファ１１００から調時必要なＶＯＢを読み出し１ビデオゾーンＶＺを生成する。また、同フォーマッタ１１００に於いてはファイルシステム（ＶＦＳ）を付加してＳｔ４３を生成する。
このユーザの要望シナリオの内容に編集された、ストリームＳｔ４３は、記録部１２００に転送される。記録部１２００は、編集マルチメディアビットストリームＭＢＳを記録媒体Ｍに応じた形式のデータＳｔ４３に加工して、記録媒体Ｍに記録する。
ＤＶＤデコーダ
次に、図２６を参照して、本発明に掛かるマルチメディアビットストリームオーサリングシステムを上述のＤＶＤシステムに適用した場合の、オーサリングデコーダＤＣの一実施形態を示す。ＤＶＤシステムに適用したオーサリングエンコーダＤＣＤ（以降、ＤＶＤデコーダと呼称する）は、本発明にかかるＤＶＤエンコーダＥＣＤによって、編集されたマルチメディアビットストリームＭＢＳをデコードして、ユーザの要望のシナリオに沿って各タイトルの内容を展開する。
なお、本実施形態に於いては、ＤＶＤエンコーダＥＣＤによってエンコードされたマルチメディアビットストリームＳｔ４５は、記録媒体Ｍに記録されている。ＤＶＤオーサリングデコーダＤＣＤの基本的な構成は図３に示すオーサリングデコーダＤＣと同一であり、ビデオデコーダ３８００がビデオデコーダ３８０１に替わると共に、ビデオデコーダ３８０１と合成部３５００の間にリオーダバッファ３３００と切替器３４００が挿入されている。なお、切替器３４００は同期制御部２９００に接続されて、切替指示信号Ｓｔ５１０３の入力を受けている。
ＤＶＤオーサリングデコーダＤＣＤは、マルチメディアビットストリーム再生部２０００、シナリオ選択部２１００、デコードシステム制御部２３００、ストリームバッファ２４００、システムデコーダ２５００、ビデオバッファ２６００、サブピクチャバッファ２７００、オーディオバッファ２８００、同期制御部２９００、ビデオデコーダ３８０１、リオーダバッファ３３００、サブピクチャデコーダ３１００、オーディオデコーダ３２００、セレクタ３４００、合成部３５００、ビデオデータ出力端子３６００、及びオーディオデータ出力端子３７００から構成されている。
マルチメディアビットストリーム再生部２０００は、記録媒体Ｍを駆動させる記録媒体駆動ユニット２００４、記録媒体Ｍに記録されている情報を読み取り二値の読み取り信号Ｓｔ５７を生成する読取ヘッドユニット２００６、読み取り信号ＳＴ５７に種々の処理を施して再生ビットストリームＳｔ６１を生成する信号処理部２００８、及び機構制御部２００２から構成される。機構制御部２００２は、デコードシステム制御部２３００に接続されて、マルチメディアビットストリーム再生指示信号Ｓｔ５３を受けて、それぞれ記録媒体駆動ユニット（モータ）２００４及び信号処理部２００８をそれぞれ制御する再生制御信号Ｓｔ５５及びＳｔ５９を生成する。
デコーダＤＣは、オーサリングエンコーダＥＣで編集されたマルチメディアタイトルの映像、サブピクチャ、及び音声に関する、ユーザの所望の部分が再生されるように、対応するシナリオを選択して再生するように、オーサリングデコーダＤＣに指示を与えるシナリオデータとして出力できるシナリオ選択部２１００を備えている。
シナリオ選択部２１００は、好ましくは、キーボード及びＣＰＵ等で構成される。ユーザーは、オーサリングエンコーダＥＣで入力されたシナリオの内容に基づいて、所望のシナリオをキーボード部を操作して入力する。ＣＰＵは、キーボード入力に基づいて、選択されたシナリオを指示するシナリオ選択データＳｔ５１を生成する。シナリオ選択部２１００は、例えば、赤外線通信装置等によって、デコードシステム制御部２３００に接続されて、生成したシナリオ選択信号Ｓｔ５１をデコードシステム制御部２３００に入力する。
ストリームバッファ２４００は所定のバッファ容量を有し、マルチメディアビットストリーム再生部２０００から入力される再生信号ビットストリームＳｔ６１を一時的に保存すると共に、ボリュームファイルストラクチャＶＦＳ、各パックに存在する同期初期値データ（SCR）、及びナブパックＮＶ存在するＶＯＢＵ制御情報（DSI）を抽出してストリーム制御データＳｔ６３を生成する。
デコードシステム制御部２３００は、デコードシステム制御部２３００で生成されたシナリオ選択データＳｔ５１に基づいてマルチメディアビットストリーム再生部２０００の動作を制御する再生指示信号Ｓｔ５３を生成する。デコードシステム制御部２３００は、更に、シナリオデータＳｔ５３からユーザの再生指示情報を抽出して、デコード制御に必要な、デコード情報テーブルを生成する。デコード情報テーブルについては、後程、図４７、及び図４８を参照して詳述する。更に、デコードシステム制御部２３００は、ストリーム再生データＳｔ６３中のファイルデータ領域ＦＤＳ情報から、ビデオマネージャＶＭＧ、ＶＴＳ情報ＶＴＳＩ、ＰＧＣ情報C_PBI#j、セル再生時間C_PBTM等の光ディスクＭに記録されたタイトル情報を抽出してタイトル情報Ｓｔ２００を生成する。
ここで、ストリーム制御データＳｔ６３は図１９におけるパック単位に生成される。ストリームバッファ２４００は、デコードシステム制御部２３００に接続されており、生成したストリーム制御データＳｔ６３をデコードシステム制御部２３００に供給する。
同期制御部２９００は、デコードシステム制御部２３００に接続されて、同期再生データＳｔ８１に含まれる同期初期値データ（SCR）を受け取り、内部のシステムクロック（STC）セットし、リセットされたシステムクロックＳｔ７９をデコードシステム制御部２３００に供給する。
デコードシステム制御部２３００は、システムクロックＳｔ７９に基づいて、所定の間隔でストリーム読出信号Ｓｔ６５を生成し、ストリームバッファ２４００に入力する。この場合の読み出し単位はパックである。
ここでストリーム読み出し信号Ｓｔ６５の生成方法について説明する。デコードシステム制御部２３００では、ストリームバッファ２４００から抽出したストリーム制御データ中のＳＣＲと、同期制御部２９００からのシステムクロックＳｔ７９を比較し、Ｓｔ６３中のＳＣＲよりもシステムクロックＳｔ７９が大きくなった時点で読み出し要求信号Ｓｔ６５を生成する。このような制御をパック単位に行うことで、パック転送を制御する。
デコードシステム制御部２３００は、更に、シナリオ選択データＳｔ５１に基づき、選択されたシナリオに対応するビデオ、サブピクチャ、オーディオの各ストリームのＩＤを示すデコードストリーム指示信号Ｓｔ６９を生成して、システムデコーダ２５００に出力する。
タイトル中に、例えば日本語、英語、フランス語等、言語別のオーディオ等の複数のオーディオデータ、及び、日本語字幕、英語字幕、フランス語字幕等、言語別の字幕等の複数のサブピクチャデータが存在する場合、それぞれにＩＤが付与されている。つまり、図１９を参照して説明したように、ビデオデータ及び、ＭＰＥＧオーディオデータには、ストリームＩＤが付与され、サブピクチャデータ、ＡＣ３方式のオーディオデータ、リニアＰＣＭ及びナブパックＮＶ情報には、サブストリームＩＤが付与されている。
ユーザはＩＤを意識することはないが、どの言語のオーディオあるいは字幕を選択するかをシナリオ選択部２１００で選択する。英語のオーディオを選択すれば、シナリオ選択データＳｔ５１として英語のオーディオに対応するＩＤがデーコードシステム制御部２３００に搬送される。さらに、デコードシステム制御部２３００はシステムデコーダ２５００にそのＩＤをＳｔ６９上に搬送して渡す。
システムデコーダ２５００は、ストリームバッファ２４００から入力されてくるビデオ、サブピクチャ、及びオーディオのストリームを、デコード指示信号Ｓｔ６９の指示に基づいて、それぞれ、ビデオエンコードストリームＳｔ７１としてビデオバッファ２６００に、サブピクチャエンコードストリームＳｔ７３としてサブピクチャバッファ２７００に、及びオーディオエンコードストリームＳｔ７５としてオーディオバッファ２８００に出力する。つまり、システムデコーダ２５００は、シナリオ選択部２１００より入力される、ストリームのＩＤと、ストリームバッファ２４００から転送されるパックのＩＤが一致した場合にそれぞれのバッファ（ビデオバッファ２６００、サブピクチャバッファ２７００、オーディオバッファ２８００）に該パックを転送する。
システムデコーダ２５００は、各ストリームＳｔ６７の各最小制御単位での再生開始時間（PTS）及び再生終了時間(DTS）を検出し、時間情報信号Ｓｔ７７を生成する。この時間情報信号Ｓｔ７７は、デコードシステム制御部２３００を経由して、Ｓｔ８１として同期制御部２９００に入力される。
同期制御部２９００は、この時間情報信号Ｓｔ８１に基づいて、各ストリームについて、それぞれがデコード後に所定の順番になるようなデコード開始タイミングを決定する。同期制御部２９００は、このデコードタイミングに基づいて、ビデオストリームデコード開始信号Ｓｔ８９を生成し、ビデオデコーダ３８０１に入力する。同様に、同期制御部２９００は、サブピクチャデコード開始信号Ｓｔ９１及びオーディオエンコード開始信号Ｓｔ９３を生成し、サブピクチャデコーダ３１００及びオーディオデコーダ３２００にそれぞれ入力する。
ビデオデコーダ３８０１は、ビデオストリームデコード開始信号Ｓｔ８９に基づいて、ビデオ出力要求信号Ｓｔ８４を生成して、ビデオバッファ２６００に対して出力する。ビデオバッファ２６００はビデオ出力要求信号Ｓｔ８４を受けて、ビデオストリームＳｔ８３をビデオデコーダ３８０１に出力する。ビデオデコーダ３８０１は、ビデオストリームＳｔ８３に含まれる再生時間情報を検出し、再生時間に相当する量のビデオストリームＳｔ８３の入力を受けた時点で、ビデオ出力要求信号Ｓｔ８４を無効にする。このようにして、所定再生時間に相当するビデオストリームがビデオデコーダ３８０１でデコードされて、再生されたビデオ信号Ｓｔ９５がリオーダーバッファ３３００と切替器３４００に出力される。
ビデオエンコードストリームは、フレーム間相関を利用した符号化であるため、フレーム単位でみた場合、表示順と符号化ストリーム順が一致していない。従って、デコード順に表示できるわけではない。そのため、デコードを終了したクレームを一時リオーダバッファ３３００に格納する。同期制御部２９００に於いて表示順になるようにＳｔ１０３を制御しビデオデコーダ３８０１の出力Ｓｔ９５と、リオーダバッファＳｔ９７の出力を切り替え、合成部３５００に出力する。
同様に、サブピクチャデコーダ３１００は、サブピクチャデコード開始信号Ｓｔ９１に基づいて、サブピクチャ出力要求信号Ｓｔ８６を生成し、サブピクチャバッファ２７００に供給する。サブピクチャバッファ２７００は、ビデオ出力要求信号Ｓｔ８４を受けて、サブピクチャストリームＳｔ８５をサブピクチャデコーダ３１００に出力する。サブピクチャデコーダ３１００は、サブピクチャストリームＳｔ８５に含まれる再生時間情報に基づいて、所定の再生時間に相当する量のサブピクチャストリームＳｔ８５をデコードして、サブピクチャ信号Ｓｔ９９を再生して、合成部３５００に出力する。
合成部３５００は、セレクタ３４００の出力及びサブピクチャ信号Ｓｔ９９を重畳させて、映像信号Ｓｔ１０５を生成し、ビデオ出力端子３６００に出力する。
オーディオデコーダ３２００は、オーディオデコード開始信号Ｓｔ９３に基づいて、オーディオ出力要求信号Ｓｔ８８を生成し、オーディオバッファ２８００に供給する。オーディオバッファ２８００は、オーディオ出力要求信号Ｓｔ８８を受けて、オーディオストリームＳｔ８７をオーディオデコーダ３２００に出力する。オーディオデコーダ３２００は、オーディオストリームＳｔ８７に含まれる再生時間情報に基づいて、所定の再生時間に相当する量のオーディオストリームＳｔ８７をデコードして、オーディオ出力端子３７００に出力する。
このようにして、ユーザのシナリオ選択に応答して、リアルタイムにユーザの要望するマルチメディアビットストリームＭＢＳを再生する事ができる。つまり、ユーザが異なるシナリオを選択する度に、オーサリングデコーダＤＣＤはその選択されたシナリオに対応するマルチメディアビットストリームＭＢＳを再生することによって、ユーザの要望するタイトル内容を再生することができる。
尚、デコードシステム制御部２３００は、前述の赤外線通信装置等を経由して、シナリオ選択部２１００にタイトル情報信号Ｓｔ２００を供給してもよい。シナリオ選択部２１００は、タイトル情報信号Ｓｔ２００に含まれるストリーム再生データＳｔ６３中のファイルデータ領域ＦＤＳ情報から、光ディスクＭに記録されたタイトル情報を抽出して、内蔵ディスプレイに表示することにより、インタラクティブなユーザによるシナリオ選択を可能とする。
また、上述の例では、ストリームバッファ２４００、ビデオバッファ２６００、サブピクチャバッファ２７００、及びオーディオバッファ２８００、及びリオーダバッファ３３００は、機能的に異なるので、それぞれ別のバッファとして表されている。しかし、これらのバッファに於いて要求される読込み及び読み出し速度の数倍の動作速度を有するバッファメモリを時分割で使用することにより、一つのバッファメモリをこれら個別のバッファとして機能させることができる。
マルチシーン
図２１を用いて、本発明に於けるマルチシーン制御の概念を説明する。既に、上述したように、各タイトル間での共通のデータからなる基本シーン区間と、其々の要求に即した異なるシーン群からなるマルチシーン区間とで構成される。同図に於いて、シーン１、シーン５、及びシーン８が共通シーンである。共通シーン１とシーン５の間のアングルシーン及び、共通シーン５とシーン８の間のパレンタルシーンがマルチシーン区間である。マルチアングル区間に於いては、異なるアングル、つまりアングル１、アングル２、及びアングル３、から撮影されたシーンの何れかを、再生中に動的に選択再生できる。パレンタル区間に於いては、異なる内容のデータに対応するシーン６及びシーン７の何れかをあらかじめ静的に選択再生できる。
このようなマルチシーン区間のどのシーンを選択して再生するかというシナリオ内容を、ユーザはシナリオ選択部２１００にて入力してシナリオ選択データＳｔ５１として生成する。図中に於いて、シナリオ１では、任意のアングルシーンを自由に選択し、パレンタル区間では予め選択したシーン６を再生することを表している。同様に、シナリオ２では、アングル区間では、自由にシーンを選択でき、パレンタル区間では、シーン７が予め選択されていることを表している。
以下に、図２１で示したマルチシーンをＤＶＤのデータ構造を用いた場合の、ＰＧＣ情報VTS_PGCIについて、図３０、及び図３１を参照して説明する。
図３０には、図２１に示したユーザ指示のシナリオを図１６のＤＶＤデータ構造内のビデオタイトルセットの内部構造を表すＶＴＳＩデータ構造で記述した場合について示す。図において、図２１のシナリオ１、シナリオ２は、図１６のＶＴＳＩ中のプログラムチェーン情報ＶＴＳ＿ＰＧＣＩＴ内の２つプログラムチェーンVTS_PGCI#1とVTS_PGCI#2として記述される。すなわち、シナリオ１を記述するVTS_PGCI#1は、シーン１に相当するセル再生情報Ｃ＿ＰＢＩ＃１、マルチアングルシーンに相当するマルチアングルセルブロック内のセル再生情報Ｃ＿ＰＢＩ＃２，セル再生情報Ｃ＿ＰＢＩ＃３，セル再生情報Ｃ＿ＰＢＩ＃４、シーン５に相当するセル再生情報Ｃ＿ＰＢＩ＃５、シーン６に相当するセル再生情報Ｃ＿ＰＢＩ＃６、シーン８に相当するＣ＿ＰＢＩ＃７からなる。
また、シナリオ２を記述するVTS_PGC#2は、シーン１に相当するセル再生情報Ｃ＿ＰＢＩ＃１、マルチアングルシーンに相当するマルチアングルセルブロック内のセル再生情報Ｃ＿ＰＢＩ＃２，セル再生情報Ｃ＿ＰＢＩ＃３，セル再生情報Ｃ＿ＰＢＩ＃４、シーン５に相当するセル再生情報Ｃ＿ＰＢＩ＃５、シーン７に相当するセル再生情報Ｃ＿ＰＢＩ＃６、シーン８に相当するＣ＿ＰＢＩ＃７からなる。ＤＶＤデータ構造では、シナリオの１つの再生制御の単位であるシーンをセルというＤＶＤデータ構造上の単位に置き換えて記述し、ユーザの指示するシナリオをＤＶＤ上で実現している。
図３１には、図２１に示したユーザ指示のシナリオを図１６のＤＶＤデータ構造内のビデオタイトルセット用のマルチメディアビットストリームであるＶＯＢデータ構造ＶＴＳＴＴ＿ＶＯＢＳで記述した場合について示す。
図において、図２１のシナリオ１とシナリオ２の２つのシナリオは、１つのタイトル用ＶＯＢデータを共通に使用する事になる。各シナリオで共有する単独のシーンはシーン１に相当するＶＯＢ＃１、シーン５に相当するＶＯＢ＃５、シーン８に相当するＶＯＢ＃８は、単独のＶＯＢとして、インターリーブブロックではない部分、すなわち連続ブロックに配置される。
シナリオ１とシナリオ２で共有するマルチアングルシーンにおいて、それぞれアングル１はＶＯＢ＃２、アングル２はＶＯＢ＃３、アングル３はＶＯＢ＃４で構成、つまり１アングルを１ＶＯＢで構成し、さらに各アングル間の切り替えと各アングルのシームレス再生のために、インターリーブブロックとする。
また、シナリオ１とシナリオ２で固有なシーンであるシーン６とシーン７は、各シーンのシームレス再生はもちろんの事、前後の共通シーンとシームレスに接続再生するために、インターリーブブロックとする。
以上のように、図２１で示したユーザ指示のシナリオは、ＤＶＤデータ構造において、図３０に示すビデオタイトルセットの再生制御情報と図３１に示すタイトル再生用ＶＯＢデータ構造で実現できる。
シームレス
上述のＤＶＤシステムのデータ構造に関連して述べたシームレス再生について説明する。シームレス再生とは、共通シーン区間同士で、共通シーン区間とマルチシーン区間とで、及びマルチシーン区間同士で、映像、音声、副映像等のマルチメディアデータを、接続して再生する際に、各データ及び情報を中断する事無く再生することである。このデータ及び情報再生の中断の要因としては、ハードウェアに関連するものとして、デコーダに於いて、ソースデータ入力される速度と、入力されたソースデータをデコードする速度のバランスがくずれる、いわゆるデコーダのアンダーフローと呼ばれるものがある。
更に、再生されるデータの特質に関するものとして、再生データが音声のように、その内容或いは情報をユーザが理解する為には、一定時間単位以上の連続再生を要求されるデータの再生に関して、その要求される連続再生時間を確保出来ない場合に情報の連続性が失われるものがある。このような情報の連続性を確保して再生する事を連続情報再生と、更にシームレス情報再生と呼ぶ。また、情報の連続性を確保出来ない再生を非連続情報再生と呼び、更に非シームレス情報再生と呼ぶ。尚、言うまでまでもなく連続情報再生と非連続情報再生は、それぞれシームレス及び非シームレス再生である。
上述の如く、シームレス再生には、バッファのアンダーフロー等によって物理的にデータ再生に空白あるいは中断の発生を防ぐシームレスデータ再生と、データ再生自体には中断は無いものの、ユーザーが再生データから情報を認識する際に情報の中断を感じるのを防ぐシームレス情報再生と定義する。
シームレスの詳細
なお、このようにシームレス再生を可能にする具体的な方法については、図２３及び図２４参照して後で詳しく説明する。
インターリーブ
上述のＤＶＤデータのシステムストリームをオーサリングエンコーダＥＣを用いて、ＤＶＤ媒体上の映画のようなタイトルを記録する。しかし、同一の映画を複数の異なる文化圏或いは国に於いても利用できるような形態で提供するには、台詞を各国の言語毎に記録するのは当然として、さらに各文化圏の倫理的要求に応じて内容を編集して記録する必要がある。このような場合、元のタイトルから編集された複数のタイトルを１枚の媒体に記録するには、ＤＶＤという大容量システムに於いてさえも、ビットレートを落とさなければならず、高画質という要求が満たせなくなってしまう。そこで、共通部分を複数のタイトルで共有し、異なる部分のみをそれぞれのタイトル毎に記録するという方法をとる。これにより、ビットレートをおとさず、１枚の光ディスクに、国別あるいは文化圏別の複数のタイトルを記録する事ができる。
１枚の光ディスクに記録されるタイトルは、図２１に示したように、パレンタルロック制御やマルチアングル制御を可能にするために、共通部分（シーン）と非共通部分（シーン）のを有するマルチシーン区間を有する。
パレンタルロック制御の場合は、一つのタイトル中に、性的シーン、暴力的シーン等の子供に相応しくない所謂成人向けシーンが含まれている場合、このタイトルは共通のシーンと、成人向けシーンと、未成年向けシーンから構成される。このようなタイトルストリームは、成人向けシーンと非成人向けシーンを、共通シーン間に、設けたマルチシーン区間として配置して実現する。
また、マルチアングル制御を通常の単一アングルタイトル内に実現する場合には、それぞれ所定のカメラアングルで対象物を撮影して得られる複数のマルチメディアシーンをマルチシーン区間として、共通シーン間に配置する事で実現する。ここで、各シーンは異なるアングルで撮影されたシーンの例を上げている、同一のアングルであるが、異なる時間に撮影されたシーンであっても良いし、またコンピュータグラフィックス等のデータであっても良い。
複数のタイトルでデータを共有すると、必然的に、データの共有部分から非共有部分への光ビームＬＳを移動させるために、光学ピックアップを光ディスク（ＲＣ１）上の異なる位置に移動することになる。この移動に要する時間が原因となって音や映像を途切れずに再生する事、すなわちシームレス再生が困難であるという問題が生じる。このような問題点を解決するするには、理論的には最悪のアクセス時間に相当する時間分のトラックバッファ（ストリームバッファ２４００）を備えれば良い。
一般に、光ディスクに記録されているデータは、光ピックアップにより読み取られ、所定の信号処理が施された後、データとしてトラックバッファに一旦蓄積される。蓄積されたデータは、その後デコードされて、ビデオデータあるいはオーディオデータとして再生される。
インターリーブの定義
前述のような、あるシーンをカットする事や、複数のシーンから選択を可能にするには、記録媒体のトラック上に、各シーンに属するデータ単位で、互いに連続した配置で記録されるため、共通シーンデータと選択シーンデータとの間に非選択シーンのデータが割り込んで記録される事態が必然的におこる。
このような場合、記録されている順序にデータを読むと、選択したシーンのデータにアクセスしてデコードする前に、非選択シーンのデータにアクセスせざるを得ないので、選択したシーンへのシームレス接続が困難である。しかしながら、ＤＶＤシステムに於いては、その記録媒体に対する優れたランダムアクセス性能を活かして、このような複数シーン間でのシームレス接続が可能である。つまり、各シーンに属するデータを、所定のデータ量を有する複数の単位に分割し、これらの異なるシーンの属する複数の分割データ単位を、互いに所定の順番に配置することで、ジャンプ性能範囲に配置する事で、それぞれ選択されたシーンの属するデータを分割単位毎に、断続的にアクセスしてデコードすることによって、その選択されたシーンをデータが途切れる事なく再生する事ができる。つまり、シームレスデータ再生が保証される。
インターリーブブロック、ユニット構造
図２４及び図５４を参照して、シームレスデータ再生を可能にするインターリーブ方式を説明する。図２４では、１つのＶＯＢ（ＶＯＢ−Ａ）から複数のＶＯＢ（ＶＯＢ−Ｂ、ＶＯＢ−Ｄ、ＶＯＢ−Ｃ）へ分岐再生し、その後１つのＶＯＢ（ＶＯＢ−Ｅ）に結合する場合を示している。図５４では、これらのデータをディスク上のトラックＴＲに実際に配置した場合を示している。
図５４に於ける、ＶＯＢ−ＡとＶＯＢ−Ｅは再生の開始点と終了点が単独なビデオオブジェクトであり、原則として連続領域に配置する。また、図２４に示すように、ＶＯＢ−Ｂ、ＶＯＢ−Ｃ、ＶＯＢ−Ｄについては、再生の開始点、終了点を一致させて、インターリーブ処理を行う。そして、そのインターリーブ処理された領域をディスク上の連続領域にインターリーブ領域として配置する。さらに、上記連続領域とインターリーブ領域を再生の順番に、つまりトラックパスＤｒの方向に、配置している。複数のＶＯＢ、すなわちＶＯＢＳをトラックＴＲ上に配置した状態を図５４に示す。
図５４では、データが連続的に配置されたデータ領域をブロックとし、そのブロックは、前述の開始点と終了点が単独で完結しているＶＯＢを連続して配置している連続ブロック、開始点と終了点を一致させて、その複数のＶＯＢをインターリーブしたインターリーブブロックの２種類である。それらのブロックが再生順に、図３８に示すように、ブロック１、ブロック２、ブロック３、・・・、ブロック７と配置されている構造をもつ。
図５５に於いて、VTSTT_VOBSは、ブロック１、２、３、４、５、６、及び７から構成されている。ブロック１には、ＶＯＢ１が単独で配置されている。同様に、ブロック２、３、５、及び７には、それぞれ、ＶＯＢ２、３、６、及び１０が単独で配置されている。つまり、これらのブロック２、３、５、及び７は、連続ブロックである。
一方、ブロック４には、ＶＯＢ４とＶＯＢ５がインターリーブされて配置されている。同様に、ブロック６には、ＶＯＢ７、ＶＯＢ８、及びＶＯＢ９の三つのＶＯＢがインターリーブされて配置されている。つまり、これらのブロック４及び６は、インターリーブブロックである。
図５６に連続ブロック内のデータ構造を示す。同図に於いて、ＶＯＢＳにＶＯＢ−ｉ、ＶＯＢ−ｊが連続ブロックとして、配置されている。連続ブロック内のＶＯＢ−ｉ及びＶＯＢ−ｊは、図１６を参照して説明したように、更に論理的な再生単位であるセルに分割されている。図ではＶＯＢ−ｉ及びＶＯＢ−ｊのそれぞれが、３つのセルＣＥＬＬ＃１、ＣＥＬＬ＃２、ＣＥＬＬ＃３で構成されている事を示している。セルは１つ以上のＶＯＢＵで構成されており、ＶＯＢＵの単位で、その境界が定義されている。セルはＤＶＤの再生制御情報であるプログラムチェーン（以下ＰＧＣと呼ぶ）には、図１６に示すように、その位置情報が記述される。つまり、セル開始のＶＯＢＵと終了のＶＯＢＵのアドレスが記述されている。図５６に明示されるように、連続ブロックは、連続的に再生されるように、ＶＯＢもその中で定義されるセルも連続領域に記録される。そのため、連続ブロックの再生は問題はない。
次に、図５７にインターリーブブロック内のデータ構造を示す。インターリーブブロックでは、各ＶＯＢがインターリーブユニットＩＬＶＵ単立に分割され、各ＶＯＢに属するインターリーブユニットが交互に配置される。そして、そのインターリーブユニットとは独立して、セル境界が定義される。同図に於いて、ＶＯＢ−ｋは四つのインターリーブユニットＩＬＶＵｋ１、ＩＬＶＵｋ２、ＩＬＶＵｋ３、及びＩＬＶＵｋ４に分割されると共に、二つのセルＣＥＬＬ＃１ｋ、及びＣＥＬＬ＃２ｋが定義されている。同様に、ＶＯＢ−ｍはＩＬＶＵｍ１、ＩＬＶＵｍ２、ＩＬＶＵｍ３、及びＩＬＶＵｍ４に分割されると共に、二つのセルＣＥＬＬ＃１ｍ、及びＣＥＬＬ＃２ｍが定義されている。つまり、インターリーブユニットＩＬＶＵには、ビデオデータとオーディオデータが含まれている。
図５７の例では、二つの異なるＶＯＢ−ｋとＶＯＢ−ｍの各インターリーブユニットＩＬＶＵｋ１、ＩＬＶＵｋ２、ＩＬＶＵｋ３、及びＩＬＶＵｋ４とＩＬＶＵｍ１、ＩＬＶＵｍ２、ＩＬＶＵｍ３、及びＩＬＶＵｍ４がインターリーブブロック内に交互に配置されている。二つのＶＯＢの各インターリーブユニットＩＬＶＵを、このような配列にインターリーブする事で、単独のシーンから複数のシーンの１つへ分岐、さらにそれらの複数シーンの１つから単独のシーンへのシームレスな再生が実現できる。このようにインターリーブすることで、多くの場合の分岐結合のあるシーンのシームレス再生可能な接続を行う事ができる。
マルチシーン
ここで、本発明に基づく、マルチシーン制御の概念を説明すると共にマルチシーン区間に付いて説明する。
異なるアングルで撮影されたシーンから構成される例が挙げている。しかし、マルチシーンの各シーンは、同一のアングルであるが、異なる時間に撮影されたシーンであっても良いし、またコンピュータグラフィックス等のデータであっても良い。言い換えれば、マルチアングルシーン区間は、マルチシーン区間である。
パレンタル
図１５を参照して、パレンタルロックおよびディレクターズカットなどの複数タイトルの概念を説明する。
図１５にパレンタルロックに基づくマルチレイティッドタイトルストリームの一例を示す。一つのタイトル中に、性的シーン、暴力的シーン等の子供に相応しくない所謂成人向けシーンが含まれている場合、このタイトルは共通のシステムストリームＳＳａ、ＳＳｂ、及びＳＳｅと、成人向けシーンを含む成人向けシステムストリームＳＳｃと、未成年向けシーンのみを含む非成人向けシステムストリームＳＳｄから構成される。このようなタイトルストリームは、成人向けシステムストリームＳＳｃと非成人向けシステムストリームＳＳｄを、共通システムストリームＳＳｂとＳＳｅの間に、設けたマルチシーン区間にマルチシーンシステムストリームとして配置する。
上述の用に構成されたタイトルストリームのプログラムチェーンＰＧＣに記述されるシステムストリームと各タイトルとの関係を説明する。成人向タイトルのプログラムチェーンＰＧＣ１には、共通のシステムストリームＳＳａ、ＳＳｂ、成人向けシステムストリームＳＳｃ及び、共通システムストリームＳＳｅが順番に記述される。未成年向タイトルのプログラムチェーンＰＧＣ２には、共通のシステムストリームＳＳａ、ＳＳｂ、未成年向けシステムストリームＳＳｄ及び、共通システムストリームＳＳｅが順番に記述される。
このように、成人向けシステムストリームＳＳｃと未成年向けシステムストリームＳＳｄをマルチシーンとして配列することにより、各ＰＧＣの記述に基づき、上述のデコーディング方法で、共通のシステムストリームＳＳａ及びＳＳｂを再生したのち、マルチシーン区間で成人向けＳＳｃを選択して再生し、更に、共通のシステムストリームＳＳｅを再生することで、成人向けの内容を有するタイトルを再生できる。
また、一方、マルチシーン区間で、未成年向けシステムストリームＳＳｄを選択して再生することで、成人向けシーンを含まない、未成年向けのタイトルを再生することができる。このように、タイトルストリームに、複数の代替えシーンからなるマルチシーン区間を用意しておき、事前に該マルチ区間のシーンのうちで再生するシーンを選択しておき、その選択内容に従って、基本的に同一のタイトルシーンから異なるシーンを有する複数のタイトルを生成する方法を、パレンタルロックという。
なお、パレンタルロックは、未成年保護と言う観点からの要求に基づいて、パレンタルロックと呼ばれるが、システムストリーム処理の観点は、上述の如く、マルチシーン区間での特定のシーンをユーザが予め選択することにより、静的に異なるタイトルストリーム生成する技術である。一方、マルチアングルは、タイトル再生中に、ユーザが随時且つ自由に、マルチシーン区間のシーンを選択することにより、同一のタイトルの内容を動的に変化させる技術である。
また、パレンタルロック技術を用いて、いわゆるディレクターズカットと呼ばれるタイトルストリーム編集も可能である。ディレクターズカットとは、映画等で再生時間の長いタイトルを、飛行機内で供さる場合には、劇場での再生と異なり、飛行時間によっては、タイトルを最後まで再生できない。このような事態にさけて、予めタイトル制作責任者、つまりディレクターの判断で、タイトル再生時間短縮の為に、カットしても良いシーンを定めておき、そのようなカットシーンを含むシステムストリームと、シーンカットされていないシステムストリームをマルチシーン区間に配置しておくことによって、制作者の意志に沿っシーンカット編集が可能となる。このようなパレンタル制御では、システムストリームからシステムストリームへのつなぎ目に於いて、再生画像をなめらかに矛盾なくつなぐ事、すなわちビデオ、オーディオなどバッファがアンダーフローしないシームレスデータ再生と再生映像、再生オーディオが視聴覚上、不自然でなくまた中断する事なく再生するシームレス情報再生が必要になる。
マルチアングル
図３３を参照して、本発明に於けるマルチアングル制御の概念を説明する。通常、マルチメディアタイトルは、対象物を時間Ｔの経過と共に録音及び撮影（以降、単に撮影と言う）して得られる。＃ＳＣ１、＃ＳＭ１、＃ＳＭ２、＃ＳＭ３、及び＃ＳＣ３の各ブロックは、それぞれ所定のカメラアングルで対象物を撮影して得られる撮影単位時間Ｔ１、Ｔ２、及びＴ３に得られるマルチメディアシーンを代表している。シーン＃ＳＭ１、＃ＳＭ２、及び＃ＳＭ３は、撮影単位時間Ｔ２にそれぞれ異なる複数（第一、第二、及び第三）のカメラアングルで撮影されたシーンであり、以降、第一、第二、及び第三マルチアングルシーンと呼ぶ。
ここでは、マルチシーンが、異なるアングルで撮影されたシーンから構成される例が挙げられている。しかし、マルチシーンの各シーンは、同一のアングルであるが、異なる時間に撮影されたシーンであっても良いし、またコンピュータグラフィックス等のデータであっても良い。言い換えれば、マルチアングルシーン区間は、マルチシーン区間であり、その区間のデータは、実際に異なるカメラアングルで得られたシーンデータに限るものでは無く、その表示時間が同一の期間にある複数のシーンを選択的に再生できるようなデータから成る区間である。
シーン＃ＳＣ１と＃ＳＣ３は、それぞれ、撮影単位時間Ｔ１及びＴ３に、つまりマルチアングルシーンの前後に、同一の基本のカメラアングルで撮影されたシーンあり、以降、基本アングルシーンと呼ぶ。通常、マルチアングルの内一つは、基本カメラアングルと同一である。
これらのアングルシーンの関係を分かりやすくするために、野球の中継放送を例に説明する。基本アングルシーン＃ＳＣ１及び＃ＳＣ３は、センター側から見た投手、捕手、打者を中心とした基本カメラアングルにて撮影されたものである。第一マルチアングルシーン＃ＳＭ１は、バックネット側から見た投手、捕手、打者を中心とした第一マルチカメラアングルにて撮影されたものである。第二マルチアングルシーン＃ＳＭ２は、センター側から見た投手、捕手、打者を中心とした第二マルチカメラアングル、つまり基本カメラアングルにて撮影されたものである。この意味で、第二マルチアングルシーン＃ＳＭ２は、撮影単位時間Ｔ２に於ける基本アングルシーン＃ＳＣ２である。第三マルチアングルシーン＃ＳＭ３は、バックネット側から見た内野を中心とした第三マルチカメラアングルにて撮影されたものである。
マルチアングルシーン＃ＳＭ１、＃ＳＭ２、及び＃ＳＭ３は、撮影単位時間Ｔ２に関して、表示時間が重複しており、この期間をマルチアングル区間と呼ぶ。視聴者は、マルチアングル区間に於いて、このマルチアングルシーン＃ＳＭ１、＃ＳＭ２、及び＃ＳＭ３を自由に選択することによって、基本アングルシーンから、好みのアングルシーン映像をあたかもカメラを切り替えているように楽しむことができる。なお、図中では、基本アングルシーン＃ＳＣ１及び＃ＳＣ３と、各マルチアングルシーン＃ＳＭ１、＃ＳＭ２、及び＃ＳＭ３間に、時間的ギャップがあるように見えるが、これはマルチアングルシーンのどれを選択するかによって、再生されるシーンの経路がどのようになるかを分かりやすく、矢印を用いて示すためであって、実際には時間的ギャップが無いことは言うまでもない。
図２３に、本発明に基づくシステムストリームのマルチアングル制御を、データの接続の観点から説明する。基本アングルシーン＃ＳＣに対応するマルチメディアデータを、基本アングルデータＢＡとし、撮影単位時間Ｔ１及びＴ３に於ける基本アングルデータＢＡをそれぞれＢＡ１及びＢＡ３とする。マルチアングルシーン＃ＳＭ１、＃ＳＭ２、及び＃ＳＭ３に対応するマルチアングルデータを、それぞれ、第一、第二、及び第三マルチアングルデータＭＡ１、ＭＡ２、及びＭＡ３と表している。先に、図３３を参照して、説明したように、マルチアングルシーンデータＭＡ１、ＭＡ２、及びＭＡ３の何れかを選択することによって、好みのアングルシーン映像を切り替えて楽しむことができる。また、同様に、基本アングルシーンデータＢＡ１及びＢＡ３と、各マルチアングルシーンデータＭＡ１、ＭＡ２、及びＭＡ３との間には、時間的ギャップは無い。
しかしながら、ＭＰＥＧシステムストリームの場合、各マルチアングルデータＭＡ１、ＭＡ２、及びＭＡ３の内の任意のデータと、先行基本アングルデータＢＡ１からの接続と、または後続基本アングルデータＢＡ３への接続時は、接続されるアングルデータの内容によっては、再生されるデータ間で、再生情報に不連続が生じて、一本のタイトルとして自然に再生できない場合がある。つまり、この場合、シームレスデータ再生であるが、非シームレス情報再生である。
以下に、図２３をＤＶＤシステムに於けるマルチシーン区間内での、複数のシーンを選択的に再生して、前後のシーンに接続するシームレス情報再生であるマルチアングル切替について説明する。
アングルシーン映像の切り替え、つまりマルチアングルシーンデータＭＡ１、ＭＡ２、及びＭＡ３の内一つを選択することが、先行する基本アングルデータＢＡ１の再生終了前までに完了されてなけらばならない。例えば、アングルシーンデータＢＡ１の再生中に別のマルチアングルシーンデータＭＡ２に切り替えることは、非常に困難である。これは、マルチメディアデータは、可変長符号化方式のＭＰＥＧのデータ構造を有するので、切り替え先のデータの途中で、データの切れ目を見つけるのが困難であり、また、符号化処理にフレーム間相関を利用しているためアングルの切換時に映像が乱れる可能性がある。ＭＰＥＧに於いては、少なくとも１フレームのリフレッシュフレームを有する処理単位としてＧＯＰが定義されている。このＧＯＰという処理単位に於いては他のＧＯＰに属するフレームを参照しないクローズドな処理が可能である。
言い換えれば、再生がマルチアングル区間に達する前には、遅くとも、先行基本アングルデータＢＡ１の再生が終わった時点で、任意のマルチアングルデータ、例えばＭＡ３、を選択すれば、この選択されたマルチアングルデータはシームレスに再生できる。しかし、マルチアングルデータの再生の途中に、他のマルチアングルシーンデータをシームレスに再生することは非常に困難である。このため、マルチアングル期間中には、カメラを切り替えるような自由な視点を得ることは困難である。
フローチャート：エンコーダ
図２７を参照して前述の、シナリオデータＳｔ７に基づいてエンコードシステム制御部２００が生成するエンコード情報テーブルについて説明する。エンコード情報テーブルはシーンの分岐点・結合点を区切りとしたシーン区間に対応し、複数のＶＯＢが含まれるＶＯＢセットデータ列と各シーン毎に対応するＶＯＢデータ列からなる。図２７に示されているＶＯＢセットデータ列は、後に詳述する。
図３４のステップ＃１００で、ユーザが指示するタイトル内容に基づき、ＤＶＤのマルチメディアストリーム生成のためにエンコードシステム制御部２００内で作成するエンコード情報テーブルである。ユーザ指示のシナリオでは、共通なシーンから複数のシーンへの分岐点、あるいは共通なシーン５への結合点がある。その分岐点・結合点を区切りとしたシーン区間に相当するＶｗＯＢをＶＯＢセットとし、ＶＯＢセットをエンコードするために作成するデータをＶＯＢセットデータ列としている。また、ＶＯＢセットデータ列では、マルチシーン区間を含む場合、示されているタイトル数をＶＯＢセットデータ列のタイトル数（TITLE_NO）に示す。
図２７のＶＯＢセットデータ構造は、ＶＯＢセットデータ列の１つのＶＯＢセットをエンコードするためのデータの内容を示す。ＶＯＢセットデータ構造は、ＶＯＢセット番号（VOBS_NO）、ＶＯＢセット内のＶＯＢ番号（VOB_NO）、先行ＶＯＢシームレス接続フラグ（VOB_Fsb）、後続ＶＯＢシームレス接続フラグ（VOB_Fsf）、マルチシーンフラグ（VOB_Fp）、インターリーブフラグ（VOB_Fi）、マルチアングル（VOB_Fm）、マルチアングルシームレス切り替えフラグ（VOB_FsV）、インターリーブＶＯＢの最大ビットレート（ILV_BR）、インターリーブＶＯＢの分割数（ILV_DIV）、最小インターリーブユニット再生時間（ILV_MT）からなる。
ＶＯＢセット番号VOBS_NOは、例えばタイトルシナリオ再生順を目安につけるＶＯＢセットを識別するための番号である。
ＶＯＢセット内のＶＯＢ番号VOB_NOは、例えばタイトルシナリオ再生順を目安に、タイトルシナリオ全体にわたって、ＶＯＢを識別するための番号である。
先行ＶＯＢシームレス接続フラグVOB_Fsbは、シナリオ再生で先行のＶＯＢとシームレスに接続するか否かを示すフラグである。
後続ＶＯＢシームレス接続フラグVOB_Fsfは、シナリオ再生で後続のＶＯＢとシームレスに接続するか否かを示すフラグである。
マルチシーンフラグVOB_Fpは、ＶＯＢセットが複数のＶＯＢで構成しているか否かを示すフラグである。
インターリーブフラグVOB_Fiは、ＶＯＢセット内のＶＯＢがインターリーブ配置するか否かを示すフラグである。
マルチアングルフラグVOB_Fmは、ＶＯＢセットがマルチアングルであるか否かを示すフラグである。
マルチアングルシームレス切り替えフラグVOB_FsVは、マルチアングル内の切り替えがシームレスであるか否かを示すフラグである。
インターリーブＶＯＢ最大ビットレートILV_BRは、インターリーブするＶＯＢの最大ビットレートの値を示す。
インターリーブＶＯＢ分割数ILV_DIVは、インターリーブするＶＯＢのインターリーブユニット数を示す。
最小インターリーブユニット再生時間ILVU_MTは、インターリーブブロック再生時に、トラックバッファのアンダーフローしない最小のインターリーブユニットに於いて、そのＶＯＢのビットレートがILV_BRの時に再生できる時間を示す。
図２８を参照して前述の、シナリオデータＳｔ７に基づいてエンコードシステム制御部２００が生成するＶＯＢ毎に対応するエンコード情報テーブルについて説明する。このエンコード情報テーブルを基に、ビデオエンコーダ３００、サブピクチャエンコーダ５００、オーディオエンコーダ７００、システムエンコーダ９００へ、後述する各ＶＯＢに対応するエンコードパラメータデータを生成する。図２８に示されているＶＯＢデータ列は、図３４のステップ＃１００で、ユーザが指示するタイトル内容に基づき、ＤＶＤのマルチメディアストリーム生成のためにエンコードシステム制御内で作成するＶＯＢ毎のエンコード情報テーブルである。１つのエンコード単位をＶＯＢとし、そのＶＯＢをエンコードするために作成するデータをＶＯＢデータ列としている。例えば、３つのアングルシーンで構成されるＶＯＢセットは、３つのＶＯＢから構成される事になる。図２８のＶＯＢデータ構造はＶＯＢデータ列の１つのＶＯＢをエンコードするためのデータの内容を示す。
ＶＯＢデータ構造は、ビデオ素材の開始時刻（VOB_VST）、ビデオ素材の終了時刻（VOB_VEND）、ビデオ素材の種類（VOB_V_KIND）、ビデオのエンコードビットレート（V_BR）、オーディオ素材の開始時刻（VOB_AST）、オーディオ素材の終了時刻（VOB_AEND）、オーディオエンコード方式（VOB_A_KIND）、オーディオのビットレート（A_BR）からなる。
ビデオ素材の開始時刻VOB_VSTは、ビデオ素材の時刻に対応するビデオエンコードの開始時刻である。
ビデオ素材の終了時刻VOB_VENDは、ビデオ素材の時刻に対応するビデオエンコードの終了時刻である。
ビデオ素材の種類VOB_V_KINDは、エンコード素材がＮＴＳＣ形式かＰＡＬ形式のいづれかであるか、またはビデオ素材がテレシネ変換処理された素材であるか否かを示すものである。
ビデオのビットレートV_BRは、ビデオのエンコードビットレートである。
オーディオ素材の開始時刻VOB_ASTは、オーディオ素材の時刻に対応するオーディオエンコード開始時刻である。
オーディオ素材の終了時刻VOB_AENDは、オーディオ素材の時刻に対応するオーディオエンコード終了時刻である。
オーディオエンコード方式VOB_A_KINDは、オーディオのエンコード方式を示すものであり、エンコード方式にはＡＣ−３方式、ＭＰＥＧ方式、リニアＰＣＭ方式などがある。
オーディオのビットレートA_BRは、オーディオのエンコードビットレートである。
図２９に、ＶＯＢをエンコードするためのビデオ、オーディオ、システムの各エンコーダ３００、５００、及び９００へのエンコードパラメータを示す。エンコードパラメータは、ＶＯＢ番号（VOB_NO）、ビデオエンコード開始時刻（V_STTM）、ビデオエンコード終了時刻（V_ENDTM）、エンコードモード（V_ENCMD）、ビデオエンコードビットレート（V_RATE）、ビデオエンコード最大ビットレート（V_MRATE）、ＧＯＰ構造固定フラグ（GOP_FXflag）、ビデオエンコードＧＯＰ構造（GOPST）、ビデオエンコード初期データ（V_INTST）、ビデオエンコード終了データ（V_ENDST）、オーディオエンコード開始時刻（A_STTM）、オーディオエンコード終了時刻（A_ENDTM）、オーディオエンコードビットレート（A_RATE）、オーディオエンコード方式（A_ENCMD）、オーディオ開始時ギャップ（A_STGAP）、オーディオ終了時ギャップ（A_ENDGAP）、先行ＶＯＢ番号（B_VOB_NO）、後続ＶＯＢ番号（F_VOB_NO）からなる。
ＶＯＢ番号VOB_NOは、例えばタイトルシナリオ再生順を目安に、タイトルシナリオ全体にわたって番号づける、ＶＯＢを識別するための番号である。
ビデオエンコード開始時刻V_STTMは、ビデオ素材上のビデオエンコード開始時刻である。
ビデオエンコード終了時刻V_STTMは、ビデオ素材上のビデオエンコード終了時刻である。
エンコードモードV_ENCMDは、ビデオ素材がテレシネ変換された素材の場合には、効率よいエンコードができるようにビデオエンコード時に逆テレシネ変換処理を行うか否かなどを設定するためのエンコードモードである。
ビデオエンコードビットレートV_RATEは、ビデオエンコード時の平均ビットレートである。
ビデオエンコード最大ビットレートはV_MRATEは、ビデオエンコード時の最大ビットレートである。
ＧＯＰ構造固定フラグGOP_FXflagは、ビデオエンコード時に途中で、ＧＯＰ構造を変えることなくエンコードを行うか否かを示すものである。マルチアングルシーン中にシームレスに切り替え可能にする場合に有効なパラメータである。
ビデオエンコードＧＯＰ構造GOPSTは、エンコード時のＧＯＰ構造データである。
ビデオエンコード初期データV_INSTは、ビデオエンコード開始時のＶＢＶバッファ（復号バッファ）の初期値などを設定する、先行のビデオエンコードストリームとシームレス再生する場合に有効なパラメータである。
ビデオエンコード終了データV_ENDSTは、ビデオエンコード終了時のＶＢＶバッファ（復号バッファ）の終了値などを設定する。後続のビデオエンコードストリームとシームレス再生する場合に有効なパラメータである。
オーディオエンコーダ開始時刻A_STTMは、オーディオ素材上のオーディオエンコード開始時刻である。
オーディオエンコーダ終了時刻A_ENDTMは、オーディオ素材上のオーディオエンコード終了時刻である。
オーディオエンコードビットレートA_RATEは、オーディオエンコード時のビットレートである。
オーディオエンコード方式A_ENCMDは、オーディオのエンコード方式であり、ＡＣ−３方式、ＭＰＥＧ方式、リニアＰＣＭ方式などがある。
オーディオ開始時ギャップA_STGAPは、ＶＯＢ開始時のビデオとオーディオの開始のずれ時間である。先行のシステムエンコードストリームとシームレス再生する場合に有効なパラメータである。
オーディオ終了時ギャップA_ENDGAPは、ＶＯＢ終了時のビデオとオーディオの終了のずれ時間である。後続のシステムエンコードストリームとシームレス再生する場合に有効なパラメータである。
先行ＶＯＢ番号B_VOB_NOは、シームレス接続の先行ＶＯＢが存在する場合にそのＶＯＢ番号を示すものである。
後続ＶＯＢ番号F_VOB_NOは、シームレス接続の後続ＶＯＢが存在する場合にそのＶＯＢ番号を示すものである。
図３４に示すフローチャートを参照しながら、本発明に係るＤＶＤエンコーダＥＣＤの動作を説明する。なお、同図に於いて二重線で囲まれたブロックはそれぞれサブルーチンを示す。本実施形態は、ＤＶＤシステムについて説明するが、言うまでなくオーサリングエンコーダＥＣについても同様に構成することができる。
ステップ＃１００に於いて、ユーザーは、編集情報作成部１００でマルチメディアソースデータＳｔ１、Ｓｔ２、及びＳｔ３の内容を確認しながら、所望のシナリオに添った内容の編集指示を入力する。
ステップ＃２００で、編集情報作成部１００はユーザの編集指示に応じて、上述の編集指示情報を含むシナリオデータＳｔ７を生成する。
ステップ＃２００での、シナリオデータＳｔ７の生成時に、ユーザの編集指示内容の内、インターリーブする事を想定しているマルチアングル、パレンタルのマルチシーン区間でのインターリーブ時の編集指示は、以下の条件を満たすように入力する。
まず画質的に十分な画質が得られるようなＶＯＢの最大ビットレートを決定し、さらにＤＶＤエンコードデータの再生装置として想定するＤＶＤデコーダＤＣＤのトラックバッファ量及びジャンプ性能、ジャンプ時間とジャンプ距離の値を決定する。上記値をもとに、式３、式４より、最小インターリーブユニットの再生時間を得る。
次に、マルチシーン区間に含まれる各シーンの再生時間をもとに式５及び式６が満たされるかどうか検証する。満たされなければ後続シーン一部シーンをマルチシーン区間の各シーン接続するなどの処理を行い式５及び式６を満たすようにユーザは指示の変更入力する。
さらに、マルチアングルの編集指示の場合、シームレス切り替え時には式７を満たすと同時に、アングルの各シーンの再生時間、オーディオは同一とする編集指示を入力する。また非シームレス切り替え時には式８を満たすようにユーザは編集指示を入力する。
ステップ＃３００で、エンコードシステム制御部２００は、シナリオデータＳｔ７に基づいて、先ず、対象シーンを先行シーンに対して、シームレスに接続するのか否かを判断する。シームレス接続とは、先行シーン区間が複数のシーンからなるマルチシーン区間である場合に、その先行マルチシーン区間に含まれる全シーンの内の任意の１シーンを、現時点の接続対象である共通シーンとシームレスに接続する。同様に、現時点の接続対象シーンがマールチシーン区間である場合には、マルチシーン区間の任意の１シーンを接続出来ると言うことを意味する。ステップ＃３００で、ＮＯ、つまり、非シームレス接続と判断された場合にはステップ＃４００へ進む。
ステップ＃４００で、エンコードシステム制御部２００は、対象シーンが先行シーンとシームレス接続されることを示す、先行シーンシームレス接続フラグVOB_Fsbをリセットして、ステップ＃６００に進む。
一方、ステップ＃３００で、ＹＥＳ、つまり先行シートとシームレス接続すると判断された時には、ステップ＃５００に進む。
ステップ＃５００で、先行シーンシームレス接続フラグVOB_Fsbをセットして、ステップ＃６００に進む。
ステップ＃６００で、エンコードシステム制御部２００は、シナリオデータＳｔ７に基づいて、対象シーンを後続するシーンとシームレス接続するのか否かを判断する。ステップ＃６００で、ＮＯ、つまり非シームレス接続と判断された場合にはステップ＃７００へ進む。
ステップ＃７００で、エンコードシステム制御部２００は、シーンを後続シーンとシームレス接続することを示す、後続シーンシームレス接続フラグVOB_Fsfをリセットして、ステップ＃９００に進む。
一方、ステップ＃６００で、ＹＥＳ、つまり後続シートとシームレス接続すると判断された時には、ステップ＃８００に進む。
ステップ＃８００で、エンコードシステム制御部２００は、後続シーンシームレス接続フラグVOB_Fsfをセットして、ステップ＃９００に進む。
ステップ＃９００で、エンコードシステム制御部２００は、シナリオデータＳｔ７に基づいて、接続対象のシーンが一つ以上、つまり、マルチシーンであるか否かを判断する。マルチシーンには、マルチシーンで構成できる複数の再生経路の内、１つの再生経路のみを再生するパレンタル制御と再生経路がマルチシーン区間の間、切り替え可能なマルチアングル制御がある。
シナリオステップ＃９００で、ＮＯ、つまり非マルチシーン接続であると判断されて時は、ステップ＃１０００に進む。
ステップ＃１０００で、マルチシーン接続であることを示すマルチシーンフラグVOB_Fpをリセットして、エンコードパラメータ生成ステップ＃１８００に進む。ステップ＃１８００の動作については、あとで述べる。
一方、ステップ＃９００で、ＹＥＳ、つまりマルチシーン接続と判断された時には、ステップ＃１１００に進む。
ステップ＃１１００で、マルチシーンフラグVOB_Fpをセットして、マルチアングル接続かどうかを判断するステップ＃１２００に進む。
ステップ＃１２００で、マルチシーン区間中の複数シーン間での切り替えをするかどうか、すなわち、マルチアングルの区間であるか否かを判断する。ステップ＃１２００で、ＮＯ、つまり、マルチシーン区間の途中で切り替えずに、１つの再生経路のみを再生するパレンタル制御と判断された時には、ステップ＃１３００に進む。
ステップ＃１３００で、接続対象シーンがマルチアングルであること示すマルチアングルフラグVOB_Fmをリセットしてステップ＃１３０２に進む。
ステップ＃１３０２で、先行シーンシームレス接続フラグVOB_Fsb及び後続シーンシームレス接続フラグVOB_Fsfの何れかがセットされているか否かを判断する。ステップ＃１３００で、ＹＥＳ、つまり接続対象シーンは先行あるいは後続のシーンの何れかあるいは、両方とシームレス接続すると判断された時には、ステップ＃１３０４に進む。
ステップ＃１３０４では、対象シーンのエンコードデータであるＶＯＢをインターリーブすることを示すインターリーブフラグVOB_Fiをセットして、ステップ＃１８００に進む。
一方、ステップ＃１３０２で、ＮＯ、つまり、対象シーンは先行シーン及び後続シーンの何れともシームレス接続しない場合には、ステップ＃１３０６に進む。
ステップ＃１３０６でインターリーブフラッグVOB_Fiをリセットしてステップ＃１８００に進む。
一方、ステップ＃１２００で、ＹＥＳ、つまりマルチアングルであると判断された場合には、ステップ＃１４００に進む。
ステップ＃１４００では、マルチアングルフラッグVOB_Fm及びインターリーブフラッグVOB_Fiをセットした後ステップ＃１５００に進む。
ステップ＃１５００で、エンコードシステム制御部２００はシナリオデータＳｔ７に基づいて、マルチアングルシーン区間で、つまりＶＯＢよりも小さな再生単位で、映像やオーディオを途切れることなく、いわゆるシームレスに切替られるのかを判断する。ステップ＃１５００で、ＮＯ、つまり、非シームレス切替と判断された時には、ステップ＃１６００に進む。
ステップ＃１６００で、対象シーンがシームレス切替であることを示すシームレス切替フラッグVOB_FsVをリセットして、ステップ＃１８００に進む。
一方、ステップ＃１５００、ＹＥＳ、つまりシームレス切替と判断された時には、ステップ＃１７００に進む。
ステップ＃１７００で、シームレス切替フラッグVOB_FsVをセットしてステップ＃１８００に進む。このように、本発明では、編集意思を反映したシナリオデータＳｔ７から、編集情報が上述の各フラグのセット状態として検出されて後に、ステップ＃１８００に進む。
ステップ＃１８００で、上述の如く各フラグのセット状態として検出されたユーザの編集意思に基づいて、ソースストリームをエンコードするための、それぞれ図２７及び図２８に示されるＶＯＢセット単位及びＶＯＢ単位毎のエンコード情報テーブルへの情報付加と、図２９に示されるＶＯＢデータ単位でのエンコードパラメータを作成する。次に、ステップ＃１９００に進む。このエンコードパラメータ作成ステップの詳細については、図３５、図３６、図３７、図３８を参照して後で説明する。
ステップ＃１９００で、ステップ＃１８００で作成してエンコードパラメータに基づいて、ビデオデータ及びオーディオデータのエンコードを行った後にステップ＃２０００に進む。尚、サブピクチャデータは、本来必要に応じて、ビデオ再生中に、随時挿入して利用する目的から、前後のシーン等との連続性は本来不要である。更に、サプピクチャは、およそ、１画面分の映像情報であるので、時間軸上に延在するビデオデータ及びオーディオデータと異なり、表示上は静止の場合が多く、常に連続して再生されるものではない。よって、シームレス及び非シームレスと言う連続再生に関する本実施形態に於いては、簡便化のために、サブピクチャデータのエンコードについては説明を省く。
ステップ＃２０００では、ＶＯＢセットの数だけステップ＃３００からステップ＃１９００までの各ステップから構成されるループをまわし、図１６のタイトルの各ＶＯＢの再生順などの再生情報を自身のデータ構造にもつ、プログラムチェーン（VTS_PGC#I）情報をフォーマットし、マルチルチシーン区間のＶＯＢをインターリーブ配置を作成し、そしてシステムエンコードするために必要なＶＯＢセットデータ列及びＶＯＢデータ列を完成させる。次に、ステップ＃２１００に進む。
ステップ＃２１００で、ステップ＃２０００までのループの結果として得られる全ＶＯＢセット数VOBS_NUMを得て、ＶＯＢセットデータ列に追加し、さらにシナリオデータＳｔ７に於いて、シナリオ再生経路の数をタイトル数とした場合の、タイトル数TITLE_NOを設定して、エンコード情報テーブルとしてのＶＯＢセットデータ列を完成した後、ステップ＃２２００に進む。
ステップ＃２２００で、ステップ＃１９００でエンコードしたビデオエンコードストリーム、オーディオエンコードストリーム、図２９のエンコードパラメータに基づいて、図１６のVTSTT_VOBS内のＶＯＢ（VOB#i）データを作成するためのシステムエンコードを行う。次に、ステップ＃２３００に進む。
ステップ＃２３００で、図１６のＶＴＳ情報、ＶＴＳＩに含まれるＶＴＳＩ管理テーブル（VTSI_MAT）、ＶＴＳＰＧＣ情報テーブル（ＶＴＳＰＧＣＩＴ）及び、ＶＯＢデータの再生順を制御するプログラムチェーン情報（VTS_PGCI#I）のデータ作成及びマルチシーン区間に含めれるＶＯＢのインターリーブ配置などの処理を含むフォーマットを行う。
図３５、図３６、及び図３７を参照して、図３４に示すフローチャートのステップ＃１８００のエンコードパラメータ生成サブルーチンに於ける、マルチアングル制御時のエンコードパラメータ生成の動作を説明する。
先ず、図３５を参照して、図３４のステップ＃１５００で、ＮＯと判断された時、つまり各フラグはそれぞれVOB_Fsb=１またはVOB_Fsf=１、VOB_Fp=１、VOB_Fi=１、VOB_Fm=１、ＦｓＶ=０である場合、すなわちマルチアングル制御時の非シームレス切り替えストリームのエンコードパラメータ生成動作を説明する。以下の動作で、図２７、図２８に示すエンコード情報テーブル、図２９に示すエンコードパラメータを作成する。
ステップ＃１８１２では、シナリオデータＳｔ７に含まれているシナリオ再生順を抽出し、ＶＯＢセット番号VOBS_NOを設定し、さらにＶＯＢセット内の１つ以上のＶＯＢに対して、ＶＯＢ番号VOB_NOを設定する。
ステップ＃１８１４では、シナリオデータＳｔ７より、インターリーブＶＯＢの最大ビットレートILV_BRを抽出、インターリーブフラグVOB_Fi=１に基づき、エンコードパラメータのビデオエンコード最大ビットレートV_MRATEに設定。
ステップ＃１８１６では、シナリオデータＳｔ７より、最小インターリーブユニット再生時間ILVU_MTを抽出。
ステップ＃１８１８では、マルチアングルフラグVOB_Fp=１に基づき、ビデオエンコードＧＯＰ構造GOPSTのＮ=１５、Ｍ=３の値とＧＯＰ構造固定フラグGOPFXflag=“1”に設定。
ステップ＃１８２０は、ＶＯＢデータ設定の共通のルーチンである。図３６に、ステップ＃１８２０のＶＯＢデータ共通設定ルーチンを示す。以下の動作フローで、図２７、図２８に示すエンコード情報テーブル、図２９に示すエンコードパラメータを作成する。
ステップ＃１８２２では、シナリオデータＳｔ７より、各ＶＯＢのビデオ素材の開始時刻VOB_VST、終了時刻VOB_VENDを抽出し、ビデオエンコード開始時刻V_STTMとエンコード終了時刻V_ENDTMをビデオエンコードのパラメータとする。
ステップ＃１８２４では、シナリオデータＳｔ７より、各ＶＯＢのオーディオ素材の開始時刻VOB_ASTを抽出し、オーディオエンコード開始時刻A_STTMをオーディオエンコードのパラメータとする。
ステップ＃１８２６では、シナリオデータＳｔ７より、各ＶＯＢのオーディオ素材の終了時刻VOB_AENDを抽出し、VOB_AENDを超えない時刻で、オーディオエンコード方式できめられるオーディオアクセスユニット（以下ＡＡＵと記述する）単位の時刻を、オーディオエンコードのパラメータである、エンコード終了時刻A_ENDTMとする。
ステップ＃１８２８は、ビデオエンコード開始時刻V_STTMとオーディオエンコード開始時刻A_STTMの差より、オーディオ開始時ギャップA_STGAPをシステムエンコードのパラメータとする。
ステップ＃１８３０では、ビデオエンコード終了時刻V_ENDTMとオーディオエンコード終了時刻A_ENDTMの差より、オーディオ終了時ギャップA_ENDGAPをシステムエンコードのパラメータとする。
ステップ＃１８３２では、シナリオデータＳｔ７より、ビデオのビットレートV_BRを抽出し、ビデオエンコードの平均ビットレートとして、ビデオエンコードビットレートV_RATEをビデオエンコードのパラメータとする。
ステップ＃１８３４では、シナリオデータＳｔ７より、オーディオのビットレートA_BRを抽出し、オーディオエンコードビットレートA_RATEをオーディオエンコードのパラメータとする。
ステップ＃１８３６では、シナリオデータＳｔ７より、ビデオ素材の種類VOB_V_KINDを抽出し、フィルム素材、すなわちテレシネ変換された素材であれば、ビデオエンコードモードV_ENCMDに逆テレシネ変換を設定し、ビデオエンコードのパラメータとする。
ステップ＃１８３８では、シナリオデータＳｔ７より、オーディオのエンコード方式VOB_A_KINDを抽出し、オーディオエンコードモードA_ENCMDにエンコード方式を設定し、オーディオエンコードのパラメータとする。
ステップ＃１８４０では、ビデオエンコード初期データV_INSTのＶＢＶバッファ初期値が、ビデオエンコード終了データV_ENDSTのＶＢＶバッファ終了値以下の値になるように設定し、ビデオエンコードのパラメータとする。
ステップ＃１８４２では、先行ＶＯＢシームレス接続フラグVOB_Fsb=１に基づき、先行接続のＶＯＢ番号VOB_NOを先行接続のＶＯＢ番号B_VOB_NOに設定し、システムエンコードのパラメータとする。
ステップ＃１８４４では、後続ＶＯＢシームレス接続フラグVOB_Fsf=１に基づき、後続接続のＶＯＢ番号VOB_NOを後続接続のＶＯＢ番号F_VOB_NOに設定し、システムエンコードのパラメータとする。
以上のように、マルチアングルのＶＯＢセットであり、非シームレスマルチアングル切り替えの制御の場合のエンコード情報テーブル及びエンコードパラメータが生成できる。
次に、図３７を参照して、図３４に於いて、ステップ＃１５００で、Ｙｅｓと判断された時、つまり各フラグはそれぞれVOB_Fsb=１またはVOB_Fsf=１、VOB_Fp=１、VOB_Fi=１、VOB_Fm=１、VOB_FsV=１である場合の、マルチアングル制御時のシームレス切り替えストリームのエンコードパラメータ生成動作を説明する。
以下の動作で、図２７、図２８に示すエンコード情報テーブル、及び図２９に示すエンコードパラメータを作成する。
ステップ＃１８５０では、シナリオデータＳｔ７に含まれているシナリオ再生順を抽出し、ＶＯＢセット番号VOBS_NOを設定し、さらにＶＯＢセット内の１つ以上のＶＯＢに対して、ＶＯＢ番号VOB_NOを設定する。
ステップ＃１８５２では、シナリオデータＳｔ７より、インターリーブＶＯＢの最大ビットレートいＬＶ_BRを抽出、インターリーブフラグVOB_Fi=１に基づき、ビデオエンコード最大ビットレートV_RATEに設定。
ステップ＃１８５４では、シナリオデータＳｔ７より、最小インターリーブユニット再生時間ILVU_MTを抽出。
ステップ＃１８５６では、マルチアングルフラグVOB_Fp=１に基づき、ビデオエンコードＧＯＰ構造GOPSTのＮ=１５、Ｍ=３の値とＧＯＰ構造固定フラグGOPFXflag=“1”に設定。
ステップ＃１８５８では、シームレス切り替えフラグVOB_FsV=１に基づいて、ビデオエンコードＧＯＰ構造GOPSTにクローズドＧＯＰを設定、ビデオエンコードのパラメータとする。
ステップ＃１８６０は、ＶＯＢデータ設定の共通のルーチンである。この共通のルーチンは図３５に示しているルーチンであり、既に説明しているので省略する。
以上のようにマルチアングルのＶＯＢセットで、シームレス切り替え制御の場合のエンコードパラメータが生成できる。
次に、図３８を参照して、図３４に於いて、ステップ＃１２００で、ＮＯと判断され、ステップ１３０４でＹＥＳと判断された時、つまり各フラグはそれぞれVOB_Fsb=１またはVOB_Fsf=１、VOB_Fp=１、VOB_Fi=１、VOB_Fm=０である場合の、パレンタル制御時のエンコードパラメータ生成動作を説明する。以下の動作で、図２７、図２８に示すエンコード情報テーブル、及び図２９に示すエンコードパラメータを作成する。
ステップ＃１８７０では、シナリオデータＳｔ７に含まれているシナリオ再生順を抽出し、ＶＯＢセット番号VOBS_NOを設定し、さらにＶＯＢセット内の１つ以上のＶＯＢに対して、ＶＯＢ番号VOB_NOを設定する。
ステップ＃１８７２では、シナリオデータＳｔ７より、インターリーブＶＯＢの最大ビットレートILV_BRを抽出、インターリーブフラグVOB_Fi=１に基づき、ビデオエンコード最大ビットレートV_RATEに設定する。
ステップ＃１８７４では、シナリオデータＳｔ７より、ＶＯＢインターリーブユニット分割数ILV_DIVを抽出する。
ステップ＃１８７６は、ＶＯＢデータ設定の共通のルーチンである。この共通のルーチンは図３５に示しているルーチンであり、既に説明しているので省略する。
以上のようにマルチシーンのＶＯＢセットで、パレンタル制御の場合のエンコードパラメータが生成できる。
次に、図５３を参照して、図３４に於いて、ステップ＃９００で、ＮＯと判断された時、つまり各フラグはそれぞれVOB_Fp=０である場合の、すなわち単一シーンのエンコードパラメータ生成動作を説明する。以下の動作で、図２７、図２８に示すエンコード情報テーブル、及び図２９に示すエンコードパラメータを作成する。
ステップ＃１８８０では、シナリオデータＳｔ７に含まれているシナリオ再生順を抽出し、ＶＯＢセット番号VOBS_NOを設定し、さらにＶＯＢセット内の１つ以上のＶＯＢに対して、ＶＯＢ番号VOB_NOを設定する。
ステップ＃１８８２では、シナリオデータＳｔ７より、インターリーブＶＯＢの最大ビットレートＩＬＶ_BRを抽出、インターリーブフラグVOB_Fi=１に基づき、ビデオエンコード最大ビットレートV_MRATEに設定。
ステップ＃１８８４は、ＶＯＢデータ設定の共通のルーチンである。この共通のルーチンは図３５に示しているルーチンであり、既に説明しているので省略する。
上記ようなエンコード情報テーブル作成、エンコードパラメータ作成フローによって、ＤＶＤのビデオ、オーディオ、システムエンコード、ＤＶＤのフォーマッタのためのエンコードパラメータは生成できる。
デコーダのフローチャート
ディスクからストリームバッファ転送フロー
以下に、図４７および図４８を参照して、シナリオ選択データＳｔ５１に基づいてデコードシステム制御部２３００が生成するデコード情報テーブルについて説明する。デコード情報テーブルは、図４７に示すデコードシステムテーブルと、図４８に示すデコードテーブルから構成される。
図４７に示すようにデコードシステムテーブルは、シナリオ情報レジスタ部とセル情報レジスタ部からなる。シナリオ情報レジスタ部は、シナリオ選択データＳｔ５１に含まれるユーザの選択した、タイトル番号等の再生シナリオ情報を抽出して記録する。セル情報レジスタ部は、シナリオ情報レジスタ部は抽出されたユーザの選択したシナリオ情報に基いてプログラムチェーンを構成する各セル情報を再生に必要な情報を抽出して記録する。
更に、シナリオ情報レジスタ部は、アングル番号レジスタANGLE_NO_reg、ＶＴＳ番号レジスタVTS_NO_reg、ＰＧＣ番号レジスタVTS_PGCI_NO_reg、オーディオＩＤレジスタAUDIO_ID_reg、副映像ＩＤレジスタSP_ID_reg、及びＳＣＲ用バッファレジスタSCR_bufferを含む。
アングル番号レジスタANGLE_NO_regは、再生するＰＧＣにマルチアングルが存在する場合、どのアングルを再生するかの情報を記録する。ＶＴＳ番号レジスタVTS_NO_regは、ディスク上に存在する複数のＶＴＳのうち、次に再生するＶＴＳの番号を記録する。ＰＧＣ番号レジスタVTS_PGCI_NO_regは、パレンタル等の用途でＶＴＳ中存在する複数のＰＧＣのうち、どのＰＧＣを再生するかを指示する情報を記録する。オーディオＩＤレジスタAUDIO_ID_regは、ＶＴＳ中存在する複数のオーディオストリームの、どれを再生するかを指示する情報を記録する。副映像ＩＤレジスタSP_ID_regは、ＶＴＳ中に複数の副映像ストリームが存在する場合は、どの副映像ストリームを再生するか指示する情報を記録する。ＳＣＲ用バッファSCR_bufferは、図１９に示すように、パックヘッダに記述されるＳＣＲを一時記憶するバッファである。この一時記憶されたＳＣＲは、図２６を参照して説明したように、ストリーム再生データＳｔ６３としてデコードシステム制御部２３００に出力される。
セル情報レジスタ部は、セルブロックモードレジスタCBM_reg、セルブロックタイプレジスタCBT_reg、シームレス再生フラグレジスタSPB_reg、インターリーブアロケーションフラグレジスタIAF_reg、STC再設定フラグレジスタSTCDF_reg、シームレスアングル切り替えフラグレジスタSACF_reg、セル最初のＶＯＢＵ開始アドレスレジスタC_FVOBU_SA_reg、セル最後のＶＯＢＵ開始アドレスレジスタC_LVOBU_SA_regを含む。
セルブロックモードレジスタCBM_regは複数のセルが１つの機能ブロックを構成しているか否かを示し、構成していない場合は値として“N_BLOCK”を記録する。また、セルが１つの機能ブロックを構成している場合、その機能ブロックの先頭のセルの場合“F_CELL”を、最後のセルの場合“L_CELL”を、その間のセルの場合“BLOCK”を値として記録する。
セルブロックタイプレジスタCBT_regは、セルブロックモードレジスタCBM_regで示したブロックの種類を記録するレジスタであり、マルチアングルの場合“A_BLOCK”を、マルチアングルでない場合“N_BLOCK”を記録する。
シームレス再生フラグレジスタSPF_regは、該セルが前に再生されるセルまたはセルブロックとシームレスに接続して再生するか否かを示す情報を記録する。前セルまたは前セルブロックとシームレスに接続して再生する場合には、値として“SML”を、シームレス接続でない場合は値として“NSML”を記録する。
インターリーブアロケーションフラグレジスタIAF_regは、該セルがインターリーブ領域に配置されているか否かの情報を記録する。インターリーブ領域に配置されている場合には値として“ILVB”を、インターリーブ領域に配置されていない場合は“N_ILVB”を記録する。
ＳＴＣ再設定フラグレジスタSTCDF_regは、同期をとる際に使用するＳＴＣ（System Time Clock）をセルの再生時に再設定する必要があるかないかの情報を記録する。再設定が必要な場合には値として“STC_RESET”を、再設定が不要な場合には値として、“STC_NRESET”を記録する。
シームレスアングルチェンジフラグレジスタSACF_regは、該セルがアングル区間に属しかつ、シームレスに切替えるかどうかを示す情報を記録する。アングル区間でかつシームレスに切替える場合には値としで“SML”を、そうでない場合は“NSML”を記録する。
セル最初のＶＯＢＵ開始アドレスレジスタC_FVOBU_SA_regは、セル先頭ＶＯＢＵ開始アドレスを記録する。その値はＶＴＳタイトル用ＶＯＢＳ（VTSTT_VOBS）の先頭セルの論理セクタからの距離をセクタ数で示し、該セクタ数を記録する。
セル最後のＶＯＢＵ開始アドレスレジスタC_LVOBU_SA_regは、セル最終ＶＯＢＵ開始アドレスを記録する。その値は、ＶＴＳタイトル用ＶＯＢＳ（VTSTT_VOBS）の先頭セルの論理セクタから距離をセクタ数で示し、該セクタ数を記録する。
次に、図４８のデコードテーブルについて説明する。同図に示すようにデコードテーブルは、非シームレスマルチアングル情報レジスタ部、シームレスマルチアングル情報レジスタ部、ＶＯＢＵ情報レジスタ部、シームレス再生レジスタ部からなる。
非シームレスマルチアングル情報レジスタ部は、NSML_AGL_C1_DSTA_reg〜NSML_AGL_C9_DSTA_regを含む。
NSML_AGL_C1_DSTA_reg〜NSML_AGL_C9_DSTA_regには、図２０に示すＰＣＩパケット中のNSML_AGL_C1_DSTA〜NSML_AGL_C9_DSTAを記録する。
シームレスマルチアングル情報レジスタ部は、SML_AGL_C1_DSTA_reg〜SML_AGL_C9_DSTA_regを含む。
SML_AGL_C1_DSTA_reg〜SML_AGL_C9_DSTA_regには、図２０に示すＤＳＩパケット中のSML_AGL_C1_DSTA〜SML_AGL_C9_DSTAを記録する。
ＶＯＢＵ情報レジスタ部は、ＶＯＢＵ最終アドレスレジスタＶＯＢＵ_EA_regを含む。
ＶＯＢＵ情報レジスタＶＯＢＵ_EA_regには、図２０に示すＤＳＩパケット中のＶＯＢＵ_EAを記録する。
シームレス再生レジスタ部は、インターリーブユニットフラグレジスタILVU_flag_reg、ユニットエンドフラグレジスタUNIT_END_flag_reg、ＩＬＶＵ最終パックアドレスレジスタILVU_EA_reg、次のインターリーブユニット開始アドレスNT_ILVU_SA_reg、ＶＯＢ内先頭ビデオフレーム表示開始時刻レジスタＶＯＢ_V_SPTM_reg、ＶＯＢ内最終ビデオフレーム表示終了時刻レジスタＶＯＢ_V_EPTM_reg、オーディオ再生停止時刻１レジスタVOB_A_GAP_PTM1_reg、オーディオ再生停止時刻２レジスタVOB_A_GAP_PTM2_reg、オーディオ再生停止期間１レジスタVOB_A_GAP_LEN1、オーディオ再生停止期間２レジスタＶＯＢ_A_GAP_LEN2を含む。
インターリーブユニットフラグレジスタILVU_flag_regはＶＯＢＵが、インターリーブ領域に存在するかを示すものであり、インターリーブ領域に存在する場合“ILVU”を、インターリーブ領域に存在しない場合“N_ILVU”を記録する。
ユニットエンドフラグレジスタUNIT_END_flag_regは、ＶＯＢＵがインターリーブ領域に存在する場合、該ＶＯＢＵがＩＬＶＵの最終ＶＯＢＵかを示す情報を記録する。ＩＬＶＵは、連続読み出し単位であるので、現在読み出しているＶＯＢＵが、ＩＬＶＵの最後のＶＯＢＵであれば“END”を、最後のＶＯＢＵでなければ“N_END”を記録する。
ＩＬＶＵ最終パックアドレスレジスタILVU_EA_regは、ＶＯＢＵがインターリーブ領域に存在する場合、該ＶＯＢＵが属するＩＬＶＵの最終パックのアドレスを記録する。ここでアドレスは、該ＶＯＢＵのＮＶからのセクタ数である。
次のＩＬＶＵ開始アドレスレジスタNT_ILVU_SA_regは、ＶＯＢＵがインターリーブ領域に存在する場合、次のＩＬＶＵの開始アドレスを記録する。ここでアドレスは、該ＶＯＢＵのＮＶからのセクタ数である。
ＶＯＢ内先頭ビデオフレーム表示開始時刻レジスタＶＯＢ_V_SPTM_regは、ＶＯＢの先頭ビデオフレームの表示を開始する時刻を記録する。
ＶＯＢ内最終ビデオフレーム表示終了時刻レジスタＶＯＢ_V_EPTM_regは、ＶＯＢの最終ビデオフレームの表示が終了する時刻を記録する。
オーディオ再生停止時刻１レジスタＶＯＢ_A_GAP_PTM1_regは、オーディオ再生を停止させる時間を、オーディオ再生停止期間１レジスタＶＯＢ_A_GAP_LEN1_regはオーディオ再生を停止させる期間を記録する。
オーディオ再生停止時刻２レジスタＶＯＢ_A_GAP_PTM2_regおよび、オーディオ再生停止期間２レジスタＶＯＢ_A_GAP_LEN2に関しても同様である。
次に図４９示すＤＶＤデコーダフローを参照しながら、図２６にブロック図を示した本発明に係るＤＶＤデコーダＤＣＤの動作を説明する。
ステップ＃３１０２０２はディスクが挿入されたかを評価するステップであり、ディスクがセットされればステップ＃３１０２０４へ進む。
ステップ＃３１０２０４に於いて、図２２のボリュームファイル情報VFSを読み出した後に、ステップ＃３１０２０６に進む。
ステップ＃３１０２０６では、図２２に示すビデオマネージャVMGを読み出し、再生するVTSを抽出して、ステップ＃３１０２０８に進む。
ステップ＃３１０２０８では、VTSの管理テーブルVTSIより、ビデオタイトルセットメニューアドレス情報VTSM_C_ADTを抽出して、ステップ＃３１０２１０に進む。
ステップ＃３１０２１０では、VTSM_C_ADT情報に基づき、ビデオタイトルセットメニューVTSM_ＶＯＢＳをディスクから読み出し、タイトル選択メニューを表示する。このメニューに従ってユーザーはタイトルを選択する。この場合、タイトルだけではなく、オーディオ番号、副映像番号、マルチアングルを含むタイトルであれば、アングル番号を入力する。ユーザーの入力が終われば、次のステップ＃３１０２１４へ進む。
ステップ＃３１０２１４で、ユーザーの選択したタイトル番号に対応するVTS_PGCI#Jを管理テーブルより抽出した後に、ステップ＃３１０２１６に進む。
次のステップ＃３１０２１６で、ＰＧＣの再生を開始する。ＰＧＣの再生が終了すれば、デコード処理は終了する。以降、別のタイトルを再生する場合は、シナリオ選択部でユーザーのキー入力があればステップ＃３１０２１０のタイトルメニュー表示に戻る等の制御で実現できる。
次に、図５０を参照して、先に述べたステップ＃３１０２１６のＰＧＣの再生について、更に詳しく説明する。ＰＧＣ再生ステップ＃３１０２１６は、図示の如く、ステップ＃３１０３０、＃３１０３２、＃３１０３４、及び＃３１０３５よりなる。
ステップ＃３１０３０では、図４７に示したデコードシステムテーブルの設定を行う。アングル番号レジスタANGLE_NO_reg、ＶＴＳ番号レジスタVTS_NO_reg、ＰＧＣ番号レジスタPGC_NO_reg、オーディオＩＤレジスタAUDIO_ID_reg、副映像ＩＤレジスタSP_ID_regは、シナリオ選択部２１００でのユーザー操作によって設定する。
ユーザーがタイトルを選択することで、再生するＰＧＣが一意に決まると、該当するセル情報(C_PBI)を抽出し、セル情報レジスタに設定する。設定するレジスタは、CBM_reg、CBT_reg、SPF_reg、IAF_reg、STCDF_reg、SACF_reg、C_FVOBU_SA_reg、C_LVOBU_SA_regである。
デコードシステムテーブルの設定後、ステップ＃３１０３２のストリームバッファへのデータ転送処理と、ステップ＃３１０３４のストリームバッファ内のデータデコード処理を並列に起動する。
ここで、ステップ＃３１０３２のストリームバッファへのデータ転送処理は、図２６に於いて、ディスクＭからストリームバッファ２４００へのデータ転送に関するものである。すなわち、ユーザーの選択したタイトル情報、およびストリーム中に記述されている再生制御情報（ナブパックＮＶ）に従って、必要なデータをディスクＭから読み出し、ストリームバッファ２４００に転送する処理である。
一方、ステップ＃３１０３４は、図２６に於いて、ストリームバッファ２４００内のデータをデコードし、ビデオ出力３６００およびオーディオ出力３７００へ出力する処理を行う部分である。すなわち、ストリームバッファ２４００に蓄えられたデータをデコードして再生する処理である。
このステップ＃３１０３２と、ステップ＃３１０３４は並列に動作する。
ステップ＃３１０３２について以下、更に詳しく説明する。
ステップ＃３１０３２の処理はセル単位であり、１つのセルの処理が終了すると次のステップ＃３１０３５でＰＧＣの処理が終了したかを評価する。ＰＧＣの処理が終了していなければ、ステップ＃３１０３０で次のセルに対応するデコードシステムテーブルの設定を行う。この処理をＰＧＣが終了するまで行う。
ストリームバッファからのデコードフロー
次に図５１を参照して、図５０に示したステップ＃３１０３４のストリームバッファ内のデコード処理について説明する。
ステップ＃３１０３４は、図示の如くステップ＃３１１１０、ステップ＃３１１１２、ステップ＃３１１１４、ステップ＃３１１１６からなる。
ステップ＃３１１１０は、図２６に示すストリームバッファ２４００からシステムデコーダ２５００へのパック単位でのデータ転送を行い、ステップ＃３１１１２へ進む。
ステップ＃３１１１２は、ストリームバッファ２４００から転送されるパックデータを各バッファ、すなわち、ビデオバッファ２６００、サブピクチャバッファ２７００、オーディオバッファ２８００へのデータ転送を行う。
ステップ＃３１１１２では、ユーザの選択したオーディオおよび副映像のＩＤ、すなわち図４７に示すシナリオ情報レジスタに含まれるオーディオＩＤレジスタAUDIO_ID_reg、副映像ＩＤレジスタSP_ID_regと、図１９に示すパケットヘッダ中の、ストリームＩＤおよびサブストリームＩＤを比較して、一致するパケットをそれぞれのバッファ（ビデオバッファ２６００、オーディオバッファ２７００、サブピクチャバッファ２８００）へ振り分け、ステップ＃３１１１４へ進む。
ステップ＃３１１１４は、各デコーダ（ビデオデコーダ、サブピクチャデコーダ、オーディオデコーダ）のデコードタイミングを制御する、つまり、各デコーダ間の同期処理を行い、ステップ＃３１１１６へ進む。
ステップ＃３１１１４の各デコーダの同期処理の詳細は後述する。
ステップ＃３１１１６は、各エレメンタリのデコード処理を行う。つまり、ビデオデコーダはビデオバッファからデータを読み出しデコード処理を行う。サブピクチャデコーダも同様に、サブピクチャバッファからデータを読み出しデコード処理を行う。オーディオデコーダも同様にオーディオデコーダバッファからデータを読み出しデコード処理を行う。デコード処理が終われば、ステップ＃３１０３４を終了する。
次に、図５２を参照して、先に述べたステップ＃３１１１４について更に詳しく説明する。
ステップ＃３１１１４は、図示の如く、ステップ＃３１１２０、ステップ＃３１１２２、ステップ＃３１１２４からなる。
ステップ＃３１１２０は、先行するセルと該セルがシームレス接続かを評価するステップであり、シームレス接続であればステップ＃３１１２２へ進み、そうでなければステップ＃３１１２４へ進む。
ステップ＃３１１２２は、シームレス用の同期処理を行う。
一方、ステップ＃３１１２４は、非シームレス用の同期処理を行う。
ビデオエンコーダ
図２５のビデオエンコーダ３００に入力するビデオデータＳｔ１の素材としては、フィルムで撮影された映画などがあるがＤＶＤなどに記録されるマルチメディアビットストリームは、家庭用のテレビ受像機に接続されることを前提としている。また、マルチメディアビットストリームのエンコードの際に、ビデオソースの編集の容易さから、図２５のオーサリングエンコーダへの素材の供給にはデジタルのＶＴＲが一般的に使用される。フィルムのフレームレートは毎秒２４フレームであり、ＮＴＳＣの家庭用のテレビ受像機やデジタルＶＴＲに於いては、ビデオのフレームレートは毎秒２９．９７フレームであるので、フィルムで撮影された映画素材を、テレシネ変換と呼ばれるフレームレート変換手法によってレート変換を行って後、ディジタルＶＴＲに記録される映像信号が作成される。
図３９を参照して、本発明に於ける逆テレシネ変換回路の１実施形態を説明する。図３９は、本発明に於ける逆テレシネ変換回路を図２５のビデオエンコーダ３００に組み込こまれたビデオエンコーダ３００Ａの詳細な構造を示す。ビデオエンコーダ３００Ａは、フレームメモリ３０４、３０６、フィールド間差分器３０８、閾値判定器３１０、テレシネ周期判定器３１２、セレクタ３１４、符号化装置３１６から構成される。
入力制御器３０２は、図２５に示す編集情報作成部１００及びエンコードシステム制御部２００に接続されて、それぞれビデオ信号Ｓｔ１及びタイミング信号Ｓｔ９の供給を受ける。そのビデオ信号Ｓｔ１がテレシネ画像である場合には、ビデオエンコーダへの制御データとして用いられる逆テレシネ変換を指示する情報を含んでいる。
テレシネ画像ＲＴ１はフレームメモリ３０４で、１フレーム分だけ保持された後に、１フレーム遅延テレシネ画像ＲＴ２としてフレームメモリ３０６、セレクタ３１４、及びフィールド差分器３０８に入力される。
フィールド差分器３０８では、１フレーム遅延テレシネ画像ＲＴ２と［入力制御器３０２から入力された］現フレームのテレシネ画像ＲＴ１の同一パリティのフィールド間差分が集計される。集計された結果は、差分値ＲＴ３として、閾値判定器３１０に入力される。
閾値判定器３１０では、差分値ＲＴ３を所定の閾値と比較し、その比較結果を示す比較結果信号ＲＴ５をテレシネ周期判定回路３１２に入力する。
テレシネ周期判定回路３１２は、比較結果信号ＲＴ５に基づいて、内部で周期情報ＲＴ６を生成して、その周期情報ＲＴ６に基づいて、テレシネ周期にあった出力画像を出力するようセレクタ３１４を制御するセレクタ制御信号ＲＴ７をセレクタ３１４に出力する。テレシネ周期判定回路３１２は、各フレームについて冗長フィールドを削除したかどうかを示すリピートファーストフィールドフラグＲＦＦと、フレームの２つのフィールドの表示順を示すトップフィールドファーストフラグＴＦＦと、符号化装置３１６に入力されるフレームをエンコードするか否かを示す出力画像有効フラグＩＥＦを符号化装置に出力する。
フレームメモリ３０４からの出力された１フレーム遅延テレシネ画像ＲＴ２は、フレームメモリ３０６で更に、もう１フレーム保持されて、２フレーム遅延テレシネ画像ＲＴ４が生成される。この画像ＲＴ４は、セレクタ３１４に入力される。
セレクタ３１４は、フレームメモリ３０４から入力された１フレーム遅延テレシネ画像ＲＴ２、フレームメモリ３０６から入力された２フレーム遅延テレシネ画像ＲＴ４、及びテレシネ周期判定器３１２から入力されてたセレクタ制御信号ＲＴ７に基づいて、１フレーム遅延テレシネ画像ＲＴ２と２フレーム遅延テレシネ画像ＲＴ４のいずれかから、トップフィールド及びボトムフィールドを選択して逆テレシネ画像ＲＴ８を生成する。この逆テレシネ画像ＲＴ８は符号化装置３１６に出力される。
符号化装置３１６は、セレクタ３１４から入力された逆テレシネ画像ＲＴ８と、テレシネ周期判定回路３１２から入力されたフラグＴＦＦ、ＲＦＦ、及びＩＥＦを圧縮符号化する。
図３２に、フィルム素材、フィルム素材からテレシネ変換によって作成されるＮＴＳＣビデオ信号であるテレシネ画像と、上述の逆テレシネ変換回路を組み込んだビデオエンコーダ３００Ａによって、エンコードつまり、逆テレシネ変換された逆テレシネ画像、そのエンコードデータからデコードされる再生映像を示す。
第１段目には、毎秒２４フレームのフィルム画像ＩＦを示す。
第２段目には、第１段目のフィルム画像からテレシネ変換したＮＴＳＣ信号であるテレシネ画像ＲＴ１を示す。
第３段目には、第２段目のテレシネ画像をビデオエンコード時に、冗長なフィールドを検出し、削除する逆テレシネ変換をおこなった逆テレシネ画像ＲＴ８とビデオエンコード時のフラグデータであるリピートファーストフィールドフラグＲＦＦと、トップフィールドファーストフラグＴＦＦとを示す。ＲＦＦは、フレームを構成する時間的に先のフィールドを次の再生フレームの１つのフィールドとして使用する事を示したものであり、ＴＦＦは、フレームを構成する時間的に先のフィールドはトップフィールドである事を示す。
第４段目には、第３段目の逆テレシネ画像のエンコードデータをビデオデコードした時に得られる再生画像ＩＲのＮＴＳＣ信号を示す。
テレシネ変換は基本的には図３２に示すように、周期的に同一パリティのフィールドをコピーした冗長フィールドを挿入することによって、フレームレートの変換が実現される。フィルム画像ＩＦは、毎秒２４フレームのフィルム画像であり、このフレームＦ１のトップフィールドＦ１ｔがコピーされ、また、フレームＦ３のボトムフィールドＦ３ｂがコピーされて、フレームＦ１からフレームＦ４までの４フレームが、テレシネ画像ＲＴ１のフレームＦ‘１からフレームＦ’５の５フレームに変換される。
このようにして得られたテレシネ後のビデオ信号であるテレシネ画像ＲＴ１を圧縮符号化する際に、ビデオのフレームレートそのままで圧縮符号化を行ったのではコピーされた冗長フィールドまでも符号化することになり、効率が悪くなる。従って、通常、コピーされた冗長フィールドを検出し、削除、つまり逆テレシネ変換した後に圧縮符号化を行い、各フレームについて冗長フィールドを削除したかどうかを示すリピートファーストフィールドフラグＲＦＦと、フレームの２つのフィールドの表示順を示すトップフィールドファーストフラグＴＦＦとを付加して記録する。
フィルムのフレームレートとビデオのフレームレートとは簡単な整数比の関係になっていないため、周期的な処理の合間に通常と異なる変換パターンが挟まれることになる。図に示すように、テレシネ変換はフィルムの４フレーム相当分を５フレームに変換して、毎秒２４フレームレートから毎秒約３０フレームレートにしている。テレシネ画像は、このように基本的にはテレシネ画像の５フレームの周期で、規則的な変換処理が施され、そのフレーム毎の周期をテレシネ周期とする。それぞれのテレシネ周期で、テレシネ画像から逆テレシネ画像を得る処理が変わる。
図４２に示すタイミングチャートを参照して、上記の逆テレシネ変換回路３００Ａの動作を説明する。
第１段目に、テレシネ画像入力ＲＴ１、１フレーム遅延テレシネ画像ＲＴ２、差分値ＲＴ３、及び２フレーム遅延テレシネ画像ＲＴ４を順番に示す。
第２段目に、比較結果信号ＲＴ５の出力タイミングを示す。
第３段目に、テレシネ画像の周期情報ＲＴ６を示す。同図に於いて、周期情報はステート（state）として表示されている。
第４段目に、セレクタ制御信号ＲＴ７を示す。第５段目に、逆テレシネ画像ＲＴ８出力を示す。第６段目に、トップフィールドファーストフラグＴＦＦ、リピートファーストフィールドフラグＲＦＦ及び出力画像有効フラグＩＥＦを示す。
最初の周期であるステート０では、テレシネ画像ＲＴ１のフレームＦ１‘とＦ２’のフレームメモリ３０４、３０６への入力が完了した時点で開始され、テレシネ画像のフレームＦ１‘を構成するフィールドＦ１ｔとＦ１ｂで逆テレシネ画像ＲＴ８を構成し、ＴＦＦ=１を設定し、Ｆ２’のトップフィールドがＦ１ｔと同様であるので、次フレームの再生時に、フィールドを複製（コピー）するので、ＲＦＦ=１を設定する。
ステート１では、テレシネ画像ＲＴ１のフレームＦ２‘とＦ３’のフレームメモリ３０４、３０６への入力が完了した時点で開始され、テレシネ画像ＲＴ１のＦ２‘のボトムフィールドであるＦ２ｂとＦ３’のトップフィールドであるＦ２ｔで逆テレシネ画像ＲＴ８を構成し、ボトムフィールドが時間的に先になるフレーム構成になるので、ＴＦＦ=０を設定、フィールドの複製がないのでＲＦＦ=０を設定する。
ステート２では、テレシネ画像ＲＴ１のフレームＦ３‘とＦ４’のフレームメモリ３０４、３０６への入力が完了した時点で開始され、テレシネ画像のＦ３‘のボトムフィールドであるＦ３ｂとＦ４’のトップフィールドであるＦ３ｔで逆テレシネ画像ＲＴ８を構成し、ボトムフィールドが時間的に先になるフレーム構成になるので、ＴＦＦ=０を設定、Ｆ４‘のボトムフィールドがＦ３ｂと同様であるので、次フレームの再生時に、フィールドを複製（コピー）するので、ＲＦＦ=１を設定する。
ステート３では、テレシネ画像ＲＴ１のフレームＦ４‘とＦ５’のフレームメモリ３０４、３０６への入力が完了した時点で開始され、テレシネ画像のＦ５‘のＦ４ｔとＦ４ｂで逆テレシネ画像ＲＴ８を構成し、トップフィールドが時間的に先になるフレーム構成になるので、ＴＦＦ=１を設定、次フレームの再生時に、フィールドを複製（コピー）しないので、ＲＦＦ=０を設定する。
ステート４では、テレシネ画像ＲＴ１のフレームＦ５‘と次の周期のＦ１’のフレームメモリ３０４、３０６への入力が完了した時点で開始されるが、この周期では、逆テレシネ画像ＲＴ８を生成しない。
以上のようなステート０からステート４を繰り返して、逆テレシネ画像ＲＴ８を生成し、エンコードをおこなっている。
先に、図３２に示したテレシネ画像ＲＴ１から逆テレシネ画像ＲＴ８への変換が逆テレシネ変換であり、連続するトップフィールド同士、ボトムフィールド同士のフィールド間の差分を予め決められた閾値と比較し、これより小さい場合にはコピーフィールドと判断し、該当のフィールドを削除する。同時に前述のＲＦＦ、ＴＦＦのフラグを図に示すように生成する。
再生時には、これらのフラグにより再生画像ＩＲに示すように簡単にもとのテレシネ画像が再現できることになる。即ち、逆テレシネ画像ＲＴ８のフレームＦ１では、ＴＦＦ=１であるので、Ｆ１のトップフィールドＦ１ｔを先に出力し、次にＦ１のボトムフィールドＦ１ｂを出力する。そして、ＲＦＦ=１であるので、ファーストフィールド、即ちＦ１ｔをもう一度出力する。
フレームＦ２については、ＴＦＦ=０であるので、Ｆ２のボトムフィールドＦ２ｂを先に出力し、次にＦ２のトップフィールドＦ２ｔを出力する。２度目に出力されたＦ１ｔとＦ２ｂが新たに１つのフレームＦ２‘を構成することになる。フレームＦ３ではＴＦＦ=０であるので、ボトムフィールドＦ３ｂが先に、トップフィールドＦ３ｔが後で出力され、ＲＦＦ=１であるので、再度ボトムフィールドＦ３ｂが出力される。フレームＦ４ではＴＦＦ=１であるので、トップフィールドＦ４ｔが先に、ボトムフィールドＦ４ｂが後で出力される。このようにして、テレシネ画像ＲＴ１がフラグにより再生できる。
図４２に於いて、テレシネ入力画像ＲＴ１と１フレーム遅れの図３９上のフレームメモリ３０４の出力である１フレーム遅延テレシネ画像ＲＴ２と比較され、図３２のＦ１ｔとＦ１ｔ‘がコピーフィールドであるので、閾値判定器３１０はＨｉを出力する。図３２のＦ１ｂとＦ２ｂとはコピーフィールドではないので、閾値判定器３１０の出力である比較結果信号ＲＴ５はＬｏとなり、この時点で、テレシネ周期判定回路３１２はテレシネ周期のあるステート、ここでは、ステート０とするが、このステート０であると判断し、図３２のＦ１ｔ、Ｆ１ｂを順に出力するよう出力選択信号をＬｏに制御し、同時にＴＦＦ=１、ＲＦＦ=１を出力する。セレクタ３１４はテレシネ周期判定器からの出力であるセレクタ制御信号ＲＴ７により、図３９上のフレームメモリ３０６の出力である２フレーム遅延テレシネ画像ＲＴ４を選択して出力する。これによって、逆テレシネ画像ＲＴ８として、図３２のＦ１ｔ、Ｆ１ｂが順に出力される。
次のフレームでは、図３２に示すＦ１ｔ‘とＦ２ｔ、Ｆ２ｂとＦ３ｂがともにコピーフィールドではないので、テレシネ周期判定回路３１２は次のステート１へと移行し、図３２のＦ２ｔ、Ｆ２ｂを順に出力するようセレクタ制御信号ＲＴ７によりセレクタ３１４を切り替える。このフレームについてはボトムフィールド先行であるので、ＴＦＦ=０を出力し、第一フィールドを１度しか表示しないので、ＲＦＦ=０を出力する。
同様に図３２のＦ４ｔ、Ｆ４ｂまで出力し、フレームレートの違いのためにこの逆テレシネ回路３００Ａは１フレーム間出力を休止する。この休止期間を示すためにテレシネ周期判定回路３１２は、出力画像有効フラグＩＥＦをこの期間ネゲート（無効状態）する。
休止期間のない逆テレシネ画像が必要な場合、すなわち逆テレシネ変換後のフレームレートで、エンコードする場合には、この後にフレームレート変換のためのＦＩＦＯメモリ等が用いられ、逆テレシネ変換後のフレームレートで、このメモリの読み出しを行いエンコードする事になる。
しかしながら、このようにそれぞれ逆テレシネ変換を行った複数のＶＯＢを、連続して再生しようとした場合に、そのつなぎ目でのシームレス情報再生に問題が生じる。このような問題をより分かり易く説明するために、以下にパレンタル制御の例に基づいて説明する。
図４０及び図４１を参照して、パレンタル制御時のテレシネ変換、符号化画像、及び再生画像の状態を説明する。図４０は、３つのＶＯＢａ、ＶＯＢｂ、及びＶＯＢｃ間のパレンタル接続の例を示している。図４１の第１段目は、ビデオエンコーダ３００Ａに入力されるテレシネ画像ＲＴ１を示す。同じく、第２段目は、第１段目で示したテレシネ画像ＲＴ１を、逆テレシネ変換して得られる逆テレシネ画像ＲＴ８をビデオエンコーダ３００Ａで符号化した信号Ｓｔ１５を示す。図面上は、逆テレシネ画像を表示している。第３段目は、ビデオエンコードストリームＳｔ１５からデコードされる再生画像ＩＲを示す。
この例では元のテレシネ画像のフレームＦ１８で終わるＶＯＢａ、元のテレシネ画像のフレームＦ１９で始まりフレームＦ４４で終わるＶＯＢｂ、元のテレシネ画像のフレームＦ４５で始まるＶＯＢｃが、第１段目の元々連続したテレシネ画像ＲＴ１に逆テレシネ変換及び圧縮符号化を行ったものであり、対象とする視聴者によっては、ＶＯＢｂを飛ばして、ＶＯＢａからＶＯＢｃへとシームレスで連続再生を行う必要がある。この場合に、第３段目の逆テレシネ変換を行った記録画像のＶＯＢａの終わりがＲＦＦ=０、ＴＦＦ=０で終わっており、ＶＯＢｃの始まりが、ＲＦＦ=０、ＴＦＦ=１で始まっているために、これを連続して再生すると、第１段目は、３段目に示すように、ＶＯＢａとＶＯＢｃのつなぎ目でトップフィールドが連続してしまう。
このような場合のＭＰＥＧデコーダの振る舞いは一般に保証されておらず、ＤＶＤデコーダに於いては、フィールドが１つ挿入されたり削除されたりして再生画像のつじつま合わせが行われるか、最悪の場合、無関係なフィールドが挿入されることになる。前者の場合であっても、音声との同期ずれが発生する恐れがある。従って、完全なシームレスの再生が実現できないことになる。
このような問題に対応して、本発明では、同一の記録媒体に複数の論理的な記録区間即ちＶＯＢを設ける際に、各ＶＯＢの先頭及び終端でのＲＦＦ、ＴＦＦの値が所定の値となるように逆テレシネ変換を行う。更に、その逆テレシネ変換の方法についても、図４３及び図４４を参照して後で詳しく説明するが、その概念を以下に簡単に説明する。
ＶＯＢの先頭に於いて、前記フラグＲＦＦ、ＴＦＦを所定の値に固定しかつ冗長フィールドの除去を禁止した状態から逆テレシネ変換を開始し、実際の冗長フィールドの検出結果により生成される前記フラグＲＦＦ、ＴＦＦが所定の値となったところから、冗長フィールドの除去と前記フラグＲＦＦ、ＴＦＦの値を出力し、ＶＯＢの先頭での前記フラグＲＦＦ、ＴＦＦが所定の値を持つように逆テレシネ変換を行う。
更に、各ＶＯＢの終端でのこれらのフラグＲＦＦ、ＴＦＦを所定の値とするために、予めＶＯＢに相当するテレシネ画像ＲＴ１の冗長フィールドの位置を検査しその結果によって前記フラグＲＦＦ、ＴＦＦを生成する手段を有し、実際に逆テレシネ変換と圧縮符号化を行う際に、該ＶＯＢの終端部での前記フラグＲＦＦ、ＴＦＦが所定の値になる逆テレシネ変換後のフレームの内、ＶＯＢの終端の近傍に位置するフレームに於いてコピーされた冗長フィールドの除去操作を中止して、該ＶＯＢの終端での前記フラグＲＦＦ、ＴＦＦが所定の値を持つように逆テレシネ変換を行う。
或いは、ＶＯＢに相当するテレシネ画像ＲＴ１の終端に近づいたことを検出する手段を有し、該ＶＯＢの終端に近づいたと判断した場合に、冗長フィールドの除去を制限することにより該ＶＯＢの終端での前記フラグＲＦＦ、ＴＦＦが所定の値を持つように逆テレシネ変換を行う。
このような手段により逆テレシネ変換を行うことにより、ＶＯＢの先頭と終端でのフラグＲＦＦ、ＴＦＦの値が所定の値に揃い、ＶＯＢ同士を連続して再生しても、ボトムフィールド同士、或いはトップフィールド同士が連続することが無くなり、従って、複数のＶＯＢを連続して再生する場合に、ＶＯＢの境界に於いてもシームレス再生を実現することが出来るようになる。
図４５を参照して、上記にその概念を説明した本発明に於ける逆テレシネ変換回路の更なる実施形態を説明する。図４５は本発明に於ける逆テレシネ変換回路を図２５のビデオエンコーダ３００に組み込こまれたビデオエンコーダ３００Ｂの詳細な構造を示す。本実施形態に於けるビデオエンコーダ３００Ｂは、図３９に示したビデオエンコーダ３００Ａと同様の構造に、フレームメモリ３０４、３０６、フィールド間差分器３０８、閾値判定器３１０、テレシネ周期判定器３１２、セレクタ３１４、符号化装置３１６から構成されている。しかし、ビデオエンコーダ３００Ａと比べて、ＶＯＢ終端検出器３１８、及び制御信号固定回路３２２が図示の如く追加されている。
VOB終端検出器３１８は、ＤＶＤエンコーダＥＣＤの編集情報作成部１００に接続されて、ビデオストリームＳｔ１に含まれるビデオストリームに同期して入力されるタイムコードの供給を受ける。また、ＶＯＢ終端検出器３１８は、エンコードシステム制御部２００が生成するエンコードパラメータであるビデオエンコード終了時刻V_ENDTM（図２９参照）に基づいてＶＯＢ終端のタイムコードより少なくとも数フレーム前に「ハイ」になるＶＯＢ終端信号ＲＴ９を出力する。
本実施形態では、ＶＯＢ内のテレシネ周期ステート３の最後のフレームのタイムコードを設定し、そのフレームが入力した時点でＶＯＢ終端信号ＲＴ９を出力するようにしている。テレシネ周期と対応するタイムコードが不明である場合には、１周期分すなわち、ＶＯＢの終端タイムコードの５フレーム前にＶＯＢ終端信号ＲＴ９の出力を行うする事でも構わない。
制御信号固定回路３２２は、VOB終端検出器３１８に接続されてＶＯＢ終端信号ＲＴ９の供給を受けると共に、テレシネ周期判定器３１２に接続されてセレクタ制御信号ＲＴ７、トップフィールドファーストフラグＴＦＦ、リピートファーストフィールドフラグＲＦＦ、及び出力画像有効フラグＩＥＦの供給を受ける。制御信号固定回路３２２は、ＶＯＢ終端信号ＲＴ９に基づいて、セレクタ制御信号ＲＴ７、トップフィールドファーストフラグＴＦＦ、リピートファーストフィールドフラグＲＦＦ、及び出力画像有効フラグＩＥＦを其々を制御して、第二セレクタ制御信号ＲＴ７‘、第二トップフィールドファーストフラグＴＦＦ’、第二リピートファーストフィールドフラグＲＦＦ‘、及び第二出力画像有効フラグＩＥＦ’を出力する。
セレクタ３１４は、制御信号固定回路３２２に接続されて第二セレクタ制御信号ＲＴ７‘の供給をうける。同様に、符号化装置３１６も制御信号固定回路３２２に接続されて第二トップフィールドファーストフラグＴＦＦ’、第二リピートファーストフィールドフラグＲＦＦ‘、及び第二出力画像有効フラグＩＥＦ’の供給を受ける。
制御信号固定回路３２２は、ＶＯＢ終端信号がＨｉになって以降、ＴＦＦ=１、ＲＦＦ=０の状態、を検出すると、その後のエンコード前の画像については、ＴＦＦ=１、ＲＦＦ=０の状態、入力されるテレシネ画像ＲＴ１のフレームをそのままエンコード処理を行うように制御する。すなわち、ＴＦＦ‘=１、ＲＦＦ’=０、ＩＥＦ‘=１、ＲＴ７’=１と固定して、それ以降の冗長フィールドの削除を禁止する。なお、ＲＴ７、ＩＥＦの変化は、ＲＦＦ、ＴＦＦと同期しているので、ＲＦＦ、ＴＦＦの変化の検出するだけで十分である。
つまり、本実施形態に於けるビデオエンコーダ３００Ｂでは、セレクタ３１４及び符号化装置３１６は、ビデオエンコーダ３００Ａと違って、エンコードシステム制御部２００からのエンコードパラメータを含むＳｔ９とビデオストリームＳｔ１中のタイムコードに基づいて、VOB終端検出器３１８と制御信号固定回路３２２によって、ビデオストリームＳｔ１中のＶＯＢ終端を検知することにより、冗長フィールドの削除をより精密に制御できるので、より効率的且つ正確な逆テレシネ変換処理を可能としている。
図４３及び２１０４Ｂを参照して、ビデオエンコーダ３００Ｂによる逆テレシネ変換の方法について説明する。図４３及び図４４の第１段目から第５３段目までは、既に説明した逆テレシネ変換のタイミングを示す図４０及び図４１の其々と同様であるので説明を省く。但し、第５段目には、ＶＯＢの終端の検出信号ＲＴ９が表されている。枠体ＧＦ１は、ＶＯＢａの終端期間、枠体ＧＦ２は、ＶＯＢｂの先頭期間、枠体ＧＦ３は、ＶＯＢｂの終端期間を示す。
先ず、テレシネ画像ＲＴ１の逆テレシネ変換を考える。元のテレシネ画像ＲＴ１のフレームＦ１８で終わるＶＯＢａの終端に着目する。予め、冗長フィールドの検査を行い、冗長フィールドが含まれていることがわかっているとする。このテレシネ画像ＲＴ１をそのまま逆テレシネ変換すると、図４０に示すようなＲＦＦ‘、ＴＦＦ‘を生成する事になる。ここで、ＶＯＢａのフレームの内、ＴＦＦ‘=１、ＲＦＦ‘=０でかつ終端に最も近いフレームは、図４１ではフレームＦ１２’であるので、以降の枠体ＧＦ１に示す区間での冗長フィールドの削除を禁止すると、図４３の再生画像ＩＲに示すような必ずボトムフィールドで終了するＶＯＢａとなる。
次に、ＶＯＢｂの先頭に注目する。ＶＯＢｂの先頭では、実際の冗長フィールドの削除は禁止してＴＦＦ‘=１、ＲＦＦ‘=０の状態からフラグを出力し、冗長フィールドの検査の結果初めてフラグがＴＦＦ‘=１、ＲＦＦ‘=０の状態になってから冗長フィールドの削除を開始する。枠体ＧＦ２内の区間がその冗長フィールド除去の禁止期間である。
ＶＯＢｂの終端では、ＶＯＢａの終端と同様の処理を行う。即ち、枠体ＧＦ３で示す期間では冗長フィールドの削除を行わない。
ＶＯＢｃの先頭は、もともとＴＦＦ‘=１、ＲＦＦ‘=０であるので、すぐさま冗長フィールド削除のモードに入る。
以上のように各ＶＯＢセルを生成すると、ＶＯＢａの終端、ＶＯＢｂの先頭及び終端、ＶＯＢｃの先頭の何れもがＴＦＦ‘=１、ＲＦＦ‘=０の状態であり、ＶＯＢａ→ＶＯＢｂ→ＶＯＢｃと連続再生した場合も、また、ＶＯＢａ→ＶＯＢｃと連続再生した場合にも、フィールドの不連続はなくなり、シームレス再生が保証できることになる。
図４６に示すタイミングチャートを参照して、本発明にかかる逆テレシネ変換回路の実施形態２のビデオエンコーダ３００Ｂの動作をより詳しく説明する。本実施形態に於けるタイミングチャートは、図４２に示すビデオエンコーダ３００Ａとタイミングチャートに、ＶＯＢ終端信号ＲＴ９、第二セレクタ制御信号ＲＴ７‘、第二トップフィールドファーストフラグＴＦＦ’、第二リピートファーストフィールドフラグＲＦＦ‘、及び第二出力画像有効フラグＩＥＦ’の動作を追加して表した構成になっている。既に、図４３を参照して説明した、ＶＯＢ終端信号ＲＴ９に基づく、元のフラグと各第二フラグとの関係が明確に示されている。
同図に於いて、テレシネ画像入力のＦ４ｔのタイミングでタイムコードなどによる逆テレシネ停止信号であるＶＯＢ終端信号ＲＴ９が入力した場合を示している。逆テレシネ停止信号ＲＴ９が入力するまでの動作は、図４２で説明した場合と同様である。
逆テレシネ停止信号ＲＴ９が入力してから最初にＴＦＦ‘=１、ＲＦＦ‘=０を出力するステート３のフレーム以降、逆テレシネ操作を停止し、入力のテレシネ画像をそのまま出力している。これにより、どの位置で符号化を停止させても、トップフィールドが先行するフレームでセルが終了することとなり、複数のＶＯＢを連続再生した場合のシームレス再生を保証出来ることになる。
図４３、図４４、図４５、図４６を参照してＶＯＢ終端検出器３１８及び制御信号固定回路３２２についての上述の開示は、当業技術に熟練したものであれば、このような動作が可能なＶＯＢ終端検出器３１８及び制御信号固定回路３２２を、プログラム等のソフトウェアによって、あるいは電気回路によって構成するに十分であるので、具体的な構成についての説明を省く。
本実施形態では、タイムコードによりＶＯＢ終端を検出したが、フレーム数を数えるなどの方法によって実現しても、本発明の効果はいぜんとして有効である。また、ＴＦＦ‘=１、ＲＦＦ‘=０の状態でＶＯＢを終了する例をしめしたが、他の状態であっても複数のＶＯＢの境界でテレシネ周期に問題が起きないように制限すれば良い。
以上説明した実施形態では、１度のテレシネ画像の入力によって、順次逆テレシネ変換処理を行い、ビデオエンコード処理を行う方法を示した。次第２の実施形態として、１度目の入力で、テレシネ変換周期及びＴＦＦ，ＲＦＦを検出し、２度目の入力で図４３に示すように、ＴＦＦ‘，ＲＦＦ’を生成し、ビデオエンコード処理を行う方法について説明する。この場合の処理は、図３９に示すビデオエンコードブロックにおいて、テレシネ周期判定器３１２にエンコードを行うＶＯＢのテレシネ周期情報を格納するメモリを加える事で実現できる。
つまり、１度目のテレシネ画像入力により、順次逆テレシネ変換処理を行う、その結果、すなわちテレシネ周期情報をテレシネ周期判定器３１２に蓄積し、１度目の処理を終了する。次にテレシネ周期判定器３１２では、エンコード終了時刻のフレームより、時間をさかのぼり、それぞれの逆テレシネ変換画像のＴＦＦ，ＲＦＦを評価し、ＴＦＦ=１、ＲＦＦ=０の状態を検出したら、そのフレームからＶＯＢ終端までのフレームのＴＦＦ、ＲＦＦが、ＴＦＦ‘=１，ＲＦＦ’=０となるように設定する。
以上に説明した第２の実施形態の別の実施形態として、エンコードするテレシネ変換画像のテレシネ周期情報がわかっている場合、エンコード処理前に、そのテレシネ周期情報をテレシネ周期判定器３１２に入力し、前述した、ＴＦＦ，ＲＦＦの変換処理及び２度目の処理をテレシネ周期判定器３１２で行う事により、同様に実現できる。また、テレシネ周期判定器に、ＴＦＦ、ＲＦＦの変換処理を施したＴＦＦ‘，ＲＦＦ’を入力する事でも同様な効果を得る事ができる。
以上に示した逆テレシネ変換回路を含むビデオエンコードは、図２５のビデオエンコーダ３００に相当し、図３４のエンコーダフローチャートのサブルーチンであるステップ＃１８００で設定されたエンコードパラメータ、すなわち図２９で示したエンコードパラメータのビデオエンコードモードV_ENCMD設定の逆テレシネ変換処理をおこなうか否かに基づいて、さらにビデオエンコード開始時刻V_STTM、ビデオエンコード終了時刻V_ENDTMに基づき、図３４Ｂのステップ＃１９００でのビデオエンコード処理をおこなう。
以上説明したように、本発明によれば、セル同士を連続して再生しても、ボトムフィールド同士、或いはトップフィールド同士が連続することなく、セルの境界に於いてもシームレス再生を実現することが出来る。
産業上の利用可能性
以上のように、本発明にかかるビットストリームのインターリーブて媒体に記録再生する方法及びその装置は、様々な情報を搬送するビットストリームから構成されるタイトルをユーザーの要望に応じて編集して新たなタイトルを構成することができるオーサリングシステムに用いるのに適しており、更に言えば、近年開発されたデジタルビデオディスクシステム、いわゆるＤＶＤシステムに適している。
この発明は、一連の関連付けられた内容を有する各タイトルを構成する動画像データ、オーディオデータ、副映像データの情報を搬送するビットストリームに様々な処理を施して、ユーザーの要望に応じた内容を有するタイトルを構成するべくビットストリームを生成し、その生成されたビットストリームを所定の記録媒体に効率的に記録する記録装置と記録媒体、及び再生する再生装置及びオーサリングシステムに用いられる、フィルムで撮影された映画素材をテレシネ変換と呼ばれるフレームレート変換手法によってレート変換によって生成されるビデオデータををエンコードーヂ媒体に記録再生する方法及びその装置に関する。
背景技術
近年、レーザーディスクやビデオＣＤ等を利用したシステムに於いて、動画像、オーディオ、副映像などのマルチメディアデータをデジタル処理して、一連の関連付けられた内容を有するタイトルを構成するオーサリングシステムが実用化されている。
特に、ビデオＣＤを用いたシステムに於いては、約６００Ｍバイトの記憶容量を持ち本来ディジタルオーディオの記録用であったＣＤ媒体上に、ＭＰＥＧと呼ばれる高圧縮率の動画像圧縮手法により、動画像データの記録を実現している。カラオケをはじめ従来のレーザーディスクのタイトルがビデオＣＤに置き替わりつつある。
年々、各タイトルの内容及び再生品質に対するユーザーの要望は、より複雑及び高度になって来ている。このようなユーザーの要望に応えるには、従来より深い階層構造を有するビットストリームにて各タイトルを構成する必要がある。このようにより深い階層構造を有するビットストリームにより、構成されるマルチメディアデータのデータ量は、従来の十数倍以上になる。更に、タイトルの細部に対する内容を、きめこまかく編集する必要があり、それには、ビットストリームをより下位の階層データ単位でデータ処理及び制御する必要がある。
このように、多階層構造を有する大量のデジタルビットストリームを、各階層レベルで効率的な制御を可能とする、ビットストリーム構造及び、記録再生を含む高度なデジタル処理方法の確立が必要である。更に、このようなデジタル処理を行う装置、この装置でデジタル処理されたビットストリーム情報を効率的に記録保存し、記録された情報を迅速に再生することが可能な記録媒体も必要である。
このような状況に鑑みて、記録媒体に関して言えば、従来用いられている光ディスクの記憶容量を高める検討が盛んに行われている。光ディスクの記憶容量を高めるには光ビームのスポット径Ｄを小さくする必要があるが、レーザの波長をλ、対物レンズの開口数をＮＡとすると、前記スポット径Ｄは、λ／ＮＡに比例し、λが小さくＮＡが大きいほど記憶容量を高めるのに好適である。
ところが、ＮＡが大きいレンズを用いた場合、例えば米国特許５、２３５、５８１に記載の如く、チルトと呼ばれるディスク面と光ビームの光軸の相対的な傾きにより生じるコマ収差が大きくなり、これを防止するためには透明基板の厚さを薄くする必要がある。透明基板を薄くした場合は機械的強度が弱くなると言う問題がある。
また、データ処理に関しては、動画像、オーディオ、グラフィックスなどの信号データを記録再生する方式として従来のＭＰＥＧ１より、大容量データを高速転送が可能なＭＰＥＧ２が開発され、実用されている。ＭＰＥＧ２では、ＭＰＥＧ１と多少異なる圧縮方式、データ形式が採用されている。ＭＰＥＧ１とＭＰＥＧ２の内容及びその違いについては、ＩＳＯ１１１７２、及びＩＳＯ１３８１８のＭＰＥＧ規格書に詳述されているので説明を省く。
ＭＰＥＧ２に於いても、ビデオエンコードストリームの構造に付いては、規定しているが、システムストリームの階層構造及び下位の階層レベルの処理方法を明らかにしていない。
上述の如く、従来のオーサリングシステムに於いては、ユーザーの種々の要求を満たすに十分な情報を持った大量のデータストリームを処理することができない。さらに、処理技術が確立したとしても、大容量のデータストリームを効率的に記録、再生に十分用いることが出来る大容量記録媒体がないので、処理されたデータを有効に繰り返し利用することができない。
言い換えれば、タイトルより小さい単位で、ビットストリームを処理するには、記録媒体の大容量化、デジタル処理の高速化と言うハードウェア、及び洗練されたデータ構造を含む高度なデジタル処理方法の考案と言うソフトウェアに対する過大な要求を解消する必要があった。
本発明は、このように、ハードウェア及びソフトウェアに対して高度な要求を有する、タイトル以下の単位で、マルチメディアデータのビットストリームを制御して、よりユーザーの要望に合致した効果的なオーサリングシステムを提供することを目的とする。
このようなマルチメディアデータから構成されるタイトル内容を再生するプレーヤは、テレビ受像機に接続して、再生情報をユーザが容易に利用できることが望ましい。また、タイトルとしてフィルムで撮影された映画を素材として利用されることが多いであろう。このような場合、記録ビットストリームを作成する際に、編集の容易さから、記録信号作成装置への素材の供給にはデジタルのＶＴＲが使用される。そのために、フィルムで撮影された映画素材は、テレシネ変換と呼ばれるフレームレート変換手法によってレート変換を行って後、記録信号が作成される。
テレシネ変換は基本的には、周期的に同一パリティのフィールドをコピーした冗長フィールドを挿入することによって、フレームレートの変換が実現される。フィルムのフレームレートとビデオのフレームレートとは簡単な整数比の関係になっていないため、周期的な処理の合間に通常と異なる変換パターンが挟まれることになる。このようにして得られたテレシネ画像を圧縮符号化する際に、ビデオのフレームレートそのままで圧縮符号化を行ったのではコピーされた冗長フィールドまでも符号化することになり、効率が悪くなる。従って、コピーされた冗長フィールドを検出削除する逆テレシネ変換した後に圧縮符号化を行い、各フレームについて冗長フィールドを削除したかどうかを示すフラグと、フレームの２つのフィールドの表示順を示すフラグとを付加して記録する。
しかしながら、逆テレシネ変換を行った複数のタイトル編集単位のＶＯＢを、連続して再生しようとした場合に、連続再生するＶＯＢ同士のつなぎ目でトップフィールドが連続してしまう。このような場合のＭＰＥＧデコーダの振る舞いは一般に保証されておらず、ＤＶＤプレーヤに於いては、フィールドが１つ挿入されたり削除されたりして再生画像のつじつま合わせが行われるか、最悪の場合、無関係なフィールドが挿入されることになる。前者の場合であっても、音声との同期ずれが発生する恐れがある。従って、完全なシームレスの再生が実現できないことになる。
本発明に於いては、ＶＯＢ同士を連続して再生しても、ボトムフィールド同士、或いはトップフィールド同士が連続することなく、セルの境界に於いてもシームレス再生を実現することが出来るデータ構造を有するシステムストリームの生成方法、記録装置、再生装置、及びその様なシステムストリームが記録する媒体を提供することを目的とするデータ構造をもつ光ディスクおよび光ディスク記録方法を提供することを目的とする。なお、本出願は日本国特許出願番号Ｈ７−２５２７３３（１９９５年９月２９日出願）に基づいて出願されるものであって、該明細書による開示事項はすべて本発明の開示の一部となすものである。
発明の開示
特定のフィールドを複数回繰り返すことにより信号源のフレームレートより大きなフレームレートに変換されたビデオ信号を、この繰り返された冗長フィールドを除去して元の信号源のフレームレートにほぼ等しいフレームレートをもつ中間信号に変換し、さらにこの中間信号を圧縮符号化して記録信号を得、該フィールドを除去したことを示すフラグ及び結果として得られた各ビデオフレームの２つのフィールドのどちらが時間的に先行しているかを示すフラグと共に、記録媒体に記録する信号記録方法において、同一の記録媒体に複数の論理的な記録区間を設ける際に、各記録区間の先頭及び終端での前記フラグが所定の値を持つように前記ビデオ信号から前記録再信号への変換を行う信号変換記録方法。
【図面の簡単な説明】
図１は、マルチメディアビットストリームのデータ構造を示す図であり、図２は、オーサリングエンコーダを示す図であり、
図３は、オーサリングデコーダを示す図であり、
図４は、単一の記録面を有するＤＶＤ記録媒体の断面を示す図であり、
図５は、単一の記録面を有するＤＶＤ記録媒体の断面を示す図であり、
図６は、単一の記録面を有するＤＶＤ記録媒体の断面を示す図であり、
図７は、複数の記録面（片面２層型）を有するＤＶＤ記録媒体の断面を示す図であり、
図８は、複数の記録面（両面１層型）を有するＤＶＤ記録媒体の断面を示す図であり、
図９は、ＤＶＤ記録媒体の平面図であり、
図１０は、ＤＶＤ記録媒体の平面図であり、
図１１は、片面２層型ＤＶＤ記録媒体の展開図であり、
図１２は、片面２層型ＤＶＤ記録媒体の展開図であり、
図１３は、両面一層型ＤＶＤ記録媒体の展開図であり、
図１４は、両面一層型ＤＶＤ記録媒体の展開図であり、
図１５は、マルチレイティッドタイトルストリームの一例を示す図であり、
図１６は、ＶＴＳのデータ構造を示す図であり、
図１７は、システムストリームのデータ構造を示す図であり、
図１８は、システムストリームのデータ構造を示す図であり、
図１９は、システムストリームのパックデータ構造を示す図であり、
図２０は、ナブパックＮＶのデータ構造を示す図であり、
図２１は、ＤＶＤマルチシーンのシナリオ例を示す図であり、
図２２は、ＤＶＤのデータ構造を示す図であり、
図２３は、マルチアングル制御のシステムストリームの接続を示す図であり、
図２４は、マルチシーンに対応するＶＯＢの例を示す図であり、
図２５は、ＤＶＤオーサリングエンコーダを示す図であり、
図２６は、ＤＶＤオーサリングデコーダを示す図であり、
図２７は、ＶＯＢセットデータ列を示す図であり、
図２８は、ＶＯＢデータ列を示す図であり、
図２９は、エンコードパラメータを示す図であり、
図３０は、ＤＶＤマルチシーンのプログラムチェーン構成例を示す図であり、
図３１は、ＤＶＤマルチシーンのＶＯＢ構成例を示す図であり、
図３２は、テレシネ変換と逆テレシネ変換の様子を示す図であり、
図３３は、マルチアングル制御の概念を示す図であり、
図３４は、エンコード制御フローチャートを示す図であり、
図３５は、非シームレス切り替えマルチアングルのエンコードパラメータ生成フローチャートを示す図であり、
図３６は、エンコードパラメータ生成の共通フローチャートを示す図であり、
図３７は、シームレス切り替えマルチアングルのエンコードパラメータ生成フローチャートを示す図であり、
図３８は、パレンタル制御のエンコードパラメータ生成フローチャートを示す図であり、
図３９は、逆テレシネ変換器のブロック図であり、
図４０は、パレンタル接続例を示す図であり、
図４１は、テレシネ変換と逆テレシネ変換の様子を示す図であり、
図４２は、逆テレシネ変換器のタイミングチャートを示す。
図４３は、パレンタル接続例を示す図であり、
図４４は、テレシネ変換と逆テレシネ変換の様子を示す図であり、
図４５は、逆テレシネ変換器のブロック図であり、
図４６は、逆テレシネ変換器のタイミングチャートを示す。
図４７は、デコードシステムテーブルを示す図であり、
図４８は、デコードテーブルを示す図であり、
図４９は、デコーダのフローチャートを示す図であり、
図５０は、ＰＧＣ再生のフローチャートを示す図であり、
図５１は、ストリームバッファ内のデータデコード処理フローチャートを示す図であり、
図５２は、各デコーダの同期処理フローチャートを示す図であり、
図５３は、単一シーンのエンコードパラメータ生成フローチャートを示す図であり、
図５４は、インターリーブブロック構成例を示す図であり、
図５５は、ＶＴＳのＶＯＢブロック構成例を示す図であり、
図５６は、連続ブロック内のデータ構造を示す図であり、
図５７は、インターリーブブロック内のデータ構造を示す図である。
発明を実施するための最良の形態
本発明をより詳細に説明するために、添付の図面に従ってこれを説明する。
オーサリングシステムのデータ構造
先ず、図１を参照して、本発明に於ける記録装置、記録媒体、再生装置および、それらの機能を含むオーサリングシステムに於いて処理の対象されるマルチメディアデータのビットストリームの論理構造を説明する。ユーザが内容を認識し、理解し、或いは楽しむことができる画像及び音声情報を１タイトルとする。このタイトルとは、映画でいえば、最大では一本の映画の完全な内容を、そして最小では、各シーンの内容を表す情報量に相当する。
所定数のタイトル分の情報を含むビットストリームデータから、ビデオタイトルセットＶＴＳが構成される。以降、簡便化の為に、ビデオタイトルセットをＶＴＳと呼称する。ＶＴＳは、上述の各タイトルの中身自体を表す映像、オーディオなどの再生データと、それらを制御する制御データを含んでいる。
所定数のＶＴＳから、オーサリングシステムに於ける一ビデオデータ単位であるビデオゾーンＶＺが形成される。以降、簡便化の為にビデオゾーンをＶＺと呼称する。一つのＶＺに、Ｋ＋１個のＶＴＳ＃０〜ＶＴＳ＃Ｋ（Ｋは、０を含む正の整数）が直線的に連続して配列される。そしてその内一つ、好ましくは先頭のＶＴＳ＃０が、各ＶＴＳに含まれるタイトルの中身情報を表すビデオマネージャとして用いられる。この様に構成された、所定数のＶＺから、オーサリングシステムに於ける、マルチメディアデータのビットストリームの最大管理単位であるマルチメディアビットストリームＭＢＳが形成される。
オーサリングエンコーダＥＣ
図２に、ユーザーの要望に応じた任意のシナリオに従い、オリジナルのマルチメディアビットストリームをエンコードして、新たなマルチメディアビットストリームＭＢＳを生成する本発明に基づくオーサリングエンコーダＥＣの一実施形態を示す。なお、オリジナルのマルチメディアビットストリームは、映像情報を運ぶビデオストリームＳｔ１、キャプション等の補助映像情報を運ぶサブピクチャストリームＳｔ３、及び音声情報を運ぶオーディオストリームＳｔ５から構成されている。ビデオストリーム及びオーディオストリームは、所定の時間の間に対象から得られる画像及び音声の情報を含むストリームである。
一方、サブピクチャストリームは一画面分、つまり瞬間の映像情報を含むストリームである。必要であれば、一画面分のサブピクチャをビデオメモリ等にキャプチャして、そのキャプチャされたサブピクチャ画面を継続的に表示することができる。
これらのマルチメディアソースデータＳｔ１、Ｓｔ３、及びＳｔ５は、実況中継の場合には、ビデオカメラ等の手段から映像及び音声信号がリアルタイムで供給される。また、ビデオテープ等の記録媒体から再生された非リアルタイムな映像及び音声信号であったりする。尚、同図に於ては、簡便化のために、３種類のマルチメディアソースストリームとして、３種類以上で、それぞれが異なるタイトル内容を表すソースデータが入力されても良いことは言うまでもない。このような複数のタイトルの音声、映像、補助映像情報を有するマルチメディアソースデータを、マルチタイトルストリームと呼称する。
オーサリングエンコーダＥＣは、編集情報作成部１００、エンコードシステム制御部２００、ビデオエンコーダ３００、ビデオストリームバッファ４００、サブピクチャエンコーダ５００、サブピクチャストリームバッファ６００、オーディオエンコーダ７００、オーディオストリームバッファ８００、システムエンコーダ９００、ビデオゾーンフォーマッタ１３００、記録部１２００、及び記録媒体Ｍから構成されている。
同図に於いて、本発明のエンコーダによってエンコードされたビットストリームは、一例として光ディスク媒体に記録される。
オーサリングエンコーダＥＣは、オリジナルのマルチメディアタイトルの映像、サブピクチャ、及び音声に関するユーザの要望に応じてマルチメディアビットストリームＭＢＳの該当部分の編集を指示するシナリオデータとして出力できる編集情報生成部１００を備えている。編集情報作成部１００は、好ましくは、ディスプレイ部、スピーカ部、キーボード、ＣＰＵ、及び、ソースストリームバッファ部等で構成される。編集情報作成部１００は、上述の外部マルチメディアストリーム源に接続されており、マルチメディアソースデータＳｔ１、Ｓｔ３、及びＳｔ５の供給を受ける。
ユーザーは、マルチメディアソースデータをディスプレイ部及びスピーカを用いて映像及び音声を再生し、タイトルの内容を認識することができる。更に、ユーザは再生された内容を確認しながら、所望のシナリオに沿った内容の編集指示を、キーボード部を用いて入力する。編集指示内容とは、複数のタイトル内容を含む各ソースデータの全部或いは、其々に対して、所定時間毎に各ソースデータの内容を一つ以上選択し、それらの選択された内容を、所定の方法で接続再生するような情報を言う。
ＣＰＵは、キーボード入力に基づいて、マルチメディアソースデータのそれぞれのストリームＳｔ１、Ｓｔ３、及びＳｔ５の編集対象部分の位置、長さ、及び各編集部分間の時間的相互関係等の情報をコード化したシリオデータ（Scenario data）Ｓｔ７を生成する。
ソースストリームバッファは所定の容量を有し、マルチメディアソースデータの各ストリームＳｔ１、Ｓｔ３、及びＳｔ５を所定の時間Ｔｄ遅延させた後に、出力する。
これは、ユーザーがシナリオデータＳｔ７を作成するのと同時にエンコードを行う場合、つまり逐次エンコード処理の場合には、後述するようにシナリオデータＳｔ７に基づいて、マルチメディアソースデータの編集処理内容を決定するのに若干の時間Ｔｄを要するので、実際に編集エンコードを行う場合には、この時間Ｔｄだけマルチメディアソースデータを遅延させて、編集エンコードと同期する必要があるからである。このような、逐次編集処理の場合、遅延時間Ｔｄは、システム内の各要素間での同期調整に必要な程度であるので、通常ソースストリームバッファは半導体メモリ等の高速記録媒体で構成される。
しかしながら、タイトルの全体を通してシナリオデータＳｔ７を完成させた後に、マルチメディアソースデータを一気にエンコードする、いわゆるバッチ編集時に於いては、遅延時間Ｔｄは、一タイトル分或いはそれ以上の時間必要である。このような場合には、ソースストリームバッファは、ビデオテープ、磁気ディスク、光ディスク等の低速大容量記録媒体を利用して構成できる。つまり、ソースストリームバッファは遅延時間Ｔｄ及び製造コストに応じて、適当な記憶媒体を用いて構成すれば良い。
エンコードシステム制御部２００は、編集情報作成部１００に接続されており、シナリオデータＳｔ７を編集情報作成部１００から受け取る。エンコードシステム制御部２００は、シナリオデータＳｔ７に含まれる編集対象部の時間的位置及び長さに関する情報に基づいて、マルチメディアソースデータの編集対象分をエンコードするためのそれぞれのエンコードパラメータデータ及びエンコード開始、終了のタイミング信号Ｓｔ９、Ｓｔ１１、及びＳｔ１３をそれぞれ生成する。なお、上述のように、各マルチメディアソースデータＳｔ１、Ｓｔ３、及びＳｔ５は、ソースストリームバッファによって、時間Ｔｄ遅延して出力されるので、各タイミングＳｔ９、Ｓｔ１１、及びＳｔ１３と同期している。
つまり、信号Ｓｔ９はビデオストリームＳｔ１からエンコード対象部分を抽出して、ビデオエンコード単位を生成するために、ビデオストリームＳｔ１をエンコードするタイミングを指示するビデオエンコード信号である。同様に、信号Ｓｔ１１は、サブピクチャエンコード単位を生成するために、サブピクチャストリームＳｔ３をエンコードするタイミングを指示するサブピクチャストリームエンコード信号である。また、信号Ｓｔ１３は、オーディオエンコード単位を生成するために、オーディオストリームＳｔ５をエンコードするタイミングを指示するオーディオエンコード信号である。
エンコードシステム制御部２００は、更に、シナリオデータＳｔ７に含まれるマルチメディアソースデータのそれぞれのストリームＳｔ１、Ｓｔ３、及びＳｔ５のエンコード対象部分間の時間的相互関係等の情報に基づいて、エンコードされたマルチメディアエンコードストリームを、所定の相互関係になるように配列するためのタイミング信号Ｓｔ２１、Ｓｔ２３、及びＳｔ２５を生成する。
エンコードシステム制御部２００は、１ビデオゾーンＶＺ分の各タイトルのタイトル編集単位（ＶＯＢ）に付いて、そのタイトル編集単位（ＶＯＢ）の再生時間を示す再生時間情報ＩＴおよびビデオ、オーディオ、サブピクチャのマルチメディアエンコードストリームを多重化（マルチプレクス）するシステムエンコードのためのエンコードパラメータを示すストリームエンコードデータＳｔ３３を生成する。
エンコードシステム制御部２００は、所定の相互的時間関係にある各ストリームのタイトル編集単位（ＶＯＢ）から、マルチメディアビットストリームＭＢＳの各タイトルのタイトル編集単位（ＶＯＢ）の接続または、各タイトル編集単位を重畳しているインターリーブタイトル編集単位（ＶＯＢs）を生成するための、各タイトル編集単位（ＶＯＢ）をマルチメディアビットストリームＭＢＳとして、フォーマットするためのフォーマットパラメータを規定する配列指示信号Ｓｔ３９を生成する。
ビデオエンコーダ３００は、編集情報作成部１００のソースストリームバッファ及び、エンコードシステム制御部２００に接続されており、ビデオストリームＳｔ１とビデオエンコードのためのエンコードパラメータデータ及びエンコード開始終了のタイミング信号のＳｔ９、例えば、エンコードの開始終了タイミング、ビットレート、エンコード開始終了時にエンコード条件、素材の種類として、ＮＴＳＣ信号またはＰＡＬ信号あるいはテレシネ素材であるかなどのパラメータがそれぞれ入力される。ビデオエンコーダ３００は、ビデオエンコード信号Ｓｔ９に基づいて、ビデオストリームＳｔ１の所定の部分をエンコードして、ビデオエンコードストリームＳｔ１５を生成する。
同様に、サブピクチャエンコーダ５００は、編集情報作成部１００のソースバッファ及び、エンコードシステム制御部２００に接続されており、サブピクチャストリームＳｔ３とサブピクチャストリームエンコード信号Ｓｔ１１がそれぞれ入力される。サブピクチャエンコーダ５００は、サブピクチャストリームエンコードのためのパラメータ信号Ｓｔ１１に基づいて、サブピクチャストリームＳｔ３の所定の部分をエンコードして、サブピクチャエンコードストリームＳｔ１７を生成する。
オーディオエンコーダ７００は、編集情報作成部１００のソースバッファ及び、エンコードシステム制御部２００に接続されており、オーディオストリームＳｔ５とオーディオエンコード信号Ｓｔ１３がそれぞれ入力される。オーディオエンコーダ７００は、オーディオエンコードのためのパラメータデータ及びエンコード開始終了タイミングの信号Ｓｔ１３に基づいて、オーディオストリームＳｔ５の所定の部分をエンコードして、オーディオエンコードストリームＳｔ１９を生成する。
ビデオストリームバッファ４００は、ビデオエンコーダ３００に接続されており、ビデオエンコーダ３００から出力されるビデオエンコードストリームＳｔ１５を保存する。ビデオストリームバッファ４００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２１の入力に基づいて、保存しているビデオエンコードストリームＳｔ１５を、調時ビデオエンコードストリームＳｔ２７として出力する。
同様に、サブピクチャストリームバッファ６００は、サブピクチャエンコーダ５００に接続されており、サブピクチャエンコーダ５００から出力されるサブピクチャエンコードストリームＳｔ１７を保存する。サブピクチャストリームバッファ６００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２３の入力に基づいて、保存しているサブピクチャエンコードストリームＳｔ１７を、調時サブピクチャエンコードストリームＳｔ２９として出力する。
また、オーディオストリームバッファ８００は、オーディオエンコーダ７００に接続されており、オーディオエンコーダ７００から出力されるオーディオエンコードストリームＳｔ１９を保存する。オーディオストリームバッファ８００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２５の入力に基づいて、保存しているオーディオエンコードストリームＳｔ１９を、調時オーディオエンコードストリームＳｔ３１として出力する。
システムエンコーダ９００は、ビデオストリームバッファ４００、サブピクチャストリームバッファ６００、及びオーディオストリームバッファ８００に接続されており、調時ビデオエンコードストリームＳｔ２７、調時サブピクチャエンコードストリームＳｔ２９、及び調時オーディオエンコードＳｔ３１が入力される。システムエンコーダ９００は、またエンコードシステム制御部２００に接続されており、ストリームエンコードデータＳｔ３３が入力される。
システムエンコーダ９００は、システムエンコードのエンコードパラメータデータ及びエンコード開始終了タイミングの信号Ｓｔ３３に基づいて、各調時ストリームＳｔ２７、Ｓｔ２９、及びＳｔ３１に多重化処理を施して、タイトル編集単位（ＶＯＢ）Ｓｔ３５を生成する。
ビデオゾーンフォーマッタ１３００は、システムエンコーダ９００に接続されて、タイトル編集単位Ｓｔ３５を入力される。ビデオゾーンフォーマッタ１３００は更に、エンコードシステム制御部２００に接続されて、マルチメディアビットストリームＭＢＳをフォーマットするためのフォーマットパラメータデータ及びフォーマット開始終タイミングの信号Ｓｔ３９を入力される。ビデオゾーンフォーマッタ１３００は、タイトル編集単位Ｓｔ３９に基づいて、１ビデオゾーンＶＺ分のタイトル編集単位Ｓｔ３５を、ユーザの要望シナリオに沿う順番に、並べ替えて、編集済みマルチメディアビットストリームＳｔ４３を生成する。
このユーザの要望シナリオの内容に編集された、マルチメディアビットストリームＳｔ４３は、記録部１２００に転送される。記録部１２００は、編集マルチメディアビットストリームＭＢＳを記録媒体Ｍに応じた形式のデータＳｔ４３に加工して、記録媒体Ｍに記録する。この場合、マルチメディアビットストリームＭＢＳには、予め、ビデオゾーンフォーマッタ１３００によって生成された媒体上の物理アドレスを示すボリュームファイルストラクチャＶＦＳが含まれる。
また、エンコードされたマルチメディアビットストリームＳｔ３５を、以下に述べるようなデコーダに直接出力して、編集されたタイトル内容を再生するようにしても良い。この場合は、マルチメディアビットストリームＭＢＳには、ボリュームファイルストラクチャＶＦＳは含まれないことは言うまでもない。
オーサリングデコーダＤＣ
次に、図３を参照して、本発明にかかるオーサリングエンコーダＥＣによって、編集されたマルチメディアビットストリームＭＢＳをデコードして、ユーザの要望のシナリオに沿って各タイトルの内容を展開する、オーサリングデコーダＤＣの一実施形態について説明する。なお、本実施形態に於いては、記録媒体Ｍに記録されたオーサリングエンコーダＥＣによってエンコードされたマルチメディアビットストリームＳｔ４５は、記録媒体Ｍに記録されている。
オーサリングデコーダＤＣは、マルチメディアビットストリーム再生部２０００、シナリオ選択部２１００、デコードシステム制御部２３００、ストリームバッファ２４００、システムデコーダ２５００、ビデオバッファ２６００、サブピクチャバッファ２７００、オーディオバッファ２８００、同期制御部２９００、ビデオデコーダ３８００、サブピクチャデコーダ３１００、オーディオデコーダ３２００、合成部３５００、ビデオデータ出力端子３６００、及びオーディオデータ出力端子３７００から構成されている。
マルチメディアビットストリーム再生部２０００は、記録媒体Ｍを駆動させる記録媒体駆動ユニット２００４、記録媒体Ｍに記録されている情報を読み取り二値の読み取り信号Ｓｔ５７を生成する読取ヘッドユニット２００６、読み取り信号ＳＴ５７に種々の処理を施して再生ビットストリームＳｔ６１を生成する信号処理部２００８、及び機構制御部２００２から構成される。機構制御部２００２は、デコードシステム制御部２３００に接続されて、マルチメディアビットストリーム再生指示信号Ｓｔ５３を受けて、それぞれ記録媒体駆動ユニット（モータ）２００４及び信号処理部２００８をそれぞれ制御する再生制御信号Ｓｔ５５及びＳｔ５９を生成する。
デコーダＤＣは、オーサリングエンコーダＥＣで編集されたマルチメディアタイトルの映像、サブピクチャ、及び音声に関する、ユーザの所望の部分が再生されるように、対応するシナリオを選択して再生するように、オーサリングデコーダＤＣに指示を与えるシナリオデータとして出力できるシナリオ選択部２１００を備えている。
シナリオ選択部２１００は、好ましくは、キーボード及びＣＰＵ等で構成される。ユーザーは、オーサリングエンコーダＥＣで入力されたシナリオの内容に基づいて、所望のシナリオをキーボード部を操作して入力する。ＣＰＵは、キーボード入力に基づいて、選択されたシナリオを指示するシナリオ選択データＳｔ５１を生成する。シナリオ選択部２１００は、例えば、赤外線通信装置等によって、デコードシステム制御部２３００に接続されている。デコードシステム制御部２３００は、Ｓｔ５１に基づいてマルチメディアビットストリーム再生部２０００の動作を制御する再生指示信号Ｓｔ５３を生成する。
ストリームバッファ２４００は所定のバッファ容量を有し、マルチメディアビットストリーム再生部２０００から入力される再生信号ビットストリームＳｔ６１を一時的に保存すると共に、及び各ストリームのアドレス情報及び同期初期値データを抽出してストリーム制御データＳｔ６３を生成する。ストリームバッファ２４００は、デコードシステム制御部２３００に接続されており、生成したストリーム制御データＳｔ６３をデコードシステム制御部２３００に供給する。
同期制御部２９００は、デコードシステム制御部２３００に接続されて、同期制御データＳｔ８１に含まれる同期初期値データ（SCR）を受け取り、内部のシステムクロック（STC）セットし、リセットされたシステムクロックＳｔ７９をデコードシステム制御部２３００に供給する。
デコードシステム制御部２３００は、システムクロックＳｔ７９に基づいて、所定の間隔でストリーム読出信号Ｓｔ６５を生成し、ストリームバッファ２４００に入力する。
ストリームバッファ２４００は、読出信号Ｓｔ６５に基づいて、再生ビットストリームＳｔ６１を所定の間隔で出力する。
デコードシステム制御部２３００は、更に、シナリオ選択データＳｔ５１に基づき、選択されたシナリオに対応するビデオ、サブピクチャ、オーディオの各ストリームのＩＤを示すデコードストリーム指示信号Ｓｔ６９を生成して、システムデコーダ２５００に出力する。
システムデコーダ２５００は、ストリームバッファ２４００から入力されてくるビデオ、サブピクチャ、及びオーディオのストリームを、デコード指示信号Ｓｔ６９の指示に基づいて、それぞれ、ビデオエンコードストリームＳｔ７１としてビデオバッファ２６００に、サブピクチャエンコードストリームＳｔ７３としてサブピクチャバッファ２７００に、及びオーディオエンコードストリームＳｔ７５としてオーディオバッファ２８００に出力する。
システムデコーダ２５００は、各ストリームＳｔ６７の各最小制御単位での再生開始時間（PTS）及びデコード開始時間（DTS）を検出し、時間情報信号Ｓｔ７７を生成する。この時間情報信号Ｓｔ７７は、デコードシステム制御部２３００を経由して、同期制御データＳｔ８１として同期制御部２９００に入力される。
同期制御部２９００は、同期制御データＳｔ８１として、各ストリームについて、それぞれがデコード後に所定の順番になるようなデコード開始タイミングを決定する。同期制御部２９００は、このデコードタイミングに基づいて、ビデオストリームデコード開始信号Ｓｔ８９を生成し、ビデオデコーダ３８００に入力する。同様に、同期制御部２９００は、サブピクチャデコード開始信号Ｓｔ９１及びオーディオデコード開始信号ｔ９３を生成し、サブピクチャデコーダ３１００及びオーディオデコーダ３２００にそれぞれ入力する。
ビデオデコーダ３８００は、ビデオストリームデコード開始信号Ｓｔ８９に基づいて、ビデオ出力要求信号Ｓｔ８４を生成して、ビデオバッファ２６００に対して出力する。ビデオバッファ２６００はビデオ出力要求信号Ｓｔ８４を受けて、ビデオストリームＳｔ８３をビデオデコーダ３８００に出力する。ビデオデコーダ３８００は、ビデオストリームＳｔ８３に含まれる再生時間情報を検出し、再生時間に相当する量のビデオストリームＳｔ８３の入力を受けた時点で、ビデオ出力要求信号Ｓｔ８４を無効（disable）にする。このようにして、所定再生時間に相当するビデオストリームがビデオデコーダ３８００でデコードされて、再生されたビデオ信号Ｓｔ１０４が合成部３５００に出力される。
同様に、サブピクチャデコーダ３１００は、サブピクチャデコード開始信号Ｓｔ９１に基づいて、サブピクチャ出力要求信号Ｓｔ８６を生成し、サブピクチャバッファ２７００に供給する。サブピクチャバッファ２７００は、サブピクチャ出力要求信号Ｓｔ８６を受けて、サブピクチャストリームＳｔ８５をサブピクチャデコーダ３１００に出力する。サブピクチャデコーダ３１００は、サブピクチャストリームＳｔ８５に含まれる再生時間情報に基づいて、所定の再生時間に相当する量のサブピクチャストリームＳｔ８５をデコードして、サブピクチャ信号Ｓｔ９９を再生して、合成部３５００に出力される。
合成部３５００は、ビデオ信号Ｓｔ１０４及びサブピクチャ信号Ｓｔ９９を重畳させて、マルチピクチャビデオ信号Ｓｔ１０５を生成し、ビデオ出力端子３６００に出力する。
オーディオデコーダ３２００は、オーディオデコード開始信号Ｓｔ９３に基づいて、オーディオ出力要求信号Ｓｔ８８を生成し、オーディオバッファ２８００に供給する。オーディオバッファ２８００は、オーディオ出力要求信号Ｓｔ８８を受けて、オーディオストリームＳｔ８７をオーディオデコーダ３２００に出力する。オーディオデコーダ３２００は、オーディオストリームＳｔ８７に含まれる再生時間情報に基づいて、所定の再生時間に相当する量のオーディオストリームＳｔ８７をデコードして、オーディオ出力端子３７００に出力する。
このようにして、ユーザのシナリオ選択に応答して、リアルタイムにユーザの要望するマルチメディアビットストリームＭＢＳを再生する事ができる。つまり、ユーザが異なるシナリオを選択する度に、オーサリングデコーダＤＣはその選択されたシナリオに対応するマルチメディアビットストリームＭＢＳを再生することによって、ユーザの要望するタイトル内容を再生することができる。
以上述べたように、本発明のオーサリングシステムに於いては、基本のタイトル内容に対して、各内容を表す最小編集単位の複数の分岐可能なサブストリームを所定の時間的相関関係に配列するべく、マルチメディアソースデータをリアルタイム或いは一括してエンコードして、複数の任意のシナリオに従うマルチメディアビットストリームを生成する事ができる。
また、このようにエンコードされたマルチメディアビットストリームを、複数のシナリオの内の任意のシナリオに従って再生できる。そして、再生中であっても、選択したシナリオから別のシナリオを選択し（切り替えて）も、その新たな選択されたシナリオに応じた（動的に）マルチメディアビットストリームを再生できる。また、任意のシナリオに従ってタイトル内容を再生中に、更に、複数のシーンの内の任意のシーンを動的に選択して再生することができる。
このように、本発明に於けるオーサリングシステムに於いては、エンコードしてマルチメディアビットストリームＭＢＳをリアルタイムに再生するだけでなく、繰り返し再生することができる。尚、オーサリングシステムの詳細に関しては、本特許出願と同一出願人による１９９６年９月２７日付けの日本国特許出願に開示されている。
ＤＶＤ
図４に、単一の記録面を有するＤＶＤの一例を示す。本例に於けるＤＶＤ記録媒体ＲＣ１は、レーザー光線ＬＳを照射し情報の書込及び読出を行う情報記録面ＲＳ１と、これを覆う保護層ＰＬ１からなる。更に、記録面ＲＳ１の裏側には、補強層ＢＬ１が設けられている。このように、保護層ＰＬ１側の面を表面ＳＡ、補強層ＢＬ１側の面を裏面ＳＢとする。この媒体ＲＣ１のように、片面に単一の記録層ＲＳ１を有するＤＶＤ媒体を、片面一層ディスクと呼ぶ。
図５に、図４のＣ１部の詳細を示す。記録面ＲＳ１は、金属薄膜等の反射膜を付着した情報層４１０９によって形成されている。その上に、所定の厚さＴ１を有する第１の透明基板４１０８によって保護層ＰＬ１が形成される。所定の厚さＴ２を有する第二の透明基板４１１１によって補強層ＢＬ１が形成される。第一及び第二の透明基盤４１０８及び４１１１は、その間に設けられた接着層４１１０によって、互いに接着されている。
さらに、必要に応じて第２の透明基板４１１１の上にラベル印刷用の印刷層４１１２が設けられる。印刷層４１１２は補強層ＢＬ１の基板４１１１上の全領域ではなく、文字や絵の表示に必要な部分のみ印刷され、他の部分は透明基板４１１１を剥き出しにしてもよい。その場合、裏面ＳＢ側から見ると、印刷されていない部分では記録面ＲＳ１を形成する金属薄膜４１０９の反射する光が直接見えることになり、例えば、金属薄膜がアルミニウム薄膜である場合には背景が銀白色に見え、その上に印刷文字や図形が浮き上がって見える。印刷層４１１２は、補強層ＢＬ１の全面に設ける必要はなく、用途に応じて部分的に設けてもよい。
図６に、更に図５のＣ２部の詳細を示す。光ビームＬＳが入射し情報が取り出される表面ＳＡに於いて、第１の透明基板４１０８と情報層４１０９の接する面は、成形技術により凹凸のピットが形成され、このピットの長さと間隔を変えることにより情報が記録される。つまり、情報層４１０９には第１の透明基板４１０８の凹凸のピット形状が転写される。このピットの長さや間隔はＣＤの場合に比べ短くなり、ピット列で形成する情報トラックもピッチも狭く構成されている。その結果、面記録密度が大幅に向上している。
また、第１の透明基板４１０８のピットが形成されていない表面ＳＡ側は、平坦な面となっている。第２の透明基板４１１１は、補強用であり、第１の透明基板４１０８と同じ材質で構成される両面が平坦な透明基板である。そして所定の厚さＴ１及びＴ２は、共に同じく、例えば０．６ｍｍが好ましいが、それに限定されるものでは無い。
情報の取り出しは、ＣＤの場合と同様に、光ビームＬＳが照射されることにより光スポットの反射率変化として取り出される。ＤＶＤシステムに於いては、対物レンズの開口数ＮＡを大きく、そして光ビームの波長λ小さすることができるため、使用する光スポットＬｓの直径を、ＣＤでの光スポットの約１／１．６に絞り込むことができる。これは、ＣＤシステムに比べて、約１．６倍の解像度を有することを意味する。
ＤＶＤからのデータ読み出しには、波長の短い６５０ｎｍの赤色半導体レーザと対物レンズのＮＡ（開口数）を０．６ｍｍまで大きくした光学系とが用いれらる。これと透明基板の厚さＴを０．６ｍｍに薄くしたこととがあいまって、直径１２０ｍｍの光ディスクの片面に記録できる情報容量が５Ｇバイトを越える。
ＤＶＤシステムは、上述のように、単一の記録面ＲＳ１を有する片側一層ディスクＲＣ１に於いても、ＣＤに比べて記録可能な情報量が１０倍近いため、単位あたりのデータサイズが非常に大きい動画像を、その画質を損なわずに取り扱うことができる。その結果、従来のＣＤシステムでは、動画像の画質を犠牲にしても、再生時間が７４分であるのに比べて、ＤＶＤでは、高画質動画像を２時間以上に渡って記録再生可能である。このようにＤＶＤは、動画像の記録媒体に適しているという特徴がある。
図７及び図８に、上述の記録面ＲＳを複数有するＤＶＤ記録媒体の例を示す。図７のＤＶＤ記録媒体ＲＣ２は、同一側、つまり表側ＳＡに、二層に配された第一及び半透明の第二の記録面ＲＳ１及びＲＳ２を有している。第一の記録面ＲＳ１及び第二の記録面ＲＳ２に対して、それぞれ異なる光ビームＬＳ１及びＬＳ２を用いることにより、同時に二面からの記録再生が可能である。また、光ビームＬＳ１或いはＬＳ２の一方にて、両記録面ＲＳ１及びＲＳ２に対応させても良い。このように構成されたＤＶＤ記録媒体を片面二層ディスクと呼ぶ。この例では、２枚の記録層ＲＳ１及びＲＳ２を配したが、必要に応じて、２枚以上の記録層ＲＳを配したＤＶＤ記録媒体を構成できることは、言うまでもない。このようなディスクを、片面多層ディスクと呼ぶ。
一方、図８のＤＶＤ記録媒体ＲＣ３は、反対側、つまり表側ＳＡ側には第一の記録面ＲＳ１が、そして裏側ＳＢには第二の記録面ＲＳ２、それぞ設けれている。これらの例に於いては、一枚のＤＶＤに記録面を二層もうけた例を示したが、二層以上の多層の記録面を有するように構成できることは言うまでもない。図７の場合と同様に、光ビームＬＳ１及びＬＳ２を個別に設けても良いし、一つの光ビームで両方の記録面ＲＳ１及びＲＳ２の記録再生に用いることもできる。このように構成されたＤＶＤ記録媒体を両面一層ディスクと呼ぶ。また、片面に２枚以上の記録層ＲＳを配したＤＶＤ記録媒体を構成できることは、言うまでもない。このようなディスクを、両面多層ディスクと呼ぶ。
図９及び図１０に、ＤＶＤ記録媒体ＲＣの記録面ＲＳを光ビームＬＳの照射側から見た平面図をそれぞれ示す。ＤＶＤには、内周から外周方向に向けて、情報を記録するトラックＴＲが螺旋状に連続して設けられている。トラックＴＲは、所定のデータ単位毎に、複数のセクターに分割されている。尚、図９では、見易くするために、トラック１周あたり３つ以上のセクターに分割されているように表されている。
通常、トラックＴＲは、図９に示すように、ディスクＲＣＡの内周の端点ＩＡから外周の端点ＯＡに向けて時計回り方向ＤｒＡに巻回されている。このようなディスクＲＣＡを時計回りディスク、そのトラックを時計回りトラックＴＲＡと呼ぶ。また、用途によっては、図１０に示すように、ディスクＲＣＢの外周の端点ＯＢから内周の端点ＩＢに向けて、時計周り方向ＤｒＢに、トラックＴＲＢが巻回されている。この方向ＤｒＢは、内周から外周に向かって見れば、反時計周り方向であるので、図９のディスクＲＣＡと区別するために、反時計回りディスクＲＣＢ及び反時計回りトラックＴＲＢと呼ぶ。上述のトラック巻回方向ＤｒＡ及びＤｒＢは、光ビームが記録再生の為にトラックをスキャンする動き、つまりトラックパスである。トラック巻回方向ＤｒＡの反対方向ＲｄＡが、ディスクＲＣＡを回転させる方向である。トラック巻回方向ＤｒＢの反対方向ＲｄＢが、ディスクＲＣＢを回転させる方向である。
図１１に、図７に示す片側二層ディスクＲＣ２の一例であるディスクＲＣ２ｏの展開図を模式的に示す。下側の第一の記録面ＲＳ１は、図９に示すように時計回りトラックＴＲＡが時計回り方向ＤｒＡに設けられている。上側の第二の記録面ＲＳ２には、図１２に示すように反時計回りトラックＴＲＢが反時計回り方向ＤｒＢに設けられている。この場合、上下側のトラック外周端部ＯＢ及びＯＡは、ディスクＲＣ２ｏの中心線に平行な同一線上に位置している。上述のトラックＴＲの巻回方向ＤｒＡ及びＤｒＢは、共に、ディスクＲＣに対するデータの読み書きの方向でもある。この場合、上下のトラックの巻回方向は反対、つまり、上下の記録層のトラックパスＤｒＡ及びＤｒＢが対向している。
対向トラックパスタイプの片側二層ディスクＲＣ２ｏは、第一記録面ＲＳ１に対応してＲｄＡ方向に回転されて、光ビームＬＳがトラックパスＤｒＡに沿って、第一記録面ＲＳ１のトラックをトレースして、外周端部ＯＡに到達した時点で、光ビームＬＳを第二の記録面ＲＳ２の外周端部ＯＢに焦点を結ぶように調節することで、光ビームＬＳは連続的に第二の記録面ＲＳ２のトラックをトレースすることができる。このようにして、第一及び第二の記録面ＲＳ１及びＲＳ２のトラックＴＲＡとＴＲＢとの物理的距離は、光ビームＬＳの焦点を調整することで、瞬間的に解消できる。その結果、対向トラックパスタイプの片側二層ディスクＲＣｏに於いては、上下二層上のトラックを一つの連続したトラックＴＲとして処理することが容易である。故に、図１を参照して述べた、オーサリングシステムに於ける、マルチメディアデータの最大管理単位であるマルチメディアビットストリームＭＢＳを、一つの媒体ＲＣ２ｏの二層の記録層ＲＳ１及びＲＳ２に連続的に記録することができる。
尚、記録面ＲＳ１及びＲＳ２のトラックの巻回方向を、本例で述べたのと反対に、つまり第一記録面ＲＳ１に反時計回りトラックＴＲＢを、第二記録面に時計回りトラックＴＲＡを設け場合は、ディスクの回転方向をＲｄＢに変えることを除けば、上述の例と同様に、両記録面を一つの連続したトラックＴＲを有するものとして用いる。よって、簡便化の為にそのような例に付いての図示等の説明は省く。このように、ＤＶＤを構成することによって、長大なタイトルのマルチメディアビットストリームＭＢＳを一枚の対向トラックパスタイプ片面二層ディスクＲＣ２ｏに収録できる。このようなＤＶＤ媒体を、片面二層対向トラックパス型ディスクと呼ぶ。
図１２に、図７に示す片側二層ディスクＲＣ２の更なる例ＲＣ２ｐの展開図を模式に示す。第一及び第二の記録面ＲＳ１及びＲＳ２は、図９に示すように、共に時計回りトラックＴＲＡが設けられている。この場合、片側二層、ディスクＲＣ２ｐは、ＲｄＡ方向に回転されて、光ビームの移動方向はトラックの巻回方向と同じ、つまり、上下の記録層のトラックパスが互いに平行である（Parallel trackpath）。この場合に於いても、好ましくは、上下側のトラック外周端部ＯＡ及びＯＡは、ディスクＲＣ２ｐの中心線に平行な同一線上に位置している。それ故に、外周端部ＯＡに於いて、光ビームＬＳの焦点を調節することで、図１１で述べた媒体ＲＣ２ｏと同様に、第一記録面ＲＳ１のトラックＴＲＡの外周端部ＯＡから第二記録面ＲＳ２のトラックＴＲＡの外周端部ＯＡへ瞬間的に、アクセス先を変えることができる。
しかしながら、光ビームＬＳによって、第二の記録面ＲＳ２のトラックＴＲＡを時間的に連続してアクセスするには、媒体ＲＣ２ｐを逆（反ＲｄＡ方向に）回転させれば良い。しかし、光りビームの位置に応じて、媒体の回転方向を変えるのは効率が良くないので、図中で矢印で示されているように、光ビームＬＳが第一記録面ＲＳ１のトラック外周端部ＯＡに達した後に、光ビームを第二記録面ＲＳ２のトラック内周端部ＩＡに、移動させることで、論理的に連続した一つのトラックとして用いることができ。また、必要であれば、上下の記録面のトラックを一つの連続したトラックとして扱わずに、それぞれ別のトラックとして、各トラックにマルチメディアビットストリームＭＢＳを一タイトルづつ記録してもよい。このようなＤＶＤ媒体を、片面二層平行トラックパス型ディスクと呼ぶ。
尚、両記録面ＲＳ１及びＲＳ２のトラックの巻回方向を本例で述べたのと反対に、つまり反時計回りトラックＴＲＢを設けても、ディスクの回転方向をＲｄＢにすることを除けば同様である。この片面二層平行トラックパス型ディスクは、百科事典のような頻繁にランダムアクセスが要求される複数のタイトルを一枚の媒体ＲＣ２ｐに収録する用途に適している。
図１３に、図８に示す片面にそれぞれ一層の記録面ＲＳ１及びＲＳ２を有する両面一層型のＤＶＤ媒体ＲＣ３の一例ＲＣ３ｓの展開図を示す。一方の記録面ＲＳ１は、時計回りトラックＴＲＡが設けられ、他方の記録面ＲＳ２には、反時計回りトラックＴＲＢが設けられている。この場合に於いても、好ましくは、両記録面のトラック外周端部ＯＡ及びＯＢは、ディスクＲＣ３ｓの中心線に平行な同一線上に位置している。これらの記録面ＲＳ１とＲＳ２は、トラックの巻回方向は反対であるが、トラックパスが互いに面対称の関係にある。このようなディスクＲＣ３ｓを両面一層対称トラックパス型ディスクと呼ぶ。この両面一層対称トラックパス型ディスクＲＣ３ｓは、第一の記録媒体ＲＳ１に対応してＲｄＡ方向に回転される。その結果、反対側の第二の記録媒体ＲＳ２のトラックパスは、そのトラック巻回方向ＤｒＢと反対の方向、つまりＤｒＡである。この場合、連続、非連続的に関わらず、本質的に二つの記録面ＲＳ１及びＲＳ２に同一の光ビームＬＳでアクセスする事は実際的ではない。それ故に、表裏の記録面のそれぞれに、マルチメディアビットストリームＭＳＢを記録する。
図１４に、図８に示す両面一層ＤＶＤ媒体ＲＣ３の更なる例ＲＣ３ａの展開図を示す。両記録面ＲＳ１及びＲＳ２には、共に、図９に示すように時計回りトラックＴＲＡが設けられている。この場合に於いても、好ましくは、両記録面側ＲＳ１及びＲＳ２のトラック外周端部ＯＡ及びＯＡは、ディスクＲＣ３ａの中心線に平行な同一線上に位置している。但し、本例に於いては、先に述べた両面一層対象トラックパス型ディスクＲＣ３ｓと違って、これらの記録面ＲＳ１とＲＳ２上のトラックは非対称の関係にある。このようなディスクＲＣ３ａを両面一層非対象トラックパス型ディスクと呼ぶ。この両面一層非対象トラックパス型ディスクＲＣ３ｓは、第一の記録媒体ＲＳ１に対応してＲｄＡ方向に回転される。その結果、反対側の第二の記録面ＲＳ２のトラックパスは、そのトラック巻回方向ＤｒＡと反対の方向、つまりＤｒＢ方向である。
故に、単一の光ビームＬＳを第一記録面ＲＳ１の内周から外周へ、そして第二記録面ＲＳ２の外周から内周へと、連続的に移動させれば記録面毎に異なる光ビーム源を用意しなくても、媒体ＰＣ３ａを表裏反転させずに両面の記録再生が可能である。また、この両面一層非対象トラックパス型ディスクでは、両記録面ＲＳ１及びＲＳ２のトラックパスが同一である。それ故に、媒体ＰＣ３ａの表裏を反転することにより、記録面毎に異なる光ビーム源を用意しなくても、単一の光ビームＬＳで両面の記録再生が可能であり、その結果、装置を経済的に製造することができる。尚、両記録面ＲＳ１及びＲＳ２に、トラックＴＲＡの代わりにトラックＴＲＢを設けても、本例と基本的に同様である。
上述の如く、記録面の多層化によって、記録容量の倍増化が容易なＤＶＤシステムによって、１枚のディスク上に記録された複数の動画像データ、複数のオーディオデータ、複数のグラフィックスデータなどをユーザとの対話操作を通じて再生するマルチメディアの領域に於いてその真価を発揮する。つまり、従来ソフト提供者の夢であった、ひとつの映画を製作した映画の品質をそのまま記録で、多数の異なる言語圏及び多数の異なる世代に対して、一つの媒体により提供することを可能とする。
パレンタル
従来は、映画タイトルのソフト提供者は、同一のタイトルに関して、全世界の多数の言語、及び欧米各国で規制化されているパレンタルロックに対応した個別のパッケージとしてマルチレイティッドタイトルを制作、供給、管理しないといけなかった。この手間は、たいへん大きなものであった。また、これは、高画質もさることながら、意図した通りに再生できることが重要である。このような願いの解決に一歩近づく記録媒体がＤＶＤである。
マルチアングル
また、対話操作の典型的な例として、１つのシーンを再生中に、別の視点からのシーンに切替えるというマルチアングルという機能が要求されている。これは、例えば、野球のシーンであれば、バックネット側から見た投手、捕手、打者を中心としたアングル、バックネット側から見た内野を中心としたアングル、センター側から見た投手、捕手、打者を中心としたアングルなどいくつかのアングルの中から、ユーザが好きなものをあたかもカメラを切り替えているように、自由に選ぶというようなアプリケーションの要求がある。
ＤＶＤでは、このような要求に応えるべく動画像、オーディオ、グラフィックスなどの信号データを記録する方式としてビデオＣＤと同様のＭＰＥＧが使用されている。ビデオＣＤとＤＶＤとでは、その容量と転送速度および再生装置内の信号処理性能の差から同じＭＰＥＧ形式といっても、ＭＰＥＧ１とＭＰＥＧ２という多少異なる圧縮方式、データ形式が採用されている。ただし、ＭＰＥＧ１とＭＰＥＧ２の内容及びその違いについては、本発明の趣旨とは直接関係しないため説明を省略する（例えば、ＩＳＯ１１１７２、ＩＳＯ１３８１８のＭＰＥＧ規格書参照）。
本発明に掛かるＤＶＤシステムのデータ構造に付いて、図１６、図１７、図１８、図１９、及び図２０を参照して、後で説明する。
マルチシーン
上述の、パレンタルロック再生及びマルチアングル再生の要求を満たすために、各要求通りの内容のタイトルを其々に用意していれば、ほんの一部分の異なるシーンデータを有する概ね同一内容のタイトルを要求数だけ用意して、記録媒体に記録しておかなければならない。これは、記録媒体の大部分の領域に同一のデータを繰り返し記録することになるので、記録媒体の記憶容量の利用効率を著しく疎外する。さらに、ＤＶＤの様な大容量の記録媒体をもってしても、全ての要求に対応するタイトルを記録することは不可能である。この様な問題は、基本的に記録媒体の容量を増やせれば解決するとも言えるが、システムリソースの有効利用の観点から非常に望ましくない。
ＤＶＤシステムに於いては、以下にその概略を説明するマルチシーン制御を用いて、多種のバリエーションを有するタイトルを最低必要限度のデータでもって構成し、記録媒体等のシステムリソースの有効活用を可能としている。つまり、様々なバリエーションを有するタイトルを、各タイトル間での共通のデータからなる基本シーン区間と、其々の要求に即した異なるシーン群からなるマルチシーン区間とで構成する。そして、再生時に、ユーザが各マルチシーン区間での特定のシーンを自由、且つ随時に選択できる様にしておく。なお、パレンタルロック再生及びマルチアングル再生を含むマルチシーン制御に関して、後で、図２１を参照して説明する。
ＤＶＤシステムのデータ構造
図２２に、本発明に掛かるＤＶＤシステムに於ける、オーサリングデータのデータ構造を示す。ＤＶＤシステムでは、マルチメディアビットストリームＭＢＳを記録する為に、リードイン領域ＬＩ、ボリューム領域ＶＳと、リードアウト領域ＬＯに３つに大別される記録領域を備える。
リードイン領域ＬＩは、光ディスクの最内周部に、例えば、図９及び図１０で説明したディスクに於いては、そのトラックの内周端部ＩＡ及びＩＢに位置している。リードイン領域ＬＩには、再生装置の読み出し開始時の動作安定用のデータ等が記録される。
リードアウト領域ＬＯは、光ディスクの最外周に、つまり図９及び図１０で説明したトラックの外周端部ＯＡ及びＯＢに位置している。このリードアウト領域ＬＯには、ボリューム領域ＶＳが終了したことを示すデータ等が記録される。
ボリューム領域ＶＳは、リードイン領域ＬＩとリードアウト領域ＬＯの間に位置し、２０４８バイトの論理セクタＬＳが、ｎ＋１個（ｎは０を含む正の整数）一次元配列として記録される。各論理セクタＬＳはセクタナンバー（＃０、＃１、＃２、・・＃ｎ）で区別される。更に、ボリューム領域ＶＳは、ｍ＋１個の論理セクタＬＳ＃０〜ＬＳ＃ｍ（ｍはｎより小さい０を含む正の整数）から形成されるボリューム／ファイル管理領域ＶＦＳと、ｎ−ｍ個の論理セクタＬＳ＃ｍ＋１〜ＬＳ＃ｎから形成されるファイルデータ領域ＦＤＳに分別される。このファイルデータ領域ＦＤＳは、図１に示すマルチメディアビットストリームＭＢＳに相当する。
ボリューム／ファイル管理領域ＶＦＳは、ボリューム領域ＶＳのデータをファイルとして管理する為のファイルシステムであり、ディスク全体の管理に必要なデータの収納に必要なセクタ数ｍ（ｍはｎより小さい自然数）の論理セクタＬＳ＃０からＬＳ＃ｍによって形成されている。このボリューム／ファイル管理領域ＶＦＳには、例えば、ＩＳＯ９６６０、及びＩＳＯ１３３４６などの規格に従って、ファイルデータ領域ＦＤＳ内のファイルの情報が記録される。
ファイルデータ領域ＦＤＳは、ｎ−ｍ個の論理セクタＬＳ＃ｍ＋１〜ＬＳ＃ｎから構成されており、それぞれ、論理セクタの整数倍（２０４８×Ｉ、Ｉは所定の整数）のサイズを有するビデオマネージャＶＭＧと、及びｋ個のビデオタイトルセットＶＴＳ＃１〜ＶＴＳ＃ｋ（ｋは、１００より小さい自然数）を含む。
ビデオマネージャＶＭＧは、ディスク全体のタイトル管理情報を表す情報を保持すると共に、ボリューム全体の再生制御の設定／変更を行うためのメニューであるボリュームメニューを表す情報を有する。ビデオタイトルセットＶＴＳ＃ｋ‘は、単にビデオファイルとも呼び、動画、オーディオ、静止画などのデータからなるタイトルを表す。
図１６は、図２２のビデオタイトルセットＶＴＳの内部構造を示す。ビデオタイトルセットＶＴＳは、ディスク全体の管理情報を表すＶＴＳ情報（ＶＴＳＩ）と、マルチメディアビットストリームのシステムストリームであるＶＴＳタイトル用ＶＯＢＳ（VTSTT_VOBS）に大別される。先ず、以下にＶＴＳ情報について説明した後に、ＶＴＳタイトル用ＶＯＢＳについて説明する。
ＶＴＳ情報は、主に、ＶＴＳＩ管理テーブル（VTSI_MAT）及びＶＴＳＰＧＣ情報テーブル（VTS_PGCIT）を含む。
ＶＴＳＩ管理テーブルは、ビデオタイトルセットＶＴＳの内部構成及び、ビデオタイトルセットＶＴＳ中に含まれる選択可能なオーディオストリームの数、サブピクチャの数およびビデオタイトルセットＶＴＳの格納場所等が記述される。
ＶＴＳＰＧＣ情報管理テーブルは、再生順を制御するプログラムチェーン（ＰＧＣ）を表すｉ個（ｉは自然数）のＰＧＣ情報VTS_PGCI#1〜VTS_PGCI#Iを記録したテーブルである。各エントリーのＰＧＣ情報VTS_PGCI#Iは、プログラムチェーンを表す情報であり、ｊ個（ｊは自然数）のセル再生情報C_PBI#1〜C_PBI#jから成る。各セル再生情報C_PBI#jは、セルの再生順序や再生に関する制御情報を含む。
また、プログラムチェーンＰＧＣとは、タイトルのストーリーを記述する概念であり、セル（後述）の再生順を記述することでタイトルを形成する。上記ＶＴＳ情報は、例えば、メニューに関する情報の場合には、再生開始時に再生装置内のバッファに格納され、再生の途中でリモコンの「メニュー」キーが押下された時点で再生装置により参照され、例えば＃１のトップメニューが表示される。階層メニューの場合は、例えば、プログラムチェーン情報VTS_PGCI#1が「メニュー」キー押下により表示されるメインメニューであり、＃２から＃９がリモコンの「テンキー」の数字に対応するサブメニュー、＃１０以降がさらに下位層のサブメニューというように構成される。また例えば、＃１が「メニュー」キー押下により表示されるトップメニュー、＃２以降が「テン」キーの数字に対応して再生される音声ガイダンスというように構成される。
メニュー自体は、このテーブルに指定される複数のプログラムチェーンで表されるので、階層メニューであろうが、音声ガイダンスを含むメニューであろうが、任意の形態のメニューを構成することを可能にしている。
また例えば、映画の場合には、再生開始時に再生装置内のバッファに格納され、ＰＧＣ内に記述しているセル再生順序を再生装置が参照し、システムストリームを再生する。
ここで言うセルとは、システムストリームの全部または一部であり、再生時のアクセスポイントとして使用される。たとえば、映画の場合は、タイトルを途中で区切っているチャプターとして使用する事ができる。
尚、エントリーされたＰＧＣ情報C_PBI#jの各々は、セル再生処理情報及び、セル情報テーブルを含む。再生処理情報は、再生時間、繰り返し回数などのセルの再生に必要な処理情報から構成される。ブロックモード（ＣＢＭ）、セルブロックタイプ（CBT）、シームレス再生フラグ（SPF）、インターリーブブロック配置フラグ（IAF）、ＳＴＣ再設定フラグ（ＳＴＣＤＦ）、セル再生時間（C_PBTM）、シームレスアングル切替フラグ（SACF）、セル先頭ＶＯＢＵ開始アドレス（C_FVOBU_SA）、及びセル終端ＶＯＢＵ開始アドレス（C_LVOBU_SA）から成る。
ここで言う、シームレス再生とは、ＤＶＤシステムに於いて、映像、音声、副映像等のマルチメディアデータを、各データ及び情報を中断する事無く再生することであり、詳しくは、図２３及び図２４参照して後で説明する。
ブロックモードＣＢＭは複数のセルが１つの機能ブロックを構成しているか否かを示し、機能ブロックを構成する各セルのセル再生情報は、連続的にＰＧＣ情報内に配置され、その先頭に配置されるセル再生情報のＣＢＭには、“ブロックの先頭セル”を示す値、その最後に配置されるセル再生情報のＣＢＭには、“ブロックの最後のセル”を示す値、その間に配置されるセル再生情報のＣＢＭには、“ブロック内のセル”を示す値を示す。
セルブロックタイプCBTは、ブロックモードＣＢＭで示したブロックの種類を示すものである。例えばマルチアングル機能を設定する場合には、各アングルの再生に対応するセル情報を、前述したような機能ブロックとして設定し、さらにそのブロックの種類として、各セルのセル再生情報のCBTに“アングル”を示す値を設定する。
シームレス再生フラグSPFは、該セルが前に再生されるセルまたはセルブロックとシームレスに接続して再生するか否かを示すフラグであり、前セルまたは前セルブロックとシームレスに接続して再生する場合には、該セルのセル再生情報のSPFにはフラグ値１を設定する。そうでない場合には、フラグ値０を設定する。
インターリーブアロケーションフラグＩＡＦは、該セルがインターリーブ領域に配置されているか否かを示すフラグであり、インターリーブ領域に配置されている場合には、該セルのインターリーブアロケーションフラグＩＡＦにはフラグ値１を設定する。そうでない場合には、フラグ値０を設定する。
ＳＴＣ再設定フラグＳＴＣＤＦは、同期をとる際に使用するＳＴＣをセルの再生時に再設定する必要があるかないかの情報であり、再設定が必要な場合にはフラグ値１を設定する。そうでない場合には、フラグ値０を設定する。
シームレスアングルチェンジフラグＳＡＣＦは、該セルがアングル区間に属しかつ、シームレスに切替える場合、該セルのシームレスアングルチェンジフラグＳＡＣＦにはフラグ値１を設定する。そうでない場合には、フラグ値０を設定する。
セル再生時間（C_PBTM）はセルの再生時間をビデオのフレーム数精度で示している。
C_LVOBU_SAは、セル終端ＶＯＢＵ開始アドレスを示し、その値はＶＴＳタイトル用ＶＯＢＳ（VTSTT_VOBS）の先頭セルの論理セクタからの距離をセクタ数で示している。C_FVOBU_SAはセル先頭ＶＯＢＵ開始アドレスを示し、ＶＴＳタイトル用ＶＯＢＳ（VTSTT_VOBS）の先頭セルの論理セクタから距離をセクタ数で示している。
次に、ＶＴＳタイトル用ＶＯＢＳ、つまり、１マルチメディアシステムストリームデータVTSTT_VOBSに付いて説明する。システムストリームデータVTSTT_VOBSは、ビデオオブジェクトＶＯＢと呼ばれるｉ個（ｉは自然数）のシステムストリームＳＳからなる。各ビデオオブジェクトVOB#1〜VOB#iは、少なくとも１つのビデオデータで構成され、場合によっては最大８つのオーディオデータ、最大３２の副映像データまでがインターリーブされて構成される。
各ビデオオブジェクトＶＯＢは、ｑ個（ｑは自然数）のセルＣ＃１〜Ｃ＃ｑから成る。各セルＣは、ｒ個（ｒは自然数）のビデオオブジェクトユニットＶＯＢＵ＃１〜ＶＯＢＵ＃ｒから形成される。
各ＶＯＢＵは、ビデオエンコードのリフレッシュ周期であるＧＯＰの複数個及び、それに相当する時間のオーディオおよびサブピクチャからなる。また、各ＶＯＢＵの先頭には、該ＶＯＢＵの管理情報であるナブパックＮＶを含む。ナブパックＮＶの構成については、図１９を参照して後述する。
図１７に、ビデオゾーンＶＺ（図２２）の内部構造を示す。同図に於いて、ビデオエンコードストリームＳｔ１５は、ビデオエンコーダ３００によってエンコードされた、圧縮された一次元のビデオデータ列である。オーディオエンコードストリームＳｔ１９も、同様に、オーディオエンコーダ７００によってエンコードされた、ステレオの左右の各データが圧縮、及び統合された一次元のオーディオデータ列である。また、オーディオデータとしてサラウンド等のマルチチャネルでもよい。
システムストリームＳｔ３５は、図２２で説明した、２０４８バイトの容量を有する論理セクタＬＳ＃ｎに相当するバイト数を有するパックが一次元に配列された構造を有している。システムストリームＳｔ３５の先頭、つまりＶＯＢＵの先頭には、ナビゲーションパックＮＶと呼ばれる、システムストリーム内のデータ配列等の管理情報を記録した、ストリーム管理パックが配置される。
ビデオエンコードストリームＳｔ１５及びオーディオエンコードストリームＳｔ１９は、それぞれ、システムストリームのパックに対応するバイト数毎にパケット化される。これらパケットは、図中で、Ｖ１、Ｖ２、Ｖ３、Ｖ４、・・、及びＡ１、Ａ２、・・と表現されている。これらパケットは、ビデオ、オーディオ各データ伸長用のデコーダの処理時間及びデコーダのバッファサイズを考慮して適切な順番に図中のシステムストリームＳｔ３５としてインターリーブされ、パケットの配列をなす。例えば、本例ではＶ１、Ｖ２、Ａ１、Ｖ３、Ｖ４、Ａ２の順番に配列されている。
図１７では、一つの動画像データと一つのオーディオデータがインターリーブされた例を示している。しかし、ＤＶＤシステムに於いては、記録再生容量が大幅に拡大され、高速の記録再生が実現され、信号処理用ＬＳＩの性能向上が図られた結果、一つの動画像データに複数のオーディオデータや複数のグラフィックスデータである副映像データが、一つのＭＰＥＧシステムストリームとしてインターリーブされた形態で記録され、再生時に複数のオーディオデータや複数の副映像データから選択的な再生を行うことが可能となる。図１８に、このようなＤＶＤシステムで利用されるシステムストリームの構造を表す。
図１８に於いても、図１７と同様に、パケット化されたビデオエンコードストリームＳｔ１５は、Ｖ１、Ｖ２、Ｖ３、Ｖ４、・・・と表されている。但し、この例では、オーディオエンコードストリームＳｔ１９は、一つでは無く、Ｓｔ１９Ａ、Ｓｔ１９Ｂ、及びＳｔ１９Ｃと３列のオーディオデータ列がソースとして入力されている。更に、副画像データ列であるサブピクチャエンコードストリームＳｔ１７も、Ｓｔ１７Ａ及びＳｔ１７Ｂと二列のデータがソースとして入力されている。これら、合計６列の圧縮データ列が、一つのシステムストリームＳｔ３５にインターリーブされる。
ビデオデータはＭＰＥＧ方式で符号化されており、ＧＯＰという単位が圧縮の単位になっており、ＧＯＰ単位は、標準的にはＮＴＳＣの場合、１５フレームで１ＧＯＰを構成するが、そのフレーム数は可変になっている。インターリーブされたデータ相互の関連などの情報をもつ管理用のデータを表すストリーム管理パックも、ビデオデータを基準とするＧＯＰを単位とする間隔で、インターリーブされる事になり、ＧＯＰを構成するフレーム数が変われば、その間隔も変動する事になる。ＤＶＤでは、その間隔を再生時間長で、０．４秒から１．０秒の範囲内として、その境界はＧＯＰ単位としている。もし、連続する複数のＧＯＰの再生時間が１秒以下であれば、その複数ＧＯＰのビデオデータに対して、管理用のデータパックが１つのストリーム中にインターリーブされる事になる。
ＤＶＤではこのような、管理用データパックをナブパックＮＶと呼び、このナブパックＮＶから、次のナブパックＮＶ直前のパックまでをビデオオブジェクトユニット（以下ＶＯＢＵと呼ぶ）と呼び、一般的に１つのシーンと定義できる１つの連続した再生単位をビデオオブジェクトと呼び（以下ＶＯＢと呼ぶ）、１つ以上のＶＯＢＵから構成される事になる。また、ＶＯＢが複数集まったデータの集合をＶＯＢセット（以下ＶＯＢＳと呼ぶ）と呼ぶ。これらは、ＤＶＤに於いて初めて採用されたデータ形式である。
このように複数のデータ列がインターリーブされる場合、インターリーブされたデータ相互の関連を示す管理用のデータを表すナビゲーションパックＮＶも、所定のパック数単位と呼ばれる単位でインターリーブされる必要がある。ＧＯＰは、通常１２から１５フレームの再生時間に相当する約０．５秒のビデオデータをまとめた単位であり、この時間の再生に要するデータパケット数に一つのストリーム管理パケットがインターリーブされると考えられる。
図１９は、システムストリームを構成する、インターリーブされたビデオデータ、オーディオデータ、副映像データのパックに含まれるストリーム管理情報を示す説明図である。同図のようにシステムストリーム中の各データは、ＭＰＥＧ２に準拠するパケット化およびパック化された形式で記録される。ビデオ、オーディオ、及び副画像データ共、パケットの構造は、基本的に同じである。ＤＶＤシステムに於いては、１パックは、前述の如く２０４８バイトの容量を有し、ＰＥＳパケットと呼ばれる１パケットを含み、パックヘッダＰＫＨ、パケットヘッダＰＴＨ、及びデータ領域から成る。
パックヘッダＰＫＨ中には、そのパックが図２６におけるストリームバッファ２４００からシステムデコーダ２５００に転送されるべき時刻、つまりＡＶ同期再生のための基準時刻情報を示すＳＣＲが記録されている。ＭＰＥＧに於いては、このＳＣＲをデコーダ全体の基準クロックとすることを想定しているが、ＤＶＤなどのディスクメディアの場合には、個々のプレーヤに於いて閉じた時刻管理で良い為、別途にデコーダ全体の時刻の基準となるクロックを設けている。また、パケットヘッダＰＴＨ中には、そのパケットに含まれるビデオデータ或はオーディオデータがデコードされた後に再生出力として出力されるべき時刻を示すＰＴＳや、ビデオストリームがデコードされるべき時刻を示すＤＴＳなどが記録されているＰＴＳおよびＤＴＳは、パケット内にデコード単位であるアクセスユニットの先頭がある場合に置かれ、ＰＴＳはアクセスユニットの表示開始時刻を示し、ＤＴＳはアクセスユニットのデコード開始時刻を示している。また、ＰＴＳとＤＴＳが同時刻の場合、ＤＴＳは省略される。
更に、パケットヘッダＰＴＨには、ビデオデータ列を表すビデオパケットであるか、プライベートパケットであるか、ＭＰＥＧオーディオパケットであるかを示す８ビット長のフィールドであるストリームＩＤが含まれている。
ここで、プライベートパケットとは、ＭＰＥＧ２の規格上その内容を自由に定義してよいデータであり、本実施形態では、プライベートパケット１を使用してオーディオデータ（ＭＰＥＧオーディオ以外）および副映像データを搬送し、プライベートパケット２を使用してＰＣＩパケットおよびＤＳＩパケットを搬送している。
プライベートパケット１およびプライベートパケット２はパケットヘッダ、プライベートデータ領域およびデータ領域からなる。プライベートデータ領域には、記録されているデータがオーディオデータであるか副映像データであるかを示す、８ビット長のフィールドを有するサブストリームＩＤが含まれる。プライベートパケット２で定義されるオーディオデータは、リニアＰＣＭ方式、ＡＣ−３方式それぞれについて＃０〜＃７まで最大８種類が設定可能である。また副映像データは、＃０〜＃３１までの最大３２種類が設定可能である。
データ領域は、ビデオデータの場合はＭＰＥＧ２形式の圧縮データ、オーディオデータの場合はリニアＰＣＭ方式、ＡＣ−３方式又はＭＰＥＧ方式のデータ、副映像データの場合はランレングス符号化により圧縮されたグラフィックスデータなどが記録されるフィールドである。
また、ＭＰＥＧ２ビデオデータは、その圧縮方法として、固定ビットレート方式（以下「ＣＢＲ」とも記す）と可変ビットレート方式（以下「ＶＢＲ」とも記す）が存在する。固定ビットレート方式とは、ビデオストリームが一定レートで連続してビデオバッファへ入力される方式である。これに対して、可変ビットレート方式とは、ビデオストリームが間欠して（断続的に）ビデオバッファへ入力される方式であり、これにより不要な符号量の発生を抑えることが可能である。ＤＶＤでは、固定ビットレート方式および可変ビットレート方式とも使用が可能である。
ＭＰＥＧでは、動画像データは、可変長符号化方式で圧縮されるために、ＧＯＰのデータ量が一定でない。さらに、動画像とオーディオのデコード時間が異なり、光ディスクから読み出した動画像データとオーディオデータの時間関係とデコーダから出力される動画像データとオーディオデータの時間関係が一致しなくなる。このため、動画像とオーディオの時間的な同期をとる方法を、図２６を参照して、後程、詳述するが、一先ず、簡便のため固定ビットレート方式を基に説明をする。
図２０に、ナブパックＮＶの構造を示す。ナブパックＮＶは、ＰＣＩパケットとＤＳＩパケットからなり、先頭にパックヘッダＰＫＨを設けている。ＰＫＨには、前述したとおり、そのパックが図２６におけるストリームバッファ２４００からシステムデコーダ２５００に転送されるべき時刻、つまりＡＶ同期再生のための基準時刻情報、を示すＳＣＲが記録されている。
ＰＣＩパケットは、ＰＣＩ情報（PCI_GI）と非シームレスマルチアングル情報（NSML_AGLI）を有している。
ＰＣＩ情報（PCI_GI）には、該ＶＯＢＵに含まれるビデオデータの先頭ビデオフレーム表示時刻（VOBU_S_PTM）及び最終ビデオフレーム表示時刻（VOBU_E_PTM）をシステムクロック精度（９０ＫＨｚ）で記述する。
非シームレスマルチアングル情報（NSML_AGLI）には、アングルを切り替えた場合の読み出し開始アドレスをＶＯＢ先頭からのセクタ数として記述する。この場合、アングル数は９以下であるため、領域として９アングル分のアドレス記述領域（NSML_AGL_C1_DSTA〜NSML_AGL_C9_DSTA）を有す。
ＤＳＩパケットにはＤＳＩ情報（DSI_GI）、シームレス再生情報（SML_PBI）およびシームレスマルチアングル再生情報（SML_AGLI）を有している。
ＤＳＩ情報（DSI_GI）として該ＶＯＢＵ内の最終パックアドレス（VOBU_EA）をＶＯＢＵ先頭からのセクタ数として記述する。
シームレス再生に関しては後述するが、分岐あるいは結合するタイトルをシームレスに再生するために、連続読み出し単位をＩＬＶＵ（Interleaved Unit）として、システムストリームレベルでインターリーブ（多重化）する必要がある。複数のシステムストリームがＩＬＶＵを最小単位としてインターリーブ処理されている区間をインターリーブブロックと定義する。
このようにＩＬＶＵを最小単位としてインターリーブされたストリームをシームレスに再生するために、シームレス再生情報：Seamless Playback Information（SML_PBI）を記述する。シームレス再生情報（SML_PBI）には、該ＶＯＢＵがインターリーブブロックかどうかを示すインターリーブユニットフラグ（ILVU flag）を記述する。このフラグはインターリーブ領域に（後述）に存在するかを示すものであり、インターリーブ領域に存在する場合"1"を設定する。そうでない場合には、フラグ値０を設定する。
また、該ＶＯＢＵがインターリーブ領域に存在する場合、該ＶＯＢＵがＩＬＶＵの最終ＶＯＢＵかを示すユニットエンドフラグ（UNIT END Flag）を記述する。ＩＬＶＵは、連続読み出し単位であるので、現在読み出しているＶＯＢＵが、ＩＬＶＵの最後のＶＯＢＵであれば"1"を設定する。そうでない場合には、フラグ値０を設定する。
該ＶＯＢＵがインターリーブ領域に存在する場合、該ＶＯＢＵが属するＩＬＶＵの最終パックのアドレスを示すＩＬＶＵ最終パックアドレス（ILVU_EA）を記述する。ここでアドレスとして、該ＶＯＢＵのＮＶからのセクタ数で記述する。
また、該ＶＯＢＵがインターリーブ領域に存在する場合、次のＩＬＶＵの開始アドレス（NT_ILVU_SA）を記述する。ここでアドレスとして、該ＶＯＢＵのＮＶからのセクタ数で記述する。
また、２つのシステムストリームをシームレスに接続する場合に於いて、特に接続前と接続後のオーディオが連続していない場合（異なるオーディオの場合等）、接続後のビデオとオーディオの同期をとるためにオーディオを一時停止（ポーズ）する必要がある。例えば、ＮＴＳＣの場合、ビデオのフレーム周期は約33.33msecであり、オーディオＡＣ３のフレーム周期は32msecである。
このためにオーディオを停止する時間および期間情報を示すオーディオ再生停止時刻１（VOBU_A_STP_PTM1）、オーディオ再生停止時刻２（VOBU_A_STP_PTM2）、オーディオ再生停止期間１（VOB_A_GAP_LEN1）、オーディオ再生停止期間２：Audio Gap Length 2 inＶＯＢ（VOB_A_GAP_LEN2）を記述する。この時間情報はシステムクロック精度（９０ＫＨｚ）で記述される。
また、シームレスマルチアングル再生情報（SML_AGLI）として、アングルを切り替えた場合の読み出し開始アドレスを記述する。このフィールドはシームレスマルチアングルの場合に有効なフィールドである。このアドレスは該ＶＯＢＵのＮＶからのセクタ数で記述される。また、アングル数は９以下であるため、領域として９アングル分のアドレス記述領域：（SML_AGL_C1_DSTA〜SML_AGL_C9_DSTA）を有す。
ＤＶＤエンコーダ
図２５に、本発明に掛かるマルチメディアビットストリームオーサリングシステムを上述のＤＶＤシステムに適用した場合の、オーサリングエンコーダＥＣＤの一実施形態を示す。ＤＶＤシステムに適用したオーサリングエンコーダＥＣＤ（以降、ＤＶＤエンコーダと呼称する）は、図２に示したオーサリングエンコーダＥＣに、非常に類似した構成になっている。
ＤＶＤオーサリングエンコーダＥＣＤは、基本的には、オーサリングエンコーダＥＣのビデオゾーンフォーマッタ１３００が、ＶＯＢバッファ１０００とフォーマッタ１１００にとって変わられた構造を有している。言うまでもなく、本発明のエンコーダによってエンコードされたビットストリームは、ＤＶＤ媒体Ｍに記録される。以下に、ＤＶＤオーサリングエンコーダＥＣＤの動作をオーサリングエンコーダＥＣと比較しながら説明する。
ＤＶＤオーサリングエンコーダＥＣＤに於いても、オーサリングエンコーダＥＣと同様に、編集情報作成部１００から入力されたユーザーの編集指示内容を表すシナリオデータＳｔ７に基づいて、エンコードシステム制御部２００が、各制御信号Ｓｔ９、Ｓｔ１１、Ｓｔ１３、Ｓｔ２１、Ｓｔ２３、Ｓｔ２５、Ｓｔ３３、及びＳｔ３９を生成して、ビデオエンコーダ３００、サブピクチャエンコーダ５００、及びオーディオエンコーダ７００を制御する。
尚、ＤＶＤシステムに於ける編集指示内容とは、図２５を参照して説明したオーサリングシステムに於ける編集指示内容と同様に、複数のタイトル内容を含む各ソースデータの全部或いは、其々に対して、所定時間毎に各ソースデータの内容を一つ以上選択し、それらの選択された内容を、所定の方法で接続再生するような情報を含無と共に、更に、以下の情報を含む。つまり、マルチタイトルソースストリームを、所定時間単位毎に分割した編集単位に含まれるストリーム数、各ストリーム内のオーディオ数やサブピクチャ数及びその表示期間等のデータ、パレンタルあるいはマルチアングルなど複数ストリームから選択するか否か、設定されたマルチアングル区間でのシーン間の切り替え接続方法などの情報を含む。
尚、ＤＶＤシステムに於いては、シナリオデータＳｔ７には、メディアソースストリームをエンコードするために必要な、ＶＯＢ単位での制御内容、つまり、マルチアングルであるかどうか、パレンタル制御を可能とするマルチレイティッドタイトルの生成であるか、後述するマルチアングルやパレンタル制御の場合のインターリーブとディスク容量を考慮した各ストリームのエンコード時のビットレート、各制御の開始時間と終了時間、前後のストリームとシームレス接続するか否かの内容が含まれる。エンコードシステム制御部２００は、シナリオデータＳｔ７から情報を抽出して、エンコード制御に必要な、エンコード情報テーブル及びエンコードパラメータを生成する。エンコード情報テーブル及びエンコードパラメータについては、後程、図２７、図２８、及び図２９を参照して詳述する。
システムストリームエンコードパラメータデータ及びシステムエンコード開始終了タイミングの信号Ｓｔ３３には上述の情報をＤＶＤシステムに適用してＶＯＢ生成情報を含む。ＶＯＢ生成情報として、前後の接続条件、オーディオ数、オーディオのエンコード情報、オーディオＩＤ、サブピクチャ数、サブピクチャＩＤ、ビデオ表示を開始する時刻情報（ＶＰＴＳ）、オーディオ再生を開始する時刻情報（ＡＰＴＳ）等がある。更に、マルチメディア尾ビットストリームＭＢＳのフォーマットパラメータデータ及びフォーマット開始終了タイミングの信号Ｓｔ３９は、再生制御情報及びインターリーブ情報を含む。
ビデオエンコーダ３００は、ビデオエンコードのためのエンコードパラメータ信号及びエンコード開始終了タイミングの信号Ｓｔ９に基づいて、ビデオストリームＳｔ１の所定の部分をエンコードして、ＩＳＯ１３８１８に規定されるＭＰＥＧ２ビデオ規格に準ずるエレメンタリーストリームを生成する。そして、このエレメンタリーストリームをビデオエンコードストリームＳｔ１５として、ビデオストリームバッファ４００に出力する。
ここで、ビデオエンコーダ３００に於いてＩＳＯ１３８１８に規定されるＭＰＥＧ２ビデオ規格に準ずるエレメンタリストリームを生成するが、ビデオエンコードパラメータデータを含む信号Ｓｔ９に基に、エンコードパラメータとして、エンコード開始終了タイミング、ビットレート、エンコード開始終了時にエンコード条件、素材の種類として、ＮＴＳＣ信号またはＰＡＬ信号あるいはテレシネ素材であるかなどのパラメータ及びオープンＧＯＰ或いはクローズドＧＯＰのエンコードモードの設定がエンコードパラメータとしてそれぞれ入力される。
ＭＰＥＧ２の符号化方式は、基本的にフレーム間の相関を利用する符号化である。つまり、符号化対象フレームの前後のフレームを参照して符号化を行う。しかし、エラー伝播およびストリーム途中からのアクセス性の面で、他のフレームを参照しない（イントラフレーム）フレームを挿入する。このイントラフレームを少なくとも１フレームを有する符号化処理単位をＧＯＰと呼ぶ。
このＧＯＰに於いて、完全に該ＧＯＰ内で符号化が閉じているＧＯＰがクローズドＧＯＰであり、前のＧＯＰ内のフレームを参照するフレームが該ＧＯＰ内に存在する場合、該ＧＯＰをオープンＧＯＰと呼ぶ。
従って、クローズドＧＯＰを再生する場合は、該ＧＯＰのみで再生できるが、オープンＧＯＰを再生する場合は、一般的に１つ前のＧＯＰが必要である。
また、ＧＯＰの単位は、アクセス単位として使用する場合が多い。例えば、タイトルの途中からの再生する場合の再生開始点、映像の切り替わり点、あるいは早送りなどの特殊再生時には、ＧＯＰ内のフレーム内符号化フレームであるいフレームのみをＧＯＰ単位で再生する事により、高速再生を実現する。
サブピクチャエンコーダ５００は、サブピクチャストリームエンコード信号Ｓｔ１１に基づいて、サブピクチャストリームＳｔ３の所定の部分をエンコードして、ビットマップデータの可変長符号化データを生成する。そして、この可変長符号化データをサブピクチャエンコードストリームＳｔ１７として、サブピクチャストリームバッファ６００に出力する。
オーディオエンコーダ７００は、オーディオエンコード信号Ｓｔ１３に基づいて、オーディオストリームＳｔ５の所定の部分をエンコードして、オーディオエンコードデータを生成する。このオーディオエンコードデータとしては、ＩＳＯ１１１７２に規定されるＭＰＥＧ１オーディオ規格及びＩＳＯ１３８１８に規定されるＭＰＥＧ２オーディオ規格に基づくデータ、また、ＡＣ−３オーディオデータ、及びＰＣＭ（ＬＰＣＭ）データ等がある。これらのオーディオデータをエンコードする方法及び装置は公知である。
ビデオストリームバッファ４００は、ビデオエンコーダ３００に接続されており、ビデオエンコーダ３００から出力されるビデオエンコードストリームＳｔ１５を保存する。ビデオストリームバッファ４００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２１の入力に基づいて、保存しているビデオエンコードストリームＳｔ１５を、調時ビデオエンコードストリームＳｔ２７として出力する。
同様に、サブピクチャストリームバッファ６００は、サブピクチャエンコーダ５００に接続されており、サブピクチャエンコーダ５００から出力されるサブピクチャエンコードストリームＳｔ１７を保存する。サブピクチャストリームバッファ６００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２３の入力に基づいて、保存しているサブピクチャエンコードストリームＳｔ１７を、調時サブピクチャエンコードストリームＳｔ２９として出力する。
また、オーディオストリームバッファ８００は、オーディオエンコーダ７００に接続されており、オーディオエンコーダ７００から出力されるオーディオエンコードストリームＳｔ１９を保存する。オーディオストリームバッファ８００は更に、エンコードシステム制御部２００に接続されて、タイミング信号Ｓｔ２５の入力に基づいて、保存しているオーディオエンコードストリームＳｔ１９を、調時オーディオエンコードストリームＳｔ３１として出力する。
システムエンコーダ９００は、ビデオストリームバッファ４００、サブピクチャストリームバッファ６００、及びオーディオストリームバッファ８００に接続されており、調時ビデオエンコードストリームＳｔ２７、調時サブピクチャエンコードストリームＳｔ２９、及び調時オーディオエンコードＳｔ３１が入力される。システムエンコーダ９００は、またエンコードシステム制御部２００に接続されており、システムエンコードのためのエンコードパラメータデータを含むＳｔ３３が入力される。
システムエンコーダ９００は、エンコードパラメータデータ及びエンコード開始終了タイミング信号Ｓｔ３３に基づいて、各調時ストリームＳｔ２７、Ｓｔ２９、及びＳｔ３１に多重化（マルチプレクス）処理を施して、最小タイトル編集単位（ＶＯＢｓ）Ｓｔ３５を生成する。
ＶＯＢバッファ１０００はシステムエンコーダ９００に於いて生成されたＶＯＢを一時格納するバッファ領域であり、フォーマッタ１１００では、Ｓｔ３９に従ってＶＯＢバッファ１１００から調時必要なＶＯＢを読み出し１ビデオゾーンＶＺを生成する。また、同フォーマッタ１１００に於いてはファイルシステム（ＶＦＳ）を付加してＳｔ４３を生成する。
このユーザの要望シナリオの内容に編集された、ストリームＳｔ４３は、記録部１２００に転送される。記録部１２００は、編集マルチメディアビットストリームＭＢＳを記録媒体Ｍに応じた形式のデータＳｔ４３に加工して、記録媒体Ｍに記録する。
ＤＶＤデコーダ
次に、図２６を参照して、本発明に掛かるマルチメディアビットストリームオーサリングシステムを上述のＤＶＤシステムに適用した場合の、オーサリングデコーダＤＣの一実施形態を示す。ＤＶＤシステムに適用したオーサリングエンコーダＤＣＤ（以降、ＤＶＤデコーダと呼称する）は、本発明にかかるＤＶＤエンコーダＥＣＤによって、編集されたマルチメディアビットストリームＭＢＳをデコードして、ユーザの要望のシナリオに沿って各タイトルの内容を展開する。
なお、本実施形態に於いては、ＤＶＤエンコーダＥＣＤによってエンコードされたマルチメディアビットストリームＳｔ４５は、記録媒体Ｍに記録されている。ＤＶＤオーサリングデコーダＤＣＤの基本的な構成は図３に示すオーサリングデコーダＤＣと同一であり、ビデオデコーダ３８００がビデオデコーダ３８０１に替わると共に、ビデオデコーダ３８０１と合成部３５００の間にリオーダバッファ３３００と切替器３４００が挿入されている。なお、切替器３４００は同期制御部２９００に接続されて、切替指示信号Ｓｔ５１０３の入力を受けている。
ＤＶＤオーサリングデコーダＤＣＤは、マルチメディアビットストリーム再生部２０００、シナリオ選択部２１００、デコードシステム制御部２３００、ストリームバッファ２４００、システムデコーダ２５００、ビデオバッファ２６００、サブピクチャバッファ２７００、オーディオバッファ２８００、同期制御部２９００、ビデオデコーダ３８０１、リオーダバッファ３３００、サブピクチャデコーダ３１００、オーディオデコーダ３２００、セレクタ３４００、合成部３５００、ビデオデータ出力端子３６００、及びオーディオデータ出力端子３７００から構成されている。
マルチメディアビットストリーム再生部２０００は、記録媒体Ｍを駆動させる記録媒体駆動ユニット２００４、記録媒体Ｍに記録されている情報を読み取り二値の読み取り信号Ｓｔ５７を生成する読取ヘッドユニット２００６、読み取り信号ＳＴ５７に種々の処理を施して再生ビットストリームＳｔ６１を生成する信号処理部２００８、及び機構制御部２００２から構成される。機構制御部２００２は、デコードシステム制御部２３００に接続されて、マルチメディアビットストリーム再生指示信号Ｓｔ５３を受けて、それぞれ記録媒体駆動ユニット（モータ）２００４及び信号処理部２００８をそれぞれ制御する再生制御信号Ｓｔ５５及びＳｔ５９を生成する。
デコーダＤＣは、オーサリングエンコーダＥＣで編集されたマルチメディアタイトルの映像、サブピクチャ、及び音声に関する、ユーザの所望の部分が再生されるように、対応するシナリオを選択して再生するように、オーサリングデコーダＤＣに指示を与えるシナリオデータとして出力できるシナリオ選択部２１００を備えている。
シナリオ選択部２１００は、好ましくは、キーボード及びＣＰＵ等で構成される。ユーザーは、オーサリングエンコーダＥＣで入力されたシナリオの内容に基づいて、所望のシナリオをキーボード部を操作して入力する。ＣＰＵは、キーボード入力に基づいて、選択されたシナリオを指示するシナリオ選択データＳｔ５１を生成する。シナリオ選択部２１００は、例えば、赤外線通信装置等によって、デコードシステム制御部２３００に接続されて、生成したシナリオ選択信号Ｓｔ５１をデコードシステム制御部２３００に入力する。
ストリームバッファ２４００は所定のバッファ容量を有し、マルチメディアビットストリーム再生部２０００から入力される再生信号ビットストリームＳｔ６１を一時的に保存すると共に、ボリュームファイルストラクチャＶＦＳ、各パックに存在する同期初期値データ（SCR）、及びナブパックＮＶ存在するＶＯＢＵ制御情報（DSI）を抽出してストリーム制御データＳｔ６３を生成する。
デコードシステム制御部２３００は、デコードシステム制御部２３００で生成されたシナリオ選択データＳｔ５１に基づいてマルチメディアビットストリーム再生部２０００の動作を制御する再生指示信号Ｓｔ５３を生成する。デコードシステム制御部２３００は、更に、シナリオデータＳｔ５３からユーザの再生指示情報を抽出して、デコード制御に必要な、デコード情報テーブルを生成する。デコード情報テーブルについては、後程、図４７、及び図４８を参照して詳述する。更に、デコードシステム制御部２３００は、ストリーム再生データＳｔ６３中のファイルデータ領域ＦＤＳ情報から、ビデオマネージャＶＭＧ、ＶＴＳ情報ＶＴＳＩ、ＰＧＣ情報C_PBI#j、セル再生時間C_PBTM等の光ディスクＭに記録されたタイトル情報を抽出してタイトル情報Ｓｔ２００を生成する。
ここで、ストリーム制御データＳｔ６３は図１９におけるパック単位に生成される。ストリームバッファ２４００は、デコードシステム制御部２３００に接続されており、生成したストリーム制御データＳｔ６３をデコードシステム制御部２３００に供給する。
同期制御部２９００は、デコードシステム制御部２３００に接続されて、同期再生データＳｔ８１に含まれる同期初期値データ（SCR）を受け取り、内部のシステムクロック（STC）セットし、リセットされたシステムクロックＳｔ７９をデコードシステム制御部２３００に供給する。
デコードシステム制御部２３００は、システムクロックＳｔ７９に基づいて、所定の間隔でストリーム読出信号Ｓｔ６５を生成し、ストリームバッファ２４００に入力する。この場合の読み出し単位はパックである。
ここでストリーム読み出し信号Ｓｔ６５の生成方法について説明する。デコードシステム制御部２３００では、ストリームバッファ２４００から抽出したストリーム制御データ中のＳＣＲと、同期制御部２９００からのシステムクロックＳｔ７９を比較し、Ｓｔ６３中のＳＣＲよりもシステムクロックＳｔ７９が大きくなった時点で読み出し要求信号Ｓｔ６５を生成する。このような制御をパック単位に行うことで、パック転送を制御する。
デコードシステム制御部２３００は、更に、シナリオ選択データＳｔ５１に基づき、選択されたシナリオに対応するビデオ、サブピクチャ、オーディオの各ストリームのＩＤを示すデコードストリーム指示信号Ｓｔ６９を生成して、システムデコーダ２５００に出力する。
タイトル中に、例えば日本語、英語、フランス語等、言語別のオーディオ等の複数のオーディオデータ、及び、日本語字幕、英語字幕、フランス語字幕等、言語別の字幕等の複数のサブピクチャデータが存在する場合、それぞれにＩＤが付与されている。つまり、図１９を参照して説明したように、ビデオデータ及び、ＭＰＥＧオーディオデータには、ストリームＩＤが付与され、サブピクチャデータ、ＡＣ３方式のオーディオデータ、リニアＰＣＭ及びナブパックＮＶ情報には、サブストリームＩＤが付与されている。
ユーザはＩＤを意識することはないが、どの言語のオーディオあるいは字幕を選択するかをシナリオ選択部２１００で選択する。英語のオーディオを選択すれば、シナリオ選択データＳｔ５１として英語のオーディオに対応するＩＤがデーコードシステム制御部２３００に搬送される。さらに、デコードシステム制御部２３００はシステムデコーダ２５００にそのＩＤをＳｔ６９上に搬送して渡す。
システムデコーダ２５００は、ストリームバッファ２４００から入力されてくるビデオ、サブピクチャ、及びオーディオのストリームを、デコード指示信号Ｓｔ６９の指示に基づいて、それぞれ、ビデオエンコードストリームＳｔ７１としてビデオバッファ２６００に、サブピクチャエンコードストリームＳｔ７３としてサブピクチャバッファ２７００に、及びオーディオエンコードストリームＳｔ７５としてオーディオバッファ２８００に出力する。つまり、システムデコーダ２５００は、シナリオ選択部２１００より入力される、ストリームのＩＤと、ストリームバッファ２４００から転送されるパックのＩＤが一致した場合にそれぞれのバッファ（ビデオバッファ２６００、サブピクチャバッファ２７００、オーディオバッファ２８００）に該パックを転送する。
システムデコーダ２５００は、各ストリームＳｔ６７の各最小制御単位での再生開始時間（PTS）及び再生終了時間(DTS）を検出し、時間情報信号Ｓｔ７７を生成する。この時間情報信号Ｓｔ７７は、デコードシステム制御部２３００を経由して、Ｓｔ８１として同期制御部２９００に入力される。
同期制御部２９００は、この時間情報信号Ｓｔ８１に基づいて、各ストリームについて、それぞれがデコード後に所定の順番になるようなデコード開始タイミングを決定する。同期制御部２９００は、このデコードタイミングに基づいて、ビデオストリームデコード開始信号Ｓｔ８９を生成し、ビデオデコーダ３８０１に入力する。同様に、同期制御部２９００は、サブピクチャデコード開始信号Ｓｔ９１及びオーディオエンコード開始信号Ｓｔ９３を生成し、サブピクチャデコーダ３１００及びオーディオデコーダ３２００にそれぞれ入力する。
ビデオデコーダ３８０１は、ビデオストリームデコード開始信号Ｓｔ８９に基づいて、ビデオ出力要求信号Ｓｔ８４を生成して、ビデオバッファ２６００に対して出力する。ビデオバッファ２６００はビデオ出力要求信号Ｓｔ８４を受けて、ビデオストリームＳｔ８３をビデオデコーダ３８０１に出力する。ビデオデコーダ３８０１は、ビデオストリームＳｔ８３に含まれる再生時間情報を検出し、再生時間に相当する量のビデオストリームＳｔ８３の入力を受けた時点で、ビデオ出力要求信号Ｓｔ８４を無効にする。このようにして、所定再生時間に相当するビデオストリームがビデオデコーダ３８０１でデコードされて、再生されたビデオ信号Ｓｔ９５がリオーダーバッファ３３００と切替器３４００に出力される。
ビデオエンコードストリームは、フレーム間相関を利用した符号化であるため、フレーム単位でみた場合、表示順と符号化ストリーム順が一致していない。従って、デコード順に表示できるわけではない。そのため、デコードを終了したクレームを一時リオーダバッファ３３００に格納する。同期制御部２９００に於いて表示順になるようにＳｔ１０３を制御しビデオデコーダ３８０１の出力Ｓｔ９５と、リオーダバッファＳｔ９７の出力を切り替え、合成部３５００に出力する。
同様に、サブピクチャデコーダ３１００は、サブピクチャデコード開始信号Ｓｔ９１に基づいて、サブピクチャ出力要求信号Ｓｔ８６を生成し、サブピクチャバッファ２７００に供給する。サブピクチャバッファ２７００は、ビデオ出力要求信号Ｓｔ８４を受けて、サブピクチャストリームＳｔ８５をサブピクチャデコーダ３１００に出力する。サブピクチャデコーダ３１００は、サブピクチャストリームＳｔ８５に含まれる再生時間情報に基づいて、所定の再生時間に相当する量のサブピクチャストリームＳｔ８５をデコードして、サブピクチャ信号Ｓｔ９９を再生して、合成部３５００に出力する。
合成部３５００は、セレクタ３４００の出力及びサブピクチャ信号Ｓｔ９９を重畳させて、映像信号Ｓｔ１０５を生成し、ビデオ出力端子３６００に出力する。
オーディオデコーダ３２００は、オーディオデコード開始信号Ｓｔ９３に基づいて、オーディオ出力要求信号Ｓｔ８８を生成し、オーディオバッファ２８００に供給する。オーディオバッファ２８００は、オーディオ出力要求信号Ｓｔ８８を受けて、オーディオストリームＳｔ８７をオーディオデコーダ３２００に出力する。オーディオデコーダ３２００は、オーディオストリームＳｔ８７に含まれる再生時間情報に基づいて、所定の再生時間に相当する量のオーディオストリームＳｔ８７をデコードして、オーディオ出力端子３７００に出力する。
このようにして、ユーザのシナリオ選択に応答して、リアルタイムにユーザの要望するマルチメディアビットストリームＭＢＳを再生する事ができる。つまり、ユーザが異なるシナリオを選択する度に、オーサリングデコーダＤＣＤはその選択されたシナリオに対応するマルチメディアビットストリームＭＢＳを再生することによって、ユーザの要望するタイトル内容を再生することができる。
尚、デコードシステム制御部２３００は、前述の赤外線通信装置等を経由して、シナリオ選択部２１００にタイトル情報信号Ｓｔ２００を供給してもよい。シナリオ選択部２１００は、タイトル情報信号Ｓｔ２００に含まれるストリーム再生データＳｔ６３中のファイルデータ領域ＦＤＳ情報から、光ディスクＭに記録されたタイトル情報を抽出して、内蔵ディスプレイに表示することにより、インタラクティブなユーザによるシナリオ選択を可能とする。
また、上述の例では、ストリームバッファ２４００、ビデオバッファ２６００、サブピクチャバッファ２７００、及びオーディオバッファ２８００、及びリオーダバッファ３３００は、機能的に異なるので、それぞれ別のバッファとして表されている。しかし、これらのバッファに於いて要求される読込み及び読み出し速度の数倍の動作速度を有するバッファメモリを時分割で使用することにより、一つのバッファメモリをこれら個別のバッファとして機能させることができる。
マルチシーン
図２１を用いて、本発明に於けるマルチシーン制御の概念を説明する。既に、上述したように、各タイトル間での共通のデータからなる基本シーン区間と、其々の要求に即した異なるシーン群からなるマルチシーン区間とで構成される。同図に於いて、シーン１、シーン５、及びシーン８が共通シーンである。共通シーン１とシーン５の間のアングルシーン及び、共通シーン５とシーン８の間のパレンタルシーンがマルチシーン区間である。マルチアングル区間に於いては、異なるアングル、つまりアングル１、アングル２、及びアングル３、から撮影されたシーンの何れかを、再生中に動的に選択再生できる。パレンタル区間に於いては、異なる内容のデータに対応するシーン６及びシーン７の何れかをあらかじめ静的に選択再生できる。
このようなマルチシーン区間のどのシーンを選択して再生するかというシナリオ内容を、ユーザはシナリオ選択部２１００にて入力してシナリオ選択データＳｔ５１として生成する。図中に於いて、シナリオ１では、任意のアングルシーンを自由に選択し、パレンタル区間では予め選択したシーン６を再生することを表している。同様に、シナリオ２では、アングル区間では、自由にシーンを選択でき、パレンタル区間では、シーン７が予め選択されていることを表している。
以下に、図２１で示したマルチシーンをＤＶＤのデータ構造を用いた場合の、ＰＧＣ情報VTS_PGCIについて、図３０、及び図３１を参照して説明する。
図３０には、図２１に示したユーザ指示のシナリオを図１６のＤＶＤデータ構造内のビデオタイトルセットの内部構造を表すＶＴＳＩデータ構造で記述した場合について示す。図において、図２１のシナリオ１、シナリオ２は、図１６のＶＴＳＩ中のプログラムチェーン情報ＶＴＳ＿ＰＧＣＩＴ内の２つプログラムチェーンVTS_PGCI#1とVTS_PGCI#2として記述される。すなわち、シナリオ１を記述するVTS_PGCI#1は、シーン１に相当するセル再生情報Ｃ＿ＰＢＩ＃１、マルチアングルシーンに相当するマルチアングルセルブロック内のセル再生情報Ｃ＿ＰＢＩ＃２，セル再生情報Ｃ＿ＰＢＩ＃３，セル再生情報Ｃ＿ＰＢＩ＃４、シーン５に相当するセル再生情報Ｃ＿ＰＢＩ＃５、シーン６に相当するセル再生情報Ｃ＿ＰＢＩ＃６、シーン８に相当するＣ＿ＰＢＩ＃７からなる。
また、シナリオ２を記述するVTS_PGC#2は、シーン１に相当するセル再生情報Ｃ＿ＰＢＩ＃１、マルチアングルシーンに相当するマルチアングルセルブロック内のセル再生情報Ｃ＿ＰＢＩ＃２，セル再生情報Ｃ＿ＰＢＩ＃３，セル再生情報Ｃ＿ＰＢＩ＃４、シーン５に相当するセル再生情報Ｃ＿ＰＢＩ＃５、シーン７に相当するセル再生情報Ｃ＿ＰＢＩ＃６、シーン８に相当するＣ＿ＰＢＩ＃７からなる。ＤＶＤデータ構造では、シナリオの１つの再生制御の単位であるシーンをセルというＤＶＤデータ構造上の単位に置き換えて記述し、ユーザの指示するシナリオをＤＶＤ上で実現している。
図３１には、図２１に示したユーザ指示のシナリオを図１６のＤＶＤデータ構造内のビデオタイトルセット用のマルチメディアビットストリームであるＶＯＢデータ構造ＶＴＳＴＴ＿ＶＯＢＳで記述した場合について示す。
図において、図２１のシナリオ１とシナリオ２の２つのシナリオは、１つのタイトル用ＶＯＢデータを共通に使用する事になる。各シナリオで共有する単独のシーンはシーン１に相当するＶＯＢ＃１、シーン５に相当するＶＯＢ＃５、シーン８に相当するＶＯＢ＃８は、単独のＶＯＢとして、インターリーブブロックではない部分、すなわち連続ブロックに配置される。
シナリオ１とシナリオ２で共有するマルチアングルシーンにおいて、それぞれアングル１はＶＯＢ＃２、アングル２はＶＯＢ＃３、アングル３はＶＯＢ＃４で構成、つまり１アングルを１ＶＯＢで構成し、さらに各アングル間の切り替えと各アングルのシームレス再生のために、インターリーブブロックとする。
また、シナリオ１とシナリオ２で固有なシーンであるシーン６とシーン７は、各シーンのシームレス再生はもちろんの事、前後の共通シーンとシームレスに接続再生するために、インターリーブブロックとする。
以上のように、図２１で示したユーザ指示のシナリオは、ＤＶＤデータ構造において、図３０に示すビデオタイトルセットの再生制御情報と図３１に示すタイトル再生用ＶＯＢデータ構造で実現できる。
シームレス
上述のＤＶＤシステムのデータ構造に関連して述べたシームレス再生について説明する。シームレス再生とは、共通シーン区間同士で、共通シーン区間とマルチシーン区間とで、及びマルチシーン区間同士で、映像、音声、副映像等のマルチメディアデータを、接続して再生する際に、各データ及び情報を中断する事無く再生することである。このデータ及び情報再生の中断の要因としては、ハードウェアに関連するものとして、デコーダに於いて、ソースデータ入力される速度と、入力されたソースデータをデコードする速度のバランスがくずれる、いわゆるデコーダのアンダーフローと呼ばれるものがある。
更に、再生されるデータの特質に関するものとして、再生データが音声のように、その内容或いは情報をユーザが理解する為には、一定時間単位以上の連続再生を要求されるデータの再生に関して、その要求される連続再生時間を確保出来ない場合に情報の連続性が失われるものがある。このような情報の連続性を確保して再生する事を連続情報再生と、更にシームレス情報再生と呼ぶ。また、情報の連続性を確保出来ない再生を非連続情報再生と呼び、更に非シームレス情報再生と呼ぶ。尚、言うまでまでもなく連続情報再生と非連続情報再生は、それぞれシームレス及び非シームレス再生である。
上述の如く、シームレス再生には、バッファのアンダーフロー等によって物理的にデータ再生に空白あるいは中断の発生を防ぐシームレスデータ再生と、データ再生自体には中断は無いものの、ユーザーが再生データから情報を認識する際に情報の中断を感じるのを防ぐシームレス情報再生と定義する。
シームレスの詳細
なお、このようにシームレス再生を可能にする具体的な方法については、図２３及び図２４参照して後で詳しく説明する。
インターリーブ
上述のＤＶＤデータのシステムストリームをオーサリングエンコーダＥＣを用いて、ＤＶＤ媒体上の映画のようなタイトルを記録する。しかし、同一の映画を複数の異なる文化圏或いは国に於いても利用できるような形態で提供するには、台詞を各国の言語毎に記録するのは当然として、さらに各文化圏の倫理的要求に応じて内容を編集して記録する必要がある。このような場合、元のタイトルから編集された複数のタイトルを１枚の媒体に記録するには、ＤＶＤという大容量システムに於いてさえも、ビットレートを落とさなければならず、高画質という要求が満たせなくなってしまう。そこで、共通部分を複数のタイトルで共有し、異なる部分のみをそれぞれのタイトル毎に記録するという方法をとる。これにより、ビットレートをおとさず、１枚の光ディスクに、国別あるいは文化圏別の複数のタイトルを記録する事ができる。
１枚の光ディスクに記録されるタイトルは、図２１に示したように、パレンタルロック制御やマルチアングル制御を可能にするために、共通部分（シーン）と非共通部分（シーン）のを有するマルチシーン区間を有する。
パレンタルロック制御の場合は、一つのタイトル中に、性的シーン、暴力的シーン等の子供に相応しくない所謂成人向けシーンが含まれている場合、このタイトルは共通のシーンと、成人向けシーンと、未成年向けシーンから構成される。このようなタイトルストリームは、成人向けシーンと非成人向けシーンを、共通シーン間に、設けたマルチシーン区間として配置して実現する。
また、マルチアングル制御を通常の単一アングルタイトル内に実現する場合には、それぞれ所定のカメラアングルで対象物を撮影して得られる複数のマルチメディアシーンをマルチシーン区間として、共通シーン間に配置する事で実現する。ここで、各シーンは異なるアングルで撮影されたシーンの例を上げている、同一のアングルであるが、異なる時間に撮影されたシーンであっても良いし、またコンピュータグラフィックス等のデータであっても良い。
複数のタイトルでデータを共有すると、必然的に、データの共有部分から非共有部分への光ビームＬＳを移動させるために、光学ピックアップを光ディスク（ＲＣ１）上の異なる位置に移動することになる。この移動に要する時間が原因となって音や映像を途切れずに再生する事、すなわちシームレス再生が困難であるという問題が生じる。このような問題点を解決するするには、理論的には最悪のアクセス時間に相当する時間分のトラックバッファ（ストリームバッファ２４００）を備えれば良い。
一般に、光ディスクに記録されているデータは、光ピックアップにより読み取られ、所定の信号処理が施された後、データとしてトラックバッファに一旦蓄積される。蓄積されたデータは、その後デコードされて、ビデオデータあるいはオーディオデータとして再生される。
インターリーブの定義
前述のような、あるシーンをカットする事や、複数のシーンから選択を可能にするには、記録媒体のトラック上に、各シーンに属するデータ単位で、互いに連続した配置で記録されるため、共通シーンデータと選択シーンデータとの間に非選択シーンのデータが割り込んで記録される事態が必然的におこる。
このような場合、記録されている順序にデータを読むと、選択したシーンのデータにアクセスしてデコードする前に、非選択シーンのデータにアクセスせざるを得ないので、選択したシーンへのシームレス接続が困難である。しかしながら、ＤＶＤシステムに於いては、その記録媒体に対する優れたランダムアクセス性能を活かして、このような複数シーン間でのシームレス接続が可能である。つまり、各シーンに属するデータを、所定のデータ量を有する複数の単位に分割し、これらの異なるシーンの属する複数の分割データ単位を、互いに所定の順番に配置することで、ジャンプ性能範囲に配置する事で、それぞれ選択されたシーンの属するデータを分割単位毎に、断続的にアクセスしてデコードすることによって、その選択されたシーンをデータが途切れる事なく再生する事ができる。つまり、シームレスデータ再生が保証される。
インターリーブブロック、ユニット構造
図２４及び図５４を参照して、シームレスデータ再生を可能にするインターリーブ方式を説明する。図２４では、１つのＶＯＢ（ＶＯＢ−Ａ）から複数のＶＯＢ（ＶＯＢ−Ｂ、ＶＯＢ−Ｄ、ＶＯＢ−Ｃ）へ分岐再生し、その後１つのＶＯＢ（ＶＯＢ−Ｅ）に結合する場合を示している。図５４では、これらのデータをディスク上のトラックＴＲに実際に配置した場合を示している。
図５４に於ける、ＶＯＢ−ＡとＶＯＢ−Ｅは再生の開始点と終了点が単独なビデオオブジェクトであり、原則として連続領域に配置する。また、図２４に示すように、ＶＯＢ−Ｂ、ＶＯＢ−Ｃ、ＶＯＢ−Ｄについては、再生の開始点、終了点を一致させて、インターリーブ処理を行う。そして、そのインターリーブ処理された領域をディスク上の連続領域にインターリーブ領域として配置する。さらに、上記連続領域とインターリーブ領域を再生の順番に、つまりトラックパスＤｒの方向に、配置している。複数のＶＯＢ、すなわちＶＯＢＳをトラックＴＲ上に配置した状態を図５４に示す。
図５４では、データが連続的に配置されたデータ領域をブロックとし、そのブロックは、前述の開始点と終了点が単独で完結しているＶＯＢを連続して配置している連続ブロック、開始点と終了点を一致させて、その複数のＶＯＢをインターリーブしたインターリーブブロックの２種類である。それらのブロックが再生順に、図３８に示すように、ブロック１、ブロック２、ブロック３、・・・、ブロック７と配置されている構造をもつ。
図５５に於いて、VTSTT_VOBSは、ブロック１、２、３、４、５、６、及び７から構成されている。ブロック１には、ＶＯＢ１が単独で配置されている。同様に、ブロック２、３、５、及び７には、それぞれ、ＶＯＢ２、３、６、及び１０が単独で配置されている。つまり、これらのブロック２、３、５、及び７は、連続ブロックである。
一方、ブロック４には、ＶＯＢ４とＶＯＢ５がインターリーブされて配置されている。同様に、ブロック６には、ＶＯＢ７、ＶＯＢ８、及びＶＯＢ９の三つのＶＯＢがインターリーブされて配置されている。つまり、これらのブロック４及び６は、インターリーブブロックである。
図５６に連続ブロック内のデータ構造を示す。同図に於いて、ＶＯＢＳにＶＯＢ−ｉ、ＶＯＢ−ｊが連続ブロックとして、配置されている。連続ブロック内のＶＯＢ−ｉ及びＶＯＢ−ｊは、図１６を参照して説明したように、更に論理的な再生単位であるセルに分割されている。図ではＶＯＢ−ｉ及びＶＯＢ−ｊのそれぞれが、３つのセルＣＥＬＬ＃１、ＣＥＬＬ＃２、ＣＥＬＬ＃３で構成されている事を示している。セルは１つ以上のＶＯＢＵで構成されており、ＶＯＢＵの単位で、その境界が定義されている。セルはＤＶＤの再生制御情報であるプログラムチェーン（以下ＰＧＣと呼ぶ）には、図１６に示すように、その位置情報が記述される。つまり、セル開始のＶＯＢＵと終了のＶＯＢＵのアドレスが記述されている。図５６に明示されるように、連続ブロックは、連続的に再生されるように、ＶＯＢもその中で定義されるセルも連続領域に記録される。そのため、連続ブロックの再生は問題はない。
次に、図５７にインターリーブブロック内のデータ構造を示す。インターリーブブロックでは、各ＶＯＢがインターリーブユニットＩＬＶＵ単立に分割され、各ＶＯＢに属するインターリーブユニットが交互に配置される。そして、そのインターリーブユニットとは独立して、セル境界が定義される。同図に於いて、ＶＯＢ−ｋは四つのインターリーブユニットＩＬＶＵｋ１、ＩＬＶＵｋ２、ＩＬＶＵｋ３、及びＩＬＶＵｋ４に分割されると共に、二つのセルＣＥＬＬ＃１ｋ、及びＣＥＬＬ＃２ｋが定義されている。同様に、ＶＯＢ−ｍはＩＬＶＵｍ１、ＩＬＶＵｍ２、ＩＬＶＵｍ３、及びＩＬＶＵｍ４に分割されると共に、二つのセルＣＥＬＬ＃１ｍ、及びＣＥＬＬ＃２ｍが定義されている。つまり、インターリーブユニットＩＬＶＵには、ビデオデータとオーディオデータが含まれている。
図５７の例では、二つの異なるＶＯＢ−ｋとＶＯＢ−ｍの各インターリーブユニットＩＬＶＵｋ１、ＩＬＶＵｋ２、ＩＬＶＵｋ３、及びＩＬＶＵｋ４とＩＬＶＵｍ１、ＩＬＶＵｍ２、ＩＬＶＵｍ３、及びＩＬＶＵｍ４がインターリーブブロック内に交互に配置されている。二つのＶＯＢの各インターリーブユニットＩＬＶＵを、このような配列にインターリーブする事で、単独のシーンから複数のシーンの１つへ分岐、さらにそれらの複数シーンの１つから単独のシーンへのシームレスな再生が実現できる。このようにインターリーブすることで、多くの場合の分岐結合のあるシーンのシームレス再生可能な接続を行う事ができる。
マルチシーン
ここで、本発明に基づく、マルチシーン制御の概念を説明すると共にマルチシーン区間に付いて説明する。
異なるアングルで撮影されたシーンから構成される例が挙げている。しかし、マルチシーンの各シーンは、同一のアングルであるが、異なる時間に撮影されたシーンであっても良いし、またコンピュータグラフィックス等のデータであっても良い。言い換えれば、マルチアングルシーン区間は、マルチシーン区間である。
パレンタル
図１５を参照して、パレンタルロックおよびディレクターズカットなどの複数タイトルの概念を説明する。
図１５にパレンタルロックに基づくマルチレイティッドタイトルストリームの一例を示す。一つのタイトル中に、性的シーン、暴力的シーン等の子供に相応しくない所謂成人向けシーンが含まれている場合、このタイトルは共通のシステムストリームＳＳａ、ＳＳｂ、及びＳＳｅと、成人向けシーンを含む成人向けシステムストリームＳＳｃと、未成年向けシーンのみを含む非成人向けシステムストリームＳＳｄから構成される。このようなタイトルストリームは、成人向けシステムストリームＳＳｃと非成人向けシステムストリームＳＳｄを、共通システムストリームＳＳｂとＳＳｅの間に、設けたマルチシーン区間にマルチシーンシステムストリームとして配置する。
上述の用に構成されたタイトルストリームのプログラムチェーンＰＧＣに記述されるシステムストリームと各タイトルとの関係を説明する。成人向タイトルのプログラムチェーンＰＧＣ１には、共通のシステムストリームＳＳａ、ＳＳｂ、成人向けシステムストリームＳＳｃ及び、共通システムストリームＳＳｅが順番に記述される。未成年向タイトルのプログラムチェーンＰＧＣ２には、共通のシステムストリームＳＳａ、ＳＳｂ、未成年向けシステムストリームＳＳｄ及び、共通システムストリームＳＳｅが順番に記述される。
このように、成人向けシステムストリームＳＳｃと未成年向けシステムストリームＳＳｄをマルチシーンとして配列することにより、各ＰＧＣの記述に基づき、上述のデコーディング方法で、共通のシステムストリームＳＳａ及びＳＳｂを再生したのち、マルチシーン区間で成人向けＳＳｃを選択して再生し、更に、共通のシステムストリームＳＳｅを再生することで、成人向けの内容を有するタイトルを再生できる。
また、一方、マルチシーン区間で、未成年向けシステムストリームＳＳｄを選択して再生することで、成人向けシーンを含まない、未成年向けのタイトルを再生することができる。このように、タイトルストリームに、複数の代替えシーンからなるマルチシーン区間を用意しておき、事前に該マルチ区間のシーンのうちで再生するシーンを選択しておき、その選択内容に従って、基本的に同一のタイトルシーンから異なるシーンを有する複数のタイトルを生成する方法を、パレンタルロックという。
なお、パレンタルロックは、未成年保護と言う観点からの要求に基づいて、パレンタルロックと呼ばれるが、システムストリーム処理の観点は、上述の如く、マルチシーン区間での特定のシーンをユーザが予め選択することにより、静的に異なるタイトルストリーム生成する技術である。一方、マルチアングルは、タイトル再生中に、ユーザが随時且つ自由に、マルチシーン区間のシーンを選択することにより、同一のタイトルの内容を動的に変化させる技術である。
また、パレンタルロック技術を用いて、いわゆるディレクターズカットと呼ばれるタイトルストリーム編集も可能である。ディレクターズカットとは、映画等で再生時間の長いタイトルを、飛行機内で供さる場合には、劇場での再生と異なり、飛行時間によっては、タイトルを最後まで再生できない。このような事態にさけて、予めタイトル制作責任者、つまりディレクターの判断で、タイトル再生時間短縮の為に、カットしても良いシーンを定めておき、そのようなカットシーンを含むシステムストリームと、シーンカットされていないシステムストリームをマルチシーン区間に配置しておくことによって、制作者の意志に沿っシーンカット編集が可能となる。このようなパレンタル制御では、システムストリームからシステムストリームへのつなぎ目に於いて、再生画像をなめらかに矛盾なくつなぐ事、すなわちビデオ、オーディオなどバッファがアンダーフローしないシームレスデータ再生と再生映像、再生オーディオが視聴覚上、不自然でなくまた中断する事なく再生するシームレス情報再生が必要になる。
マルチアングル
図３３を参照して、本発明に於けるマルチアングル制御の概念を説明する。通常、マルチメディアタイトルは、対象物を時間Ｔの経過と共に録音及び撮影（以降、単に撮影と言う）して得られる。＃ＳＣ１、＃ＳＭ１、＃ＳＭ２、＃ＳＭ３、及び＃ＳＣ３の各ブロックは、それぞれ所定のカメラアングルで対象物を撮影して得られる撮影単位時間Ｔ１、Ｔ２、及びＴ３に得られるマルチメディアシーンを代表している。シーン＃ＳＭ１、＃ＳＭ２、及び＃ＳＭ３は、撮影単位時間Ｔ２にそれぞれ異なる複数（第一、第二、及び第三）のカメラアングルで撮影されたシーンであり、以降、第一、第二、及び第三マルチアングルシーンと呼ぶ。
ここでは、マルチシーンが、異なるアングルで撮影されたシーンから構成される例が挙げられている。しかし、マルチシーンの各シーンは、同一のアングルであるが、異なる時間に撮影されたシーンであっても良いし、またコンピュータグラフィックス等のデータであっても良い。言い換えれば、マルチアングルシーン区間は、マルチシーン区間であり、その区間のデータは、実際に異なるカメラアングルで得られたシーンデータに限るものでは無く、その表示時間が同一の期間にある複数のシーンを選択的に再生できるようなデータから成る区間である。
シーン＃ＳＣ１と＃ＳＣ３は、それぞれ、撮影単位時間Ｔ１及びＴ３に、つまりマルチアングルシーンの前後に、同一の基本のカメラアングルで撮影されたシーンあり、以降、基本アングルシーンと呼ぶ。通常、マルチアングルの内一つは、基本カメラアングルと同一である。
これらのアングルシーンの関係を分かりやすくするために、野球の中継放送を例に説明する。基本アングルシーン＃ＳＣ１及び＃ＳＣ３は、センター側から見た投手、捕手、打者を中心とした基本カメラアングルにて撮影されたものである。第一マルチアングルシーン＃ＳＭ１は、バックネット側から見た投手、捕手、打者を中心とした第一マルチカメラアングルにて撮影されたものである。第二マルチアングルシーン＃ＳＭ２は、センター側から見た投手、捕手、打者を中心とした第二マルチカメラアングル、つまり基本カメラアングルにて撮影されたものである。この意味で、第二マルチアングルシーン＃ＳＭ２は、撮影単位時間Ｔ２に於ける基本アングルシーン＃ＳＣ２である。第三マルチアングルシーン＃ＳＭ３は、バックネット側から見た内野を中心とした第三マルチカメラアングルにて撮影されたものである。
マルチアングルシーン＃ＳＭ１、＃ＳＭ２、及び＃ＳＭ３は、撮影単位時間Ｔ２に関して、表示時間が重複しており、この期間をマルチアングル区間と呼ぶ。視聴者は、マルチアングル区間に於いて、このマルチアングルシーン＃ＳＭ１、＃ＳＭ２、及び＃ＳＭ３を自由に選択することによって、基本アングルシーンから、好みのアングルシーン映像をあたかもカメラを切り替えているように楽しむことができる。なお、図中では、基本アングルシーン＃ＳＣ１及び＃ＳＣ３と、各マルチアングルシーン＃ＳＭ１、＃ＳＭ２、及び＃ＳＭ３間に、時間的ギャップがあるように見えるが、これはマルチアングルシーンのどれを選択するかによって、再生されるシーンの経路がどのようになるかを分かりやすく、矢印を用いて示すためであって、実際には時間的ギャップが無いことは言うまでもない。
図２３に、本発明に基づくシステムストリームのマルチアングル制御を、データの接続の観点から説明する。基本アングルシーン＃ＳＣに対応するマルチメディアデータを、基本アングルデータＢＡとし、撮影単位時間Ｔ１及びＴ３に於ける基本アングルデータＢＡをそれぞれＢＡ１及びＢＡ３とする。マルチアングルシーン＃ＳＭ１、＃ＳＭ２、及び＃ＳＭ３に対応するマルチアングルデータを、それぞれ、第一、第二、及び第三マルチアングルデータＭＡ１、ＭＡ２、及びＭＡ３と表している。先に、図３３を参照して、説明したように、マルチアングルシーンデータＭＡ１、ＭＡ２、及びＭＡ３の何れかを選択することによって、好みのアングルシーン映像を切り替えて楽しむことができる。また、同様に、基本アングルシーンデータＢＡ１及びＢＡ３と、各マルチアングルシーンデータＭＡ１、ＭＡ２、及びＭＡ３との間には、時間的ギャップは無い。
しかしながら、ＭＰＥＧシステムストリームの場合、各マルチアングルデータＭＡ１、ＭＡ２、及びＭＡ３の内の任意のデータと、先行基本アングルデータＢＡ１からの接続と、または後続基本アングルデータＢＡ３への接続時は、接続されるアングルデータの内容によっては、再生されるデータ間で、再生情報に不連続が生じて、一本のタイトルとして自然に再生できない場合がある。つまり、この場合、シームレスデータ再生であるが、非シームレス情報再生である。
以下に、図２３をＤＶＤシステムに於けるマルチシーン区間内での、複数のシーンを選択的に再生して、前後のシーンに接続するシームレス情報再生であるマルチアングル切替について説明する。
アングルシーン映像の切り替え、つまりマルチアングルシーンデータＭＡ１、ＭＡ２、及びＭＡ３の内一つを選択することが、先行する基本アングルデータＢＡ１の再生終了前までに完了されてなけらばならない。例えば、アングルシーンデータＢＡ１の再生中に別のマルチアングルシーンデータＭＡ２に切り替えることは、非常に困難である。これは、マルチメディアデータは、可変長符号化方式のＭＰＥＧのデータ構造を有するので、切り替え先のデータの途中で、データの切れ目を見つけるのが困難であり、また、符号化処理にフレーム間相関を利用しているためアングルの切換時に映像が乱れる可能性がある。ＭＰＥＧに於いては、少なくとも１フレームのリフレッシュフレームを有する処理単位としてＧＯＰが定義されている。このＧＯＰという処理単位に於いては他のＧＯＰに属するフレームを参照しないクローズドな処理が可能である。
言い換えれば、再生がマルチアングル区間に達する前には、遅くとも、先行基本アングルデータＢＡ１の再生が終わった時点で、任意のマルチアングルデータ、例えばＭＡ３、を選択すれば、この選択されたマルチアングルデータはシームレスに再生できる。しかし、マルチアングルデータの再生の途中に、他のマルチアングルシーンデータをシームレスに再生することは非常に困難である。このため、マルチアングル期間中には、カメラを切り替えるような自由な視点を得ることは困難である。
フローチャート：エンコーダ
図２７を参照して前述の、シナリオデータＳｔ７に基づいてエンコードシステム制御部２００が生成するエンコード情報テーブルについて説明する。エンコード情報テーブルはシーンの分岐点・結合点を区切りとしたシーン区間に対応し、複数のＶＯＢが含まれるＶＯＢセットデータ列と各シーン毎に対応するＶＯＢデータ列からなる。図２７に示されているＶＯＢセットデータ列は、後に詳述する。
図３４のステップ＃１００で、ユーザが指示するタイトル内容に基づき、ＤＶＤのマルチメディアストリーム生成のためにエンコードシステム制御部２００内で作成するエンコード情報テーブルである。ユーザ指示のシナリオでは、共通なシーンから複数のシーンへの分岐点、あるいは共通なシーン５への結合点がある。その分岐点・結合点を区切りとしたシーン区間に相当するＶｗＯＢをＶＯＢセットとし、ＶＯＢセットをエンコードするために作成するデータをＶＯＢセットデータ列としている。また、ＶＯＢセットデータ列では、マルチシーン区間を含む場合、示されているタイトル数をＶＯＢセットデータ列のタイトル数（TITLE_NO）に示す。
図２７のＶＯＢセットデータ構造は、ＶＯＢセットデータ列の１つのＶＯＢセットをエンコードするためのデータの内容を示す。ＶＯＢセットデータ構造は、ＶＯＢセット番号（VOBS_NO）、ＶＯＢセット内のＶＯＢ番号（VOB_NO）、先行ＶＯＢシームレス接続フラグ（VOB_Fsb）、後続ＶＯＢシームレス接続フラグ（VOB_Fsf）、マルチシーンフラグ（VOB_Fp）、インターリーブフラグ（VOB_Fi）、マルチアングル（VOB_Fm）、マルチアングルシームレス切り替えフラグ（VOB_FsV）、インターリーブＶＯＢの最大ビットレート（ILV_BR）、インターリーブＶＯＢの分割数（ILV_DIV）、最小インターリーブユニット再生時間（ILV_MT）からなる。
ＶＯＢセット番号VOBS_NOは、例えばタイトルシナリオ再生順を目安につけるＶＯＢセットを識別するための番号である。
ＶＯＢセット内のＶＯＢ番号VOB_NOは、例えばタイトルシナリオ再生順を目安に、タイトルシナリオ全体にわたって、ＶＯＢを識別するための番号である。
先行ＶＯＢシームレス接続フラグVOB_Fsbは、シナリオ再生で先行のＶＯＢとシームレスに接続するか否かを示すフラグである。
後続ＶＯＢシームレス接続フラグVOB_Fsfは、シナリオ再生で後続のＶＯＢとシームレスに接続するか否かを示すフラグである。
マルチシーンフラグVOB_Fpは、ＶＯＢセットが複数のＶＯＢで構成しているか否かを示すフラグである。
インターリーブフラグVOB_Fiは、ＶＯＢセット内のＶＯＢがインターリーブ配置するか否かを示すフラグである。
マルチアングルフラグVOB_Fmは、ＶＯＢセットがマルチアングルであるか否かを示すフラグである。
マルチアングルシームレス切り替えフラグVOB_FsVは、マルチアングル内の切り替えがシームレスであるか否かを示すフラグである。
インターリーブＶＯＢ最大ビットレートILV_BRは、インターリーブするＶＯＢの最大ビットレートの値を示す。
インターリーブＶＯＢ分割数ILV_DIVは、インターリーブするＶＯＢのインターリーブユニット数を示す。
最小インターリーブユニット再生時間ILVU_MTは、インターリーブブロック再生時に、トラックバッファのアンダーフローしない最小のインターリーブユニットに於いて、そのＶＯＢのビットレートがILV_BRの時に再生できる時間を示す。
図２８を参照して前述の、シナリオデータＳｔ７に基づいてエンコードシステム制御部２００が生成するＶＯＢ毎に対応するエンコード情報テーブルについて説明する。このエンコード情報テーブルを基に、ビデオエンコーダ３００、サブピクチャエンコーダ５００、オーディオエンコーダ７００、システムエンコーダ９００へ、後述する各ＶＯＢに対応するエンコードパラメータデータを生成する。図２８に示されているＶＯＢデータ列は、図３４のステップ＃１００で、ユーザが指示するタイトル内容に基づき、ＤＶＤのマルチメディアストリーム生成のためにエンコードシステム制御内で作成するＶＯＢ毎のエンコード情報テーブルである。１つのエンコード単位をＶＯＢとし、そのＶＯＢをエンコードするために作成するデータをＶＯＢデータ列としている。例えば、３つのアングルシーンで構成されるＶＯＢセットは、３つのＶＯＢから構成される事になる。図２８のＶＯＢデータ構造はＶＯＢデータ列の１つのＶＯＢをエンコードするためのデータの内容を示す。
ＶＯＢデータ構造は、ビデオ素材の開始時刻（VOB_VST）、ビデオ素材の終了時刻（VOB_VEND）、ビデオ素材の種類（VOB_V_KIND）、ビデオのエンコードビットレート（V_BR）、オーディオ素材の開始時刻（VOB_AST）、オーディオ素材の終了時刻（VOB_AEND）、オーディオエンコード方式（VOB_A_KIND）、オーディオのビットレート（A_BR）からなる。
ビデオ素材の開始時刻VOB_VSTは、ビデオ素材の時刻に対応するビデオエンコードの開始時刻である。
ビデオ素材の終了時刻VOB_VENDは、ビデオ素材の時刻に対応するビデオエンコードの終了時刻である。
ビデオ素材の種類VOB_V_KINDは、エンコード素材がＮＴＳＣ形式かＰＡＬ形式のいづれかであるか、またはビデオ素材がテレシネ変換処理された素材であるか否かを示すものである。
ビデオのビットレートV_BRは、ビデオのエンコードビットレートである。
オーディオ素材の開始時刻VOB_ASTは、オーディオ素材の時刻に対応するオーディオエンコード開始時刻である。
オーディオ素材の終了時刻VOB_AENDは、オーディオ素材の時刻に対応するオーディオエンコード終了時刻である。
オーディオエンコード方式VOB_A_KINDは、オーディオのエンコード方式を示すものであり、エンコード方式にはＡＣ−３方式、ＭＰＥＧ方式、リニアＰＣＭ方式などがある。
オーディオのビットレートA_BRは、オーディオのエンコードビットレートである。
図２９に、ＶＯＢをエンコードするためのビデオ、オーディオ、システムの各エンコーダ３００、５００、及び９００へのエンコードパラメータを示す。エンコードパラメータは、ＶＯＢ番号（VOB_NO）、ビデオエンコード開始時刻（V_STTM）、ビデオエンコード終了時刻（V_ENDTM）、エンコードモード（V_ENCMD）、ビデオエンコードビットレート（V_RATE）、ビデオエンコード最大ビットレート（V_MRATE）、ＧＯＰ構造固定フラグ（GOP_FXflag）、ビデオエンコードＧＯＰ構造（GOPST）、ビデオエンコード初期データ（V_INTST）、ビデオエンコード終了データ（V_ENDST）、オーディオエンコード開始時刻（A_STTM）、オーディオエンコード終了時刻（A_ENDTM）、オーディオエンコードビットレート（A_RATE）、オーディオエンコード方式（A_ENCMD）、オーディオ開始時ギャップ（A_STGAP）、オーディオ終了時ギャップ（A_ENDGAP）、先行ＶＯＢ番号（B_VOB_NO）、後続ＶＯＢ番号（F_VOB_NO）からなる。
ＶＯＢ番号VOB_NOは、例えばタイトルシナリオ再生順を目安に、タイトルシナリオ全体にわたって番号づける、ＶＯＢを識別するための番号である。
ビデオエンコード開始時刻V_STTMは、ビデオ素材上のビデオエンコード開始時刻である。
ビデオエンコード終了時刻V_STTMは、ビデオ素材上のビデオエンコード終了時刻である。
エンコードモードV_ENCMDは、ビデオ素材がテレシネ変換された素材の場合には、効率よいエンコードができるようにビデオエンコード時に逆テレシネ変換処理を行うか否かなどを設定するためのエンコードモードである。
ビデオエンコードビットレートV_RATEは、ビデオエンコード時の平均ビットレートである。
ビデオエンコード最大ビットレートはV_MRATEは、ビデオエンコード時の最大ビットレートである。
ＧＯＰ構造固定フラグGOP_FXflagは、ビデオエンコード時に途中で、ＧＯＰ構造を変えることなくエンコードを行うか否かを示すものである。マルチアングルシーン中にシームレスに切り替え可能にする場合に有効なパラメータである。
ビデオエンコードＧＯＰ構造GOPSTは、エンコード時のＧＯＰ構造データである。
ビデオエンコード初期データV_INSTは、ビデオエンコード開始時のＶＢＶバッファ（復号バッファ）の初期値などを設定する、先行のビデオエンコードストリームとシームレス再生する場合に有効なパラメータである。
ビデオエンコード終了データV_ENDSTは、ビデオエンコード終了時のＶＢＶバッファ（復号バッファ）の終了値などを設定する。後続のビデオエンコードストリームとシームレス再生する場合に有効なパラメータである。
オーディオエンコーダ開始時刻A_STTMは、オーディオ素材上のオーディオエンコード開始時刻である。
オーディオエンコーダ終了時刻A_ENDTMは、オーディオ素材上のオーディオエンコード終了時刻である。
オーディオエンコードビットレートA_RATEは、オーディオエンコード時のビットレートである。
オーディオエンコード方式A_ENCMDは、オーディオのエンコード方式であり、ＡＣ−３方式、ＭＰＥＧ方式、リニアＰＣＭ方式などがある。
オーディオ開始時ギャップA_STGAPは、ＶＯＢ開始時のビデオとオーディオの開始のずれ時間である。先行のシステムエンコードストリームとシームレス再生する場合に有効なパラメータである。
オーディオ終了時ギャップA_ENDGAPは、ＶＯＢ終了時のビデオとオーディオの終了のずれ時間である。後続のシステムエンコードストリームとシームレス再生する場合に有効なパラメータである。
先行ＶＯＢ番号B_VOB_NOは、シームレス接続の先行ＶＯＢが存在する場合にそのＶＯＢ番号を示すものである。
後続ＶＯＢ番号F_VOB_NOは、シームレス接続の後続ＶＯＢが存在する場合にそのＶＯＢ番号を示すものである。
図３４に示すフローチャートを参照しながら、本発明に係るＤＶＤエンコーダＥＣＤの動作を説明する。なお、同図に於いて二重線で囲まれたブロックはそれぞれサブルーチンを示す。本実施形態は、ＤＶＤシステムについて説明するが、言うまでなくオーサリングエンコーダＥＣについても同様に構成することができる。
ステップ＃１００に於いて、ユーザーは、編集情報作成部１００でマルチメディアソースデータＳｔ１、Ｓｔ２、及びＳｔ３の内容を確認しながら、所望のシナリオに添った内容の編集指示を入力する。
ステップ＃２００で、編集情報作成部１００はユーザの編集指示に応じて、上述の編集指示情報を含むシナリオデータＳｔ７を生成する。
ステップ＃２００での、シナリオデータＳｔ７の生成時に、ユーザの編集指示内容の内、インターリーブする事を想定しているマルチアングル、パレンタルのマルチシーン区間でのインターリーブ時の編集指示は、以下の条件を満たすように入力する。
まず画質的に十分な画質が得られるようなＶＯＢの最大ビットレートを決定し、さらにＤＶＤエンコードデータの再生装置として想定するＤＶＤデコーダＤＣＤのトラックバッファ量及びジャンプ性能、ジャンプ時間とジャンプ距離の値を決定する。上記値をもとに、式３、式４より、最小インターリーブユニットの再生時間を得る。
次に、マルチシーン区間に含まれる各シーンの再生時間をもとに式５及び式６が満たされるかどうか検証する。満たされなければ後続シーン一部シーンをマルチシーン区間の各シーン接続するなどの処理を行い式５及び式６を満たすようにユーザは指示の変更入力する。
さらに、マルチアングルの編集指示の場合、シームレス切り替え時には式７を満たすと同時に、アングルの各シーンの再生時間、オーディオは同一とする編集指示を入力する。また非シームレス切り替え時には式８を満たすようにユーザは編集指示を入力する。
ステップ＃３００で、エンコードシステム制御部２００は、シナリオデータＳｔ７に基づいて、先ず、対象シーンを先行シーンに対して、シームレスに接続するのか否かを判断する。シームレス接続とは、先行シーン区間が複数のシーンからなるマルチシーン区間である場合に、その先行マルチシーン区間に含まれる全シーンの内の任意の１シーンを、現時点の接続対象である共通シーンとシームレスに接続する。同様に、現時点の接続対象シーンがマールチシーン区間である場合には、マルチシーン区間の任意の１シーンを接続出来ると言うことを意味する。ステップ＃３００で、ＮＯ、つまり、非シームレス接続と判断された場合にはステップ＃４００へ進む。
ステップ＃４００で、エンコードシステム制御部２００は、対象シーンが先行シーンとシームレス接続されることを示す、先行シーンシームレス接続フラグVOB_Fsbをリセットして、ステップ＃６００に進む。
一方、ステップ＃３００で、ＹＥＳ、つまり先行シートとシームレス接続すると判断された時には、ステップ＃５００に進む。
ステップ＃５００で、先行シーンシームレス接続フラグVOB_Fsbをセットして、ステップ＃６００に進む。
ステップ＃６００で、エンコードシステム制御部２００は、シナリオデータＳｔ７に基づいて、対象シーンを後続するシーンとシームレス接続するのか否かを判断する。ステップ＃６００で、ＮＯ、つまり非シームレス接続と判断された場合にはステップ＃７００へ進む。
ステップ＃７００で、エンコードシステム制御部２００は、シーンを後続シーンとシームレス接続することを示す、後続シーンシームレス接続フラグVOB_Fsfをリセットして、ステップ＃９００に進む。
一方、ステップ＃６００で、ＹＥＳ、つまり後続シートとシームレス接続すると判断された時には、ステップ＃８００に進む。
ステップ＃８００で、エンコードシステム制御部２００は、後続シーンシームレス接続フラグVOB_Fsfをセットして、ステップ＃９００に進む。
ステップ＃９００で、エンコードシステム制御部２００は、シナリオデータＳｔ７に基づいて、接続対象のシーンが一つ以上、つまり、マルチシーンであるか否かを判断する。マルチシーンには、マルチシーンで構成できる複数の再生経路の内、１つの再生経路のみを再生するパレンタル制御と再生経路がマルチシーン区間の間、切り替え可能なマルチアングル制御がある。
シナリオステップ＃９００で、ＮＯ、つまり非マルチシーン接続であると判断されて時は、ステップ＃１０００に進む。
ステップ＃１０００で、マルチシーン接続であることを示すマルチシーンフラグVOB_Fpをリセットして、エンコードパラメータ生成ステップ＃１８００に進む。ステップ＃１８００の動作については、あとで述べる。
一方、ステップ＃９００で、ＹＥＳ、つまりマルチシーン接続と判断された時には、ステップ＃１１００に進む。
ステップ＃１１００で、マルチシーンフラグVOB_Fpをセットして、マルチアングル接続かどうかを判断するステップ＃１２００に進む。
ステップ＃１２００で、マルチシーン区間中の複数シーン間での切り替えをするかどうか、すなわち、マルチアングルの区間であるか否かを判断する。ステップ＃１２００で、ＮＯ、つまり、マルチシーン区間の途中で切り替えずに、１つの再生経路のみを再生するパレンタル制御と判断された時には、ステップ＃１３００に進む。
ステップ＃１３００で、接続対象シーンがマルチアングルであること示すマルチアングルフラグVOB_Fmをリセットしてステップ＃１３０２に進む。
ステップ＃１３０２で、先行シーンシームレス接続フラグVOB_Fsb及び後続シーンシームレス接続フラグVOB_Fsfの何れかがセットされているか否かを判断する。ステップ＃１３００で、ＹＥＳ、つまり接続対象シーンは先行あるいは後続のシーンの何れかあるいは、両方とシームレス接続すると判断された時には、ステップ＃１３０４に進む。
ステップ＃１３０４では、対象シーンのエンコードデータであるＶＯＢをインターリーブすることを示すインターリーブフラグVOB_Fiをセットして、ステップ＃１８００に進む。
一方、ステップ＃１３０２で、ＮＯ、つまり、対象シーンは先行シーン及び後続シーンの何れともシームレス接続しない場合には、ステップ＃１３０６に進む。
ステップ＃１３０６でインターリーブフラッグVOB_Fiをリセットしてステップ＃１８００に進む。
一方、ステップ＃１２００で、ＹＥＳ、つまりマルチアングルであると判断された場合には、ステップ＃１４００に進む。
ステップ＃１４００では、マルチアングルフラッグVOB_Fm及びインターリーブフラッグVOB_Fiをセットした後ステップ＃１５００に進む。
ステップ＃１５００で、エンコードシステム制御部２００はシナリオデータＳｔ７に基づいて、マルチアングルシーン区間で、つまりＶＯＢよりも小さな再生単位で、映像やオーディオを途切れることなく、いわゆるシームレスに切替られるのかを判断する。ステップ＃１５００で、ＮＯ、つまり、非シームレス切替と判断された時には、ステップ＃１６００に進む。
ステップ＃１６００で、対象シーンがシームレス切替であることを示すシームレス切替フラッグVOB_FsVをリセットして、ステップ＃１８００に進む。
一方、ステップ＃１５００、ＹＥＳ、つまりシームレス切替と判断された時には、ステップ＃１７００に進む。
ステップ＃１７００で、シームレス切替フラッグVOB_FsVをセットしてステップ＃１８００に進む。このように、本発明では、編集意思を反映したシナリオデータＳｔ７から、編集情報が上述の各フラグのセット状態として検出されて後に、ステップ＃１８００に進む。
ステップ＃１８００で、上述の如く各フラグのセット状態として検出されたユーザの編集意思に基づいて、ソースストリームをエンコードするための、それぞれ図２７及び図２８に示されるＶＯＢセット単位及びＶＯＢ単位毎のエンコード情報テーブルへの情報付加と、図２９に示されるＶＯＢデータ単位でのエンコードパラメータを作成する。次に、ステップ＃１９００に進む。このエンコードパラメータ作成ステップの詳細については、図３５、図３６、図３７、図３８を参照して後で説明する。
ステップ＃１９００で、ステップ＃１８００で作成してエンコードパラメータに基づいて、ビデオデータ及びオーディオデータのエンコードを行った後にステップ＃２０００に進む。尚、サブピクチャデータは、本来必要に応じて、ビデオ再生中に、随時挿入して利用する目的から、前後のシーン等との連続性は本来不要である。更に、サプピクチャは、およそ、１画面分の映像情報であるので、時間軸上に延在するビデオデータ及びオーディオデータと異なり、表示上は静止の場合が多く、常に連続して再生されるものではない。よって、シームレス及び非シームレスと言う連続再生に関する本実施形態に於いては、簡便化のために、サブピクチャデータのエンコードについては説明を省く。
ステップ＃２０００では、ＶＯＢセットの数だけステップ＃３００からステップ＃１９００までの各ステップから構成されるループをまわし、図１６のタイトルの各ＶＯＢの再生順などの再生情報を自身のデータ構造にもつ、プログラムチェーン（VTS_PGC#I）情報をフォーマットし、マルチルチシーン区間のＶＯＢをインターリーブ配置を作成し、そしてシステムエンコードするために必要なＶＯＢセットデータ列及びＶＯＢデータ列を完成させる。次に、ステップ＃２１００に進む。
ステップ＃２１００で、ステップ＃２０００までのループの結果として得られる全ＶＯＢセット数VOBS_NUMを得て、ＶＯＢセットデータ列に追加し、さらにシナリオデータＳｔ７に於いて、シナリオ再生経路の数をタイトル数とした場合の、タイトル数TITLE_NOを設定して、エンコード情報テーブルとしてのＶＯＢセットデータ列を完成した後、ステップ＃２２００に進む。
ステップ＃２２００で、ステップ＃１９００でエンコードしたビデオエンコードストリーム、オーディオエンコードストリーム、図２９のエンコードパラメータに基づいて、図１６のVTSTT_VOBS内のＶＯＢ（VOB#i）データを作成するためのシステムエンコードを行う。次に、ステップ＃２３００に進む。
ステップ＃２３００で、図１６のＶＴＳ情報、ＶＴＳＩに含まれるＶＴＳＩ管理テーブル（VTSI_MAT）、ＶＴＳＰＧＣ情報テーブル（ＶＴＳＰＧＣＩＴ）及び、ＶＯＢデータの再生順を制御するプログラムチェーン情報（VTS_PGCI#I）のデータ作成及びマルチシーン区間に含めれるＶＯＢのインターリーブ配置などの処理を含むフォーマットを行う。
図３５、図３６、及び図３７を参照して、図３４に示すフローチャートのステップ＃１８００のエンコードパラメータ生成サブルーチンに於ける、マルチアングル制御時のエンコードパラメータ生成の動作を説明する。
先ず、図３５を参照して、図３４のステップ＃１５００で、ＮＯと判断された時、つまり各フラグはそれぞれVOB_Fsb=１またはVOB_Fsf=１、VOB_Fp=１、VOB_Fi=１、VOB_Fm=１、ＦｓＶ=０である場合、すなわちマルチアングル制御時の非シームレス切り替えストリームのエンコードパラメータ生成動作を説明する。以下の動作で、図２７、図２８に示すエンコード情報テーブル、図２９に示すエンコードパラメータを作成する。
ステップ＃１８１２では、シナリオデータＳｔ７に含まれているシナリオ再生順を抽出し、ＶＯＢセット番号VOBS_NOを設定し、さらにＶＯＢセット内の１つ以上のＶＯＢに対して、ＶＯＢ番号VOB_NOを設定する。
ステップ＃１８１４では、シナリオデータＳｔ７より、インターリーブＶＯＢの最大ビットレートILV_BRを抽出、インターリーブフラグVOB_Fi=１に基づき、エンコードパラメータのビデオエンコード最大ビットレートV_MRATEに設定。
ステップ＃１８１６では、シナリオデータＳｔ７より、最小インターリーブユニット再生時間ILVU_MTを抽出。
ステップ＃１８１８では、マルチアングルフラグVOB_Fp=１に基づき、ビデオエンコードＧＯＰ構造GOPSTのＮ=１５、Ｍ=３の値とＧＯＰ構造固定フラグGOPFXflag=“1”に設定。
ステップ＃１８２０は、ＶＯＢデータ設定の共通のルーチンである。図３６に、ステップ＃１８２０のＶＯＢデータ共通設定ルーチンを示す。以下の動作フローで、図２７、図２８に示すエンコード情報テーブル、図２９に示すエンコードパラメータを作成する。
ステップ＃１８２２では、シナリオデータＳｔ７より、各ＶＯＢのビデオ素材の開始時刻VOB_VST、終了時刻VOB_VENDを抽出し、ビデオエンコード開始時刻V_STTMとエンコード終了時刻V_ENDTMをビデオエンコードのパラメータとする。
ステップ＃１８２４では、シナリオデータＳｔ７より、各ＶＯＢのオーディオ素材の開始時刻VOB_ASTを抽出し、オーディオエンコード開始時刻A_STTMをオーディオエンコードのパラメータとする。
ステップ＃１８２６では、シナリオデータＳｔ７より、各ＶＯＢのオーディオ素材の終了時刻VOB_AENDを抽出し、VOB_AENDを超えない時刻で、オーディオエンコード方式できめられるオーディオアクセスユニット（以下ＡＡＵと記述する）単位の時刻を、オーディオエンコードのパラメータである、エンコード終了時刻A_ENDTMとする。
ステップ＃１８２８は、ビデオエンコード開始時刻V_STTMとオーディオエンコード開始時刻A_STTMの差より、オーディオ開始時ギャップA_STGAPをシステムエンコードのパラメータとする。
ステップ＃１８３０では、ビデオエンコード終了時刻V_ENDTMとオーディオエンコード終了時刻A_ENDTMの差より、オーディオ終了時ギャップA_ENDGAPをシステムエンコードのパラメータとする。
ステップ＃１８３２では、シナリオデータＳｔ７より、ビデオのビットレートV_BRを抽出し、ビデオエンコードの平均ビットレートとして、ビデオエンコードビットレートV_RATEをビデオエンコードのパラメータとする。
ステップ＃１８３４では、シナリオデータＳｔ７より、オーディオのビットレートA_BRを抽出し、オーディオエンコードビットレートA_RATEをオーディオエンコードのパラメータとする。
ステップ＃１８３６では、シナリオデータＳｔ７より、ビデオ素材の種類VOB_V_KINDを抽出し、フィルム素材、すなわちテレシネ変換された素材であれば、ビデオエンコードモードV_ENCMDに逆テレシネ変換を設定し、ビデオエンコードのパラメータとする。
ステップ＃１８３８では、シナリオデータＳｔ７より、オーディオのエンコード方式VOB_A_KINDを抽出し、オーディオエンコードモードA_ENCMDにエンコード方式を設定し、オーディオエンコードのパラメータとする。
ステップ＃１８４０では、ビデオエンコード初期データV_INSTのＶＢＶバッファ初期値が、ビデオエンコード終了データV_ENDSTのＶＢＶバッファ終了値以下の値になるように設定し、ビデオエンコードのパラメータとする。
ステップ＃１８４２では、先行ＶＯＢシームレス接続フラグVOB_Fsb=１に基づき、先行接続のＶＯＢ番号VOB_NOを先行接続のＶＯＢ番号B_VOB_NOに設定し、システムエンコードのパラメータとする。
ステップ＃１８４４では、後続ＶＯＢシームレス接続フラグVOB_Fsf=１に基づき、後続接続のＶＯＢ番号VOB_NOを後続接続のＶＯＢ番号F_VOB_NOに設定し、システムエンコードのパラメータとする。
以上のように、マルチアングルのＶＯＢセットであり、非シームレスマルチアングル切り替えの制御の場合のエンコード情報テーブル及びエンコードパラメータが生成できる。
次に、図３７を参照して、図３４に於いて、ステップ＃１５００で、Ｙｅｓと判断された時、つまり各フラグはそれぞれVOB_Fsb=１またはVOB_Fsf=１、VOB_Fp=１、VOB_Fi=１、VOB_Fm=１、VOB_FsV=１である場合の、マルチアングル制御時のシームレス切り替えストリームのエンコードパラメータ生成動作を説明する。
以下の動作で、図２７、図２８に示すエンコード情報テーブル、及び図２９に示すエンコードパラメータを作成する。
ステップ＃１８５０では、シナリオデータＳｔ７に含まれているシナリオ再生順を抽出し、ＶＯＢセット番号VOBS_NOを設定し、さらにＶＯＢセット内の１つ以上のＶＯＢに対して、ＶＯＢ番号VOB_NOを設定する。
ステップ＃１８５２では、シナリオデータＳｔ７より、インターリーブＶＯＢの最大ビットレートいＬＶ_BRを抽出、インターリーブフラグVOB_Fi=１に基づき、ビデオエンコード最大ビットレートV_RATEに設定。
ステップ＃１８５４では、シナリオデータＳｔ７より、最小インターリーブユニット再生時間ILVU_MTを抽出。
ステップ＃１８５６では、マルチアングルフラグVOB_Fp=１に基づき、ビデオエンコードＧＯＰ構造GOPSTのＮ=１５、Ｍ=３の値とＧＯＰ構造固定フラグGOPFXflag=“1”に設定。
ステップ＃１８５８では、シームレス切り替えフラグVOB_FsV=１に基づいて、ビデオエンコードＧＯＰ構造GOPSTにクローズドＧＯＰを設定、ビデオエンコードのパラメータとする。
ステップ＃１８６０は、ＶＯＢデータ設定の共通のルーチンである。この共通のルーチンは図３５に示しているルーチンであり、既に説明しているので省略する。
以上のようにマルチアングルのＶＯＢセットで、シームレス切り替え制御の場合のエンコードパラメータが生成できる。
次に、図３８を参照して、図３４に於いて、ステップ＃１２００で、ＮＯと判断され、ステップ１３０４でＹＥＳと判断された時、つまり各フラグはそれぞれVOB_Fsb=１またはVOB_Fsf=１、VOB_Fp=１、VOB_Fi=１、VOB_Fm=０である場合の、パレンタル制御時のエンコードパラメータ生成動作を説明する。以下の動作で、図２７、図２８に示すエンコード情報テーブル、及び図２９に示すエンコードパラメータを作成する。
ステップ＃１８７０では、シナリオデータＳｔ７に含まれているシナリオ再生順を抽出し、ＶＯＢセット番号VOBS_NOを設定し、さらにＶＯＢセット内の１つ以上のＶＯＢに対して、ＶＯＢ番号VOB_NOを設定する。
ステップ＃１８７２では、シナリオデータＳｔ７より、インターリーブＶＯＢの最大ビットレートILV_BRを抽出、インターリーブフラグVOB_Fi=１に基づき、ビデオエンコード最大ビットレートV_RATEに設定する。
ステップ＃１８７４では、シナリオデータＳｔ７より、ＶＯＢインターリーブユニット分割数ILV_DIVを抽出する。
ステップ＃１８７６は、ＶＯＢデータ設定の共通のルーチンである。この共通のルーチンは図３５に示しているルーチンであり、既に説明しているので省略する。
以上のようにマルチシーンのＶＯＢセットで、パレンタル制御の場合のエンコードパラメータが生成できる。
次に、図５３を参照して、図３４に於いて、ステップ＃９００で、ＮＯと判断された時、つまり各フラグはそれぞれVOB_Fp=０である場合の、すなわち単一シーンのエンコードパラメータ生成動作を説明する。以下の動作で、図２７、図２８に示すエンコード情報テーブル、及び図２９に示すエンコードパラメータを作成する。
ステップ＃１８８０では、シナリオデータＳｔ７に含まれているシナリオ再生順を抽出し、ＶＯＢセット番号VOBS_NOを設定し、さらにＶＯＢセット内の１つ以上のＶＯＢに対して、ＶＯＢ番号VOB_NOを設定する。
ステップ＃１８８２では、シナリオデータＳｔ７より、インターリーブＶＯＢの最大ビットレートＩＬＶ_BRを抽出、インターリーブフラグVOB_Fi=１に基づき、ビデオエンコード最大ビットレートV_MRATEに設定。
ステップ＃１８８４は、ＶＯＢデータ設定の共通のルーチンである。この共通のルーチンは図３５に示しているルーチンであり、既に説明しているので省略する。
上記ようなエンコード情報テーブル作成、エンコードパラメータ作成フローによって、ＤＶＤのビデオ、オーディオ、システムエンコード、ＤＶＤのフォーマッタのためのエンコードパラメータは生成できる。
デコーダのフローチャート
ディスクからストリームバッファ転送フロー
以下に、図４７および図４８を参照して、シナリオ選択データＳｔ５１に基づいてデコードシステム制御部２３００が生成するデコード情報テーブルについて説明する。デコード情報テーブルは、図４７に示すデコードシステムテーブルと、図４８に示すデコードテーブルから構成される。
図４７に示すようにデコードシステムテーブルは、シナリオ情報レジスタ部とセル情報レジスタ部からなる。シナリオ情報レジスタ部は、シナリオ選択データＳｔ５１に含まれるユーザの選択した、タイトル番号等の再生シナリオ情報を抽出して記録する。セル情報レジスタ部は、シナリオ情報レジスタ部は抽出されたユーザの選択したシナリオ情報に基いてプログラムチェーンを構成する各セル情報を再生に必要な情報を抽出して記録する。
更に、シナリオ情報レジスタ部は、アングル番号レジスタANGLE_NO_reg、ＶＴＳ番号レジスタVTS_NO_reg、ＰＧＣ番号レジスタVTS_PGCI_NO_reg、オーディオＩＤレジスタAUDIO_ID_reg、副映像ＩＤレジスタSP_ID_reg、及びＳＣＲ用バッファレジスタSCR_bufferを含む。
アングル番号レジスタANGLE_NO_regは、再生するＰＧＣにマルチアングルが存在する場合、どのアングルを再生するかの情報を記録する。ＶＴＳ番号レジスタVTS_NO_regは、ディスク上に存在する複数のＶＴＳのうち、次に再生するＶＴＳの番号を記録する。ＰＧＣ番号レジスタVTS_PGCI_NO_regは、パレンタル等の用途でＶＴＳ中存在する複数のＰＧＣのうち、どのＰＧＣを再生するかを指示する情報を記録する。オーディオＩＤレジスタAUDIO_ID_regは、ＶＴＳ中存在する複数のオーディオストリームの、どれを再生するかを指示する情報を記録する。副映像ＩＤレジスタSP_ID_regは、ＶＴＳ中に複数の副映像ストリームが存在する場合は、どの副映像ストリームを再生するか指示する情報を記録する。ＳＣＲ用バッファSCR_bufferは、図１９に示すように、パックヘッダに記述されるＳＣＲを一時記憶するバッファである。この一時記憶されたＳＣＲは、図２６を参照して説明したように、ストリーム再生データＳｔ６３としてデコードシステム制御部２３００に出力される。
セル情報レジスタ部は、セルブロックモードレジスタCBM_reg、セルブロックタイプレジスタCBT_reg、シームレス再生フラグレジスタSPB_reg、インターリーブアロケーションフラグレジスタIAF_reg、STC再設定フラグレジスタSTCDF_reg、シームレスアングル切り替えフラグレジスタSACF_reg、セル最初のＶＯＢＵ開始アドレスレジスタC_FVOBU_SA_reg、セル最後のＶＯＢＵ開始アドレスレジスタC_LVOBU_SA_regを含む。
セルブロックモードレジスタCBM_regは複数のセルが１つの機能ブロックを構成しているか否かを示し、構成していない場合は値として“N_BLOCK”を記録する。また、セルが１つの機能ブロックを構成している場合、その機能ブロックの先頭のセルの場合“F_CELL”を、最後のセルの場合“L_CELL”を、その間のセルの場合“BLOCK”を値として記録する。
セルブロックタイプレジスタCBT_regは、セルブロックモードレジスタCBM_regで示したブロックの種類を記録するレジスタであり、マルチアングルの場合“A_BLOCK”を、マルチアングルでない場合“N_BLOCK”を記録する。
シームレス再生フラグレジスタSPF_regは、該セルが前に再生されるセルまたはセルブロックとシームレスに接続して再生するか否かを示す情報を記録する。前セルまたは前セルブロックとシームレスに接続して再生する場合には、値として“SML”を、シームレス接続でない場合は値として“NSML”を記録する。
インターリーブアロケーションフラグレジスタIAF_regは、該セルがインターリーブ領域に配置されているか否かの情報を記録する。インターリーブ領域に配置されている場合には値として“ILVB”を、インターリーブ領域に配置されていない場合は“N_ILVB”を記録する。
ＳＴＣ再設定フラグレジスタSTCDF_regは、同期をとる際に使用するＳＴＣ（System Time Clock）をセルの再生時に再設定する必要があるかないかの情報を記録する。再設定が必要な場合には値として“STC_RESET”を、再設定が不要な場合には値として、“STC_NRESET”を記録する。
シームレスアングルチェンジフラグレジスタSACF_regは、該セルがアングル区間に属しかつ、シームレスに切替えるかどうかを示す情報を記録する。アングル区間でかつシームレスに切替える場合には値としで“SML”を、そうでない場合は“NSML”を記録する。
セル最初のＶＯＢＵ開始アドレスレジスタC_FVOBU_SA_regは、セル先頭ＶＯＢＵ開始アドレスを記録する。その値はＶＴＳタイトル用ＶＯＢＳ（VTSTT_VOBS）の先頭セルの論理セクタからの距離をセクタ数で示し、該セクタ数を記録する。
セル最後のＶＯＢＵ開始アドレスレジスタC_LVOBU_SA_regは、セル最終ＶＯＢＵ開始アドレスを記録する。その値は、ＶＴＳタイトル用ＶＯＢＳ（VTSTT_VOBS）の先頭セルの論理セクタから距離をセクタ数で示し、該セクタ数を記録する。
次に、図４８のデコードテーブルについて説明する。同図に示すようにデコードテーブルは、非シームレスマルチアングル情報レジスタ部、シームレスマルチアングル情報レジスタ部、ＶＯＢＵ情報レジスタ部、シームレス再生レジスタ部からなる。
非シームレスマルチアングル情報レジスタ部は、NSML_AGL_C1_DSTA_reg〜NSML_AGL_C9_DSTA_regを含む。
NSML_AGL_C1_DSTA_reg〜NSML_AGL_C9_DSTA_regには、図２０に示すＰＣＩパケット中のNSML_AGL_C1_DSTA〜NSML_AGL_C9_DSTAを記録する。
シームレスマルチアングル情報レジスタ部は、SML_AGL_C1_DSTA_reg〜SML_AGL_C9_DSTA_regを含む。
SML_AGL_C1_DSTA_reg〜SML_AGL_C9_DSTA_regには、図２０に示すＤＳＩパケット中のSML_AGL_C1_DSTA〜SML_AGL_C9_DSTAを記録する。
ＶＯＢＵ情報レジスタ部は、ＶＯＢＵ最終アドレスレジスタＶＯＢＵ_EA_regを含む。
ＶＯＢＵ情報レジスタＶＯＢＵ_EA_regには、図２０に示すＤＳＩパケット中のＶＯＢＵ_EAを記録する。
シームレス再生レジスタ部は、インターリーブユニットフラグレジスタILVU_flag_reg、ユニットエンドフラグレジスタUNIT_END_flag_reg、ＩＬＶＵ最終パックアドレスレジスタILVU_EA_reg、次のインターリーブユニット開始アドレスNT_ILVU_SA_reg、ＶＯＢ内先頭ビデオフレーム表示開始時刻レジスタＶＯＢ_V_SPTM_reg、ＶＯＢ内最終ビデオフレーム表示終了時刻レジスタＶＯＢ_V_EPTM_reg、オーディオ再生停止時刻１レジスタVOB_A_GAP_PTM1_reg、オーディオ再生停止時刻２レジスタVOB_A_GAP_PTM2_reg、オーディオ再生停止期間１レジスタVOB_A_GAP_LEN1、オーディオ再生停止期間２レジスタＶＯＢ_A_GAP_LEN2を含む。
インターリーブユニットフラグレジスタILVU_flag_regはＶＯＢＵが、インターリーブ領域に存在するかを示すものであり、インターリーブ領域に存在する場合“ILVU”を、インターリーブ領域に存在しない場合“N_ILVU”を記録する。
ユニットエンドフラグレジスタUNIT_END_flag_regは、ＶＯＢＵがインターリーブ領域に存在する場合、該ＶＯＢＵがＩＬＶＵの最終ＶＯＢＵかを示す情報を記録する。ＩＬＶＵは、連続読み出し単位であるので、現在読み出しているＶＯＢＵが、ＩＬＶＵの最後のＶＯＢＵであれば“END”を、最後のＶＯＢＵでなければ“N_END”を記録する。
ＩＬＶＵ最終パックアドレスレジスタILVU_EA_regは、ＶＯＢＵがインターリーブ領域に存在する場合、該ＶＯＢＵが属するＩＬＶＵの最終パックのアドレスを記録する。ここでアドレスは、該ＶＯＢＵのＮＶからのセクタ数である。
次のＩＬＶＵ開始アドレスレジスタNT_ILVU_SA_regは、ＶＯＢＵがインターリーブ領域に存在する場合、次のＩＬＶＵの開始アドレスを記録する。ここでアドレスは、該ＶＯＢＵのＮＶからのセクタ数である。
ＶＯＢ内先頭ビデオフレーム表示開始時刻レジスタＶＯＢ_V_SPTM_regは、ＶＯＢの先頭ビデオフレームの表示を開始する時刻を記録する。
ＶＯＢ内最終ビデオフレーム表示終了時刻レジスタＶＯＢ_V_EPTM_regは、ＶＯＢの最終ビデオフレームの表示が終了する時刻を記録する。
オーディオ再生停止時刻１レジスタＶＯＢ_A_GAP_PTM1_regは、オーディオ再生を停止させる時間を、オーディオ再生停止期間１レジスタＶＯＢ_A_GAP_LEN1_regはオーディオ再生を停止させる期間を記録する。
オーディオ再生停止時刻２レジスタＶＯＢ_A_GAP_PTM2_regおよび、オーディオ再生停止期間２レジスタＶＯＢ_A_GAP_LEN2に関しても同様である。
次に図４９示すＤＶＤデコーダフローを参照しながら、図２６にブロック図を示した本発明に係るＤＶＤデコーダＤＣＤの動作を説明する。
ステップ＃３１０２０２はディスクが挿入されたかを評価するステップであり、ディスクがセットされればステップ＃３１０２０４へ進む。
ステップ＃３１０２０４に於いて、図２２のボリュームファイル情報VFSを読み出した後に、ステップ＃３１０２０６に進む。
ステップ＃３１０２０６では、図２２に示すビデオマネージャVMGを読み出し、再生するVTSを抽出して、ステップ＃３１０２０８に進む。
ステップ＃３１０２０８では、VTSの管理テーブルVTSIより、ビデオタイトルセットメニューアドレス情報VTSM_C_ADTを抽出して、ステップ＃３１０２１０に進む。
ステップ＃３１０２１０では、VTSM_C_ADT情報に基づき、ビデオタイトルセットメニューVTSM_ＶＯＢＳをディスクから読み出し、タイトル選択メニューを表示する。このメニューに従ってユーザーはタイトルを選択する。この場合、タイトルだけではなく、オーディオ番号、副映像番号、マルチアングルを含むタイトルであれば、アングル番号を入力する。ユーザーの入力が終われば、次のステップ＃３１０２１４へ進む。
ステップ＃３１０２１４で、ユーザーの選択したタイトル番号に対応するVTS_PGCI#Jを管理テーブルより抽出した後に、ステップ＃３１０２１６に進む。
次のステップ＃３１０２１６で、ＰＧＣの再生を開始する。ＰＧＣの再生が終了すれば、デコード処理は終了する。以降、別のタイトルを再生する場合は、シナリオ選択部でユーザーのキー入力があればステップ＃３１０２１０のタイトルメニュー表示に戻る等の制御で実現できる。
次に、図５０を参照して、先に述べたステップ＃３１０２１６のＰＧＣの再生について、更に詳しく説明する。ＰＧＣ再生ステップ＃３１０２１６は、図示の如く、ステップ＃３１０３０、＃３１０３２、＃３１０３４、及び＃３１０３５よりなる。
ステップ＃３１０３０では、図４７に示したデコードシステムテーブルの設定を行う。アングル番号レジスタANGLE_NO_reg、ＶＴＳ番号レジスタVTS_NO_reg、ＰＧＣ番号レジスタPGC_NO_reg、オーディオＩＤレジスタAUDIO_ID_reg、副映像ＩＤレジスタSP_ID_regは、シナリオ選択部２１００でのユーザー操作によって設定する。
ユーザーがタイトルを選択することで、再生するＰＧＣが一意に決まると、該当するセル情報(C_PBI)を抽出し、セル情報レジスタに設定する。設定するレジスタは、CBM_reg、CBT_reg、SPF_reg、IAF_reg、STCDF_reg、SACF_reg、C_FVOBU_SA_reg、C_LVOBU_SA_regである。
デコードシステムテーブルの設定後、ステップ＃３１０３２のストリームバッファへのデータ転送処理と、ステップ＃３１０３４のストリームバッファ内のデータデコード処理を並列に起動する。
ここで、ステップ＃３１０３２のストリームバッファへのデータ転送処理は、図２６に於いて、ディスクＭからストリームバッファ２４００へのデータ転送に関するものである。すなわち、ユーザーの選択したタイトル情報、およびストリーム中に記述されている再生制御情報（ナブパックＮＶ）に従って、必要なデータをディスクＭから読み出し、ストリームバッファ２４００に転送する処理である。
一方、ステップ＃３１０３４は、図２６に於いて、ストリームバッファ２４００内のデータをデコードし、ビデオ出力３６００およびオーディオ出力３７００へ出力する処理を行う部分である。すなわち、ストリームバッファ２４００に蓄えられたデータをデコードして再生する処理である。
このステップ＃３１０３２と、ステップ＃３１０３４は並列に動作する。
ステップ＃３１０３２について以下、更に詳しく説明する。
ステップ＃３１０３２の処理はセル単位であり、１つのセルの処理が終了すると次のステップ＃３１０３５でＰＧＣの処理が終了したかを評価する。ＰＧＣの処理が終了していなければ、ステップ＃３１０３０で次のセルに対応するデコードシステムテーブルの設定を行う。この処理をＰＧＣが終了するまで行う。
ストリームバッファからのデコードフロー
次に図５１を参照して、図５０に示したステップ＃３１０３４のストリームバッファ内のデコード処理について説明する。
ステップ＃３１０３４は、図示の如くステップ＃３１１１０、ステップ＃３１１１２、ステップ＃３１１１４、ステップ＃３１１１６からなる。
ステップ＃３１１１０は、図２６に示すストリームバッファ２４００からシステムデコーダ２５００へのパック単位でのデータ転送を行い、ステップ＃３１１１２へ進む。
ステップ＃３１１１２は、ストリームバッファ２４００から転送されるパックデータを各バッファ、すなわち、ビデオバッファ２６００、サブピクチャバッファ２７００、オーディオバッファ２８００へのデータ転送を行う。
ステップ＃３１１１２では、ユーザの選択したオーディオおよび副映像のＩＤ、すなわち図４７に示すシナリオ情報レジスタに含まれるオーディオＩＤレジスタAUDIO_ID_reg、副映像ＩＤレジスタSP_ID_regと、図１９に示すパケットヘッダ中の、ストリームＩＤおよびサブストリームＩＤを比較して、一致するパケットをそれぞれのバッファ（ビデオバッファ２６００、オーディオバッファ２７００、サブピクチャバッファ２８００）へ振り分け、ステップ＃３１１１４へ進む。
ステップ＃３１１１４は、各デコーダ（ビデオデコーダ、サブピクチャデコーダ、オーディオデコーダ）のデコードタイミングを制御する、つまり、各デコーダ間の同期処理を行い、ステップ＃３１１１６へ進む。
ステップ＃３１１１４の各デコーダの同期処理の詳細は後述する。
ステップ＃３１１１６は、各エレメンタリのデコード処理を行う。つまり、ビデオデコーダはビデオバッファからデータを読み出しデコード処理を行う。サブピクチャデコーダも同様に、サブピクチャバッファからデータを読み出しデコード処理を行う。オーディオデコーダも同様にオーディオデコーダバッファからデータを読み出しデコード処理を行う。デコード処理が終われば、ステップ＃３１０３４を終了する。
次に、図５２を参照して、先に述べたステップ＃３１１１４について更に詳しく説明する。
ステップ＃３１１１４は、図示の如く、ステップ＃３１１２０、ステップ＃３１１２２、ステップ＃３１１２４からなる。
ステップ＃３１１２０は、先行するセルと該セルがシームレス接続かを評価するステップであり、シームレス接続であればステップ＃３１１２２へ進み、そうでなければステップ＃３１１２４へ進む。
ステップ＃３１１２２は、シームレス用の同期処理を行う。
一方、ステップ＃３１１２４は、非シームレス用の同期処理を行う。
ビデオエンコーダ
図２５のビデオエンコーダ３００に入力するビデオデータＳｔ１の素材としては、フィルムで撮影された映画などがあるがＤＶＤなどに記録されるマルチメディアビットストリームは、家庭用のテレビ受像機に接続されることを前提としている。また、マルチメディアビットストリームのエンコードの際に、ビデオソースの編集の容易さから、図２５のオーサリングエンコーダへの素材の供給にはデジタルのＶＴＲが一般的に使用される。フィルムのフレームレートは毎秒２４フレームであり、ＮＴＳＣの家庭用のテレビ受像機やデジタルＶＴＲに於いては、ビデオのフレームレートは毎秒２９．９７フレームであるので、フィルムで撮影された映画素材を、テレシネ変換と呼ばれるフレームレート変換手法によってレート変換を行って後、ディジタルＶＴＲに記録される映像信号が作成される。
図３９を参照して、本発明に於ける逆テレシネ変換回路の１実施形態を説明する。図３９は、本発明に於ける逆テレシネ変換回路を図２５のビデオエンコーダ３００に組み込こまれたビデオエンコーダ３００Ａの詳細な構造を示す。ビデオエンコーダ３００Ａは、フレームメモリ３０４、３０６、フィールド間差分器３０８、閾値判定器３１０、テレシネ周期判定器３１２、セレクタ３１４、符号化装置３１６から構成される。
入力制御器３０２は、図２５に示す編集情報作成部１００及びエンコードシステム制御部２００に接続されて、それぞれビデオ信号Ｓｔ１及びタイミング信号Ｓｔ９の供給を受ける。そのビデオ信号Ｓｔ１がテレシネ画像である場合には、ビデオエンコーダへの制御データとして用いられる逆テレシネ変換を指示する情報を含んでいる。
テレシネ画像ＲＴ１はフレームメモリ３０４で、１フレーム分だけ保持された後に、１フレーム遅延テレシネ画像ＲＴ２としてフレームメモリ３０６、セレクタ３１４、及びフィールド差分器３０８に入力される。
フィールド差分器３０８では、１フレーム遅延テレシネ画像ＲＴ２と［入力制御器３０２から入力された］現フレームのテレシネ画像ＲＴ１の同一パリティのフィールド間差分が集計される。集計された結果は、差分値ＲＴ３として、閾値判定器３１０に入力される。
閾値判定器３１０では、差分値ＲＴ３を所定の閾値と比較し、その比較結果を示す比較結果信号ＲＴ５をテレシネ周期判定回路３１２に入力する。
テレシネ周期判定回路３１２は、比較結果信号ＲＴ５に基づいて、内部で周期情報ＲＴ６を生成して、その周期情報ＲＴ６に基づいて、テレシネ周期にあった出力画像を出力するようセレクタ３１４を制御するセレクタ制御信号ＲＴ７をセレクタ３１４に出力する。テレシネ周期判定回路３１２は、各フレームについて冗長フィールドを削除したかどうかを示すリピートファーストフィールドフラグＲＦＦと、フレームの２つのフィールドの表示順を示すトップフィールドファーストフラグＴＦＦと、符号化装置３１６に入力されるフレームをエンコードするか否かを示す出力画像有効フラグＩＥＦを符号化装置に出力する。
フレームメモリ３０４からの出力された１フレーム遅延テレシネ画像ＲＴ２は、フレームメモリ３０６で更に、もう１フレーム保持されて、２フレーム遅延テレシネ画像ＲＴ４が生成される。この画像ＲＴ４は、セレクタ３１４に入力される。
セレクタ３１４は、フレームメモリ３０４から入力された１フレーム遅延テレシネ画像ＲＴ２、フレームメモリ３０６から入力された２フレーム遅延テレシネ画像ＲＴ４、及びテレシネ周期判定器３１２から入力されてたセレクタ制御信号ＲＴ７に基づいて、１フレーム遅延テレシネ画像ＲＴ２と２フレーム遅延テレシネ画像ＲＴ４のいずれかから、トップフィールド及びボトムフィールドを選択して逆テレシネ画像ＲＴ８を生成する。この逆テレシネ画像ＲＴ８は符号化装置３１６に出力される。
符号化装置３１６は、セレクタ３１４から入力された逆テレシネ画像ＲＴ８と、テレシネ周期判定回路３１２から入力されたフラグＴＦＦ、ＲＦＦ、及びＩＥＦを圧縮符号化する。
図３２に、フィルム素材、フィルム素材からテレシネ変換によって作成されるＮＴＳＣビデオ信号であるテレシネ画像と、上述の逆テレシネ変換回路を組み込んだビデオエンコーダ３００Ａによって、エンコードつまり、逆テレシネ変換された逆テレシネ画像、そのエンコードデータからデコードされる再生映像を示す。
第１段目には、毎秒２４フレームのフィルム画像ＩＦを示す。
第２段目には、第１段目のフィルム画像からテレシネ変換したＮＴＳＣ信号であるテレシネ画像ＲＴ１を示す。
第３段目には、第２段目のテレシネ画像をビデオエンコード時に、冗長なフィールドを検出し、削除する逆テレシネ変換をおこなった逆テレシネ画像ＲＴ８とビデオエンコード時のフラグデータであるリピートファーストフィールドフラグＲＦＦと、トップフィールドファーストフラグＴＦＦとを示す。ＲＦＦは、フレームを構成する時間的に先のフィールドを次の再生フレームの１つのフィールドとして使用する事を示したものであり、ＴＦＦは、フレームを構成する時間的に先のフィールドはトップフィールドである事を示す。
第４段目には、第３段目の逆テレシネ画像のエンコードデータをビデオデコードした時に得られる再生画像ＩＲのＮＴＳＣ信号を示す。
テレシネ変換は基本的には図３２に示すように、周期的に同一パリティのフィールドをコピーした冗長フィールドを挿入することによって、フレームレートの変換が実現される。フィルム画像ＩＦは、毎秒２４フレームのフィルム画像であり、このフレームＦ１のトップフィールドＦ１ｔがコピーされ、また、フレームＦ３のボトムフィールドＦ３ｂがコピーされて、フレームＦ１からフレームＦ４までの４フレームが、テレシネ画像ＲＴ１のフレームＦ‘１からフレームＦ’５の５フレームに変換される。
このようにして得られたテレシネ後のビデオ信号であるテレシネ画像ＲＴ１を圧縮符号化する際に、ビデオのフレームレートそのままで圧縮符号化を行ったのではコピーされた冗長フィールドまでも符号化することになり、効率が悪くなる。従って、通常、コピーされた冗長フィールドを検出し、削除、つまり逆テレシネ変換した後に圧縮符号化を行い、各フレームについて冗長フィールドを削除したかどうかを示すリピートファーストフィールドフラグＲＦＦと、フレームの２つのフィールドの表示順を示すトップフィールドファーストフラグＴＦＦとを付加して記録する。
フィルムのフレームレートとビデオのフレームレートとは簡単な整数比の関係になっていないため、周期的な処理の合間に通常と異なる変換パターンが挟まれることになる。図に示すように、テレシネ変換はフィルムの４フレーム相当分を５フレームに変換して、毎秒２４フレームレートから毎秒約３０フレームレートにしている。テレシネ画像は、このように基本的にはテレシネ画像の５フレームの周期で、規則的な変換処理が施され、そのフレーム毎の周期をテレシネ周期とする。それぞれのテレシネ周期で、テレシネ画像から逆テレシネ画像を得る処理が変わる。
図４２に示すタイミングチャートを参照して、上記の逆テレシネ変換回路３００Ａの動作を説明する。
第１段目に、テレシネ画像入力ＲＴ１、１フレーム遅延テレシネ画像ＲＴ２、差分値ＲＴ３、及び２フレーム遅延テレシネ画像ＲＴ４を順番に示す。
第２段目に、比較結果信号ＲＴ５の出力タイミングを示す。
第３段目に、テレシネ画像の周期情報ＲＴ６を示す。同図に於いて、周期情報はステート（state）として表示されている。
第４段目に、セレクタ制御信号ＲＴ７を示す。第５段目に、逆テレシネ画像ＲＴ８出力を示す。第６段目に、トップフィールドファーストフラグＴＦＦ、リピートファーストフィールドフラグＲＦＦ及び出力画像有効フラグＩＥＦを示す。
最初の周期であるステート０では、テレシネ画像ＲＴ１のフレームＦ１‘とＦ２’のフレームメモリ３０４、３０６への入力が完了した時点で開始され、テレシネ画像のフレームＦ１‘を構成するフィールドＦ１ｔとＦ１ｂで逆テレシネ画像ＲＴ８を構成し、ＴＦＦ=１を設定し、Ｆ２’のトップフィールドがＦ１ｔと同様であるので、次フレームの再生時に、フィールドを複製（コピー）するので、ＲＦＦ=１を設定する。
ステート１では、テレシネ画像ＲＴ１のフレームＦ２‘とＦ３’のフレームメモリ３０４、３０６への入力が完了した時点で開始され、テレシネ画像ＲＴ１のＦ２‘のボトムフィールドであるＦ２ｂとＦ３’のトップフィールドであるＦ２ｔで逆テレシネ画像ＲＴ８を構成し、ボトムフィールドが時間的に先になるフレーム構成になるので、ＴＦＦ=０を設定、フィールドの複製がないのでＲＦＦ=０を設定する。
ステート２では、テレシネ画像ＲＴ１のフレームＦ３‘とＦ４’のフレームメモリ３０４、３０６への入力が完了した時点で開始され、テレシネ画像のＦ３‘のボトムフィールドであるＦ３ｂとＦ４’のトップフィールドであるＦ３ｔで逆テレシネ画像ＲＴ８を構成し、ボトムフィールドが時間的に先になるフレーム構成になるので、ＴＦＦ=０を設定、Ｆ４‘のボトムフィールドがＦ３ｂと同様であるので、次フレームの再生時に、フィールドを複製（コピー）するので、ＲＦＦ=１を設定する。
ステート３では、テレシネ画像ＲＴ１のフレームＦ４‘とＦ５’のフレームメモリ３０４、３０６への入力が完了した時点で開始され、テレシネ画像のＦ５‘のＦ４ｔとＦ４ｂで逆テレシネ画像ＲＴ８を構成し、トップフィールドが時間的に先になるフレーム構成になるので、ＴＦＦ=１を設定、次フレームの再生時に、フィールドを複製（コピー）しないので、ＲＦＦ=０を設定する。
ステート４では、テレシネ画像ＲＴ１のフレームＦ５‘と次の周期のＦ１’のフレームメモリ３０４、３０６への入力が完了した時点で開始されるが、この周期では、逆テレシネ画像ＲＴ８を生成しない。
以上のようなステート０からステート４を繰り返して、逆テレシネ画像ＲＴ８を生成し、エンコードをおこなっている。
先に、図３２に示したテレシネ画像ＲＴ１から逆テレシネ画像ＲＴ８への変換が逆テレシネ変換であり、連続するトップフィールド同士、ボトムフィールド同士のフィールド間の差分を予め決められた閾値と比較し、これより小さい場合にはコピーフィールドと判断し、該当のフィールドを削除する。同時に前述のＲＦＦ、ＴＦＦのフラグを図に示すように生成する。
再生時には、これらのフラグにより再生画像ＩＲに示すように簡単にもとのテレシネ画像が再現できることになる。即ち、逆テレシネ画像ＲＴ８のフレームＦ１では、ＴＦＦ=１であるので、Ｆ１のトップフィールドＦ１ｔを先に出力し、次にＦ１のボトムフィールドＦ１ｂを出力する。そして、ＲＦＦ=１であるので、ファーストフィールド、即ちＦ１ｔをもう一度出力する。
フレームＦ２については、ＴＦＦ=０であるので、Ｆ２のボトムフィールドＦ２ｂを先に出力し、次にＦ２のトップフィールドＦ２ｔを出力する。２度目に出力されたＦ１ｔとＦ２ｂが新たに１つのフレームＦ２‘を構成することになる。フレームＦ３ではＴＦＦ=０であるので、ボトムフィールドＦ３ｂが先に、トップフィールドＦ３ｔが後で出力され、ＲＦＦ=１であるので、再度ボトムフィールドＦ３ｂが出力される。フレームＦ４ではＴＦＦ=１であるので、トップフィールドＦ４ｔが先に、ボトムフィールドＦ４ｂが後で出力される。このようにして、テレシネ画像ＲＴ１がフラグにより再生できる。
図４２に於いて、テレシネ入力画像ＲＴ１と１フレーム遅れの図３９上のフレームメモリ３０４の出力である１フレーム遅延テレシネ画像ＲＴ２と比較され、図３２のＦ１ｔとＦ１ｔ‘がコピーフィールドであるので、閾値判定器３１０はＨｉを出力する。図３２のＦ１ｂとＦ２ｂとはコピーフィールドではないので、閾値判定器３１０の出力である比較結果信号ＲＴ５はＬｏとなり、この時点で、テレシネ周期判定回路３１２はテレシネ周期のあるステート、ここでは、ステート０とするが、このステート０であると判断し、図３２のＦ１ｔ、Ｆ１ｂを順に出力するよう出力選択信号をＬｏに制御し、同時にＴＦＦ=１、ＲＦＦ=１を出力する。セレクタ３１４はテレシネ周期判定器からの出力であるセレクタ制御信号ＲＴ７により、図３９上のフレームメモリ３０６の出力である２フレーム遅延テレシネ画像ＲＴ４を選択して出力する。これによって、逆テレシネ画像ＲＴ８として、図３２のＦ１ｔ、Ｆ１ｂが順に出力される。
次のフレームでは、図３２に示すＦ１ｔ‘とＦ２ｔ、Ｆ２ｂとＦ３ｂがともにコピーフィールドではないので、テレシネ周期判定回路３１２は次のステート１へと移行し、図３２のＦ２ｔ、Ｆ２ｂを順に出力するようセレクタ制御信号ＲＴ７によりセレクタ３１４を切り替える。このフレームについてはボトムフィールド先行であるので、ＴＦＦ=０を出力し、第一フィールドを１度しか表示しないので、ＲＦＦ=０を出力する。
同様に図３２のＦ４ｔ、Ｆ４ｂまで出力し、フレームレートの違いのためにこの逆テレシネ回路３００Ａは１フレーム間出力を休止する。この休止期間を示すためにテレシネ周期判定回路３１２は、出力画像有効フラグＩＥＦをこの期間ネゲート（無効状態）する。
休止期間のない逆テレシネ画像が必要な場合、すなわち逆テレシネ変換後のフレームレートで、エンコードする場合には、この後にフレームレート変換のためのＦＩＦＯメモリ等が用いられ、逆テレシネ変換後のフレームレートで、このメモリの読み出しを行いエンコードする事になる。
しかしながら、このようにそれぞれ逆テレシネ変換を行った複数のＶＯＢを、連続して再生しようとした場合に、そのつなぎ目でのシームレス情報再生に問題が生じる。このような問題をより分かり易く説明するために、以下にパレンタル制御の例に基づいて説明する。
図４０及び図４１を参照して、パレンタル制御時のテレシネ変換、符号化画像、及び再生画像の状態を説明する。図４０は、３つのＶＯＢａ、ＶＯＢｂ、及びＶＯＢｃ間のパレンタル接続の例を示している。図４１の第１段目は、ビデオエンコーダ３００Ａに入力されるテレシネ画像ＲＴ１を示す。同じく、第２段目は、第１段目で示したテレシネ画像ＲＴ１を、逆テレシネ変換して得られる逆テレシネ画像ＲＴ８をビデオエンコーダ３００Ａで符号化した信号Ｓｔ１５を示す。図面上は、逆テレシネ画像を表示している。第３段目は、ビデオエンコードストリームＳｔ１５からデコードされる再生画像ＩＲを示す。
この例では元のテレシネ画像のフレームＦ１８で終わるＶＯＢａ、元のテレシネ画像のフレームＦ１９で始まりフレームＦ４４で終わるＶＯＢｂ、元のテレシネ画像のフレームＦ４５で始まるＶＯＢｃが、第１段目の元々連続したテレシネ画像ＲＴ１に逆テレシネ変換及び圧縮符号化を行ったものであり、対象とする視聴者によっては、ＶＯＢｂを飛ばして、ＶＯＢａからＶＯＢｃへとシームレスで連続再生を行う必要がある。この場合に、第３段目の逆テレシネ変換を行った記録画像のＶＯＢａの終わりがＲＦＦ=０、ＴＦＦ=０で終わっており、ＶＯＢｃの始まりが、ＲＦＦ=０、ＴＦＦ=１で始まっているために、これを連続して再生すると、第１段目は、３段目に示すように、ＶＯＢａとＶＯＢｃのつなぎ目でトップフィールドが連続してしまう。
このような場合のＭＰＥＧデコーダの振る舞いは一般に保証されておらず、ＤＶＤデコーダに於いては、フィールドが１つ挿入されたり削除されたりして再生画像のつじつま合わせが行われるか、最悪の場合、無関係なフィールドが挿入されることになる。前者の場合であっても、音声との同期ずれが発生する恐れがある。従って、完全なシームレスの再生が実現できないことになる。
このような問題に対応して、本発明では、同一の記録媒体に複数の論理的な記録区間即ちＶＯＢを設ける際に、各ＶＯＢの先頭及び終端でのＲＦＦ、ＴＦＦの値が所定の値となるように逆テレシネ変換を行う。更に、その逆テレシネ変換の方法についても、図４３及び図４４を参照して後で詳しく説明するが、その概念を以下に簡単に説明する。
ＶＯＢの先頭に於いて、前記フラグＲＦＦ、ＴＦＦを所定の値に固定しかつ冗長フィールドの除去を禁止した状態から逆テレシネ変換を開始し、実際の冗長フィールドの検出結果により生成される前記フラグＲＦＦ、ＴＦＦが所定の値となったところから、冗長フィールドの除去と前記フラグＲＦＦ、ＴＦＦの値を出力し、ＶＯＢの先頭での前記フラグＲＦＦ、ＴＦＦが所定の値を持つように逆テレシネ変換を行う。
更に、各ＶＯＢの終端でのこれらのフラグＲＦＦ、ＴＦＦを所定の値とするために、予めＶＯＢに相当するテレシネ画像ＲＴ１の冗長フィールドの位置を検査しその結果によって前記フラグＲＦＦ、ＴＦＦを生成する手段を有し、実際に逆テレシネ変換と圧縮符号化を行う際に、該ＶＯＢの終端部での前記フラグＲＦＦ、ＴＦＦが所定の値になる逆テレシネ変換後のフレームの内、ＶＯＢの終端の近傍に位置するフレームに於いてコピーされた冗長フィールドの除去操作を中止して、該ＶＯＢの終端での前記フラグＲＦＦ、ＴＦＦが所定の値を持つように逆テレシネ変換を行う。
或いは、ＶＯＢに相当するテレシネ画像ＲＴ１の終端に近づいたことを検出する手段を有し、該ＶＯＢの終端に近づいたと判断した場合に、冗長フィールドの除去を制限することにより該ＶＯＢの終端での前記フラグＲＦＦ、ＴＦＦが所定の値を持つように逆テレシネ変換を行う。
このような手段により逆テレシネ変換を行うことにより、ＶＯＢの先頭と終端でのフラグＲＦＦ、ＴＦＦの値が所定の値に揃い、ＶＯＢ同士を連続して再生しても、ボトムフィールド同士、或いはトップフィールド同士が連続することが無くなり、従って、複数のＶＯＢを連続して再生する場合に、ＶＯＢの境界に於いてもシームレス再生を実現することが出来るようになる。
図４５を参照して、上記にその概念を説明した本発明に於ける逆テレシネ変換回路の更なる実施形態を説明する。図４５は本発明に於ける逆テレシネ変換回路を図２５のビデオエンコーダ３００に組み込こまれたビデオエンコーダ３００Ｂの詳細な構造を示す。本実施形態に於けるビデオエンコーダ３００Ｂは、図３９に示したビデオエンコーダ３００Ａと同様の構造に、フレームメモリ３０４、３０６、フィールド間差分器３０８、閾値判定器３１０、テレシネ周期判定器３１２、セレクタ３１４、符号化装置３１６から構成されている。しかし、ビデオエンコーダ３００Ａと比べて、ＶＯＢ終端検出器３１８、及び制御信号固定回路３２２が図示の如く追加されている。
VOB終端検出器３１８は、ＤＶＤエンコーダＥＣＤの編集情報作成部１００に接続されて、ビデオストリームＳｔ１に含まれるビデオストリームに同期して入力されるタイムコードの供給を受ける。また、ＶＯＢ終端検出器３１８は、エンコードシステム制御部２００が生成するエンコードパラメータであるビデオエンコード終了時刻V_ENDTM（図２９参照）に基づいてＶＯＢ終端のタイムコードより少なくとも数フレーム前に「ハイ」になるＶＯＢ終端信号ＲＴ９を出力する。
本実施形態では、ＶＯＢ内のテレシネ周期ステート３の最後のフレームのタイムコードを設定し、そのフレームが入力した時点でＶＯＢ終端信号ＲＴ９を出力するようにしている。テレシネ周期と対応するタイムコードが不明である場合には、１周期分すなわち、ＶＯＢの終端タイムコードの５フレーム前にＶＯＢ終端信号ＲＴ９の出力を行うする事でも構わない。
制御信号固定回路３２２は、VOB終端検出器３１８に接続されてＶＯＢ終端信号ＲＴ９の供給を受けると共に、テレシネ周期判定器３１２に接続されてセレクタ制御信号ＲＴ７、トップフィールドファーストフラグＴＦＦ、リピートファーストフィールドフラグＲＦＦ、及び出力画像有効フラグＩＥＦの供給を受ける。制御信号固定回路３２２は、ＶＯＢ終端信号ＲＴ９に基づいて、セレクタ制御信号ＲＴ７、トップフィールドファーストフラグＴＦＦ、リピートファーストフィールドフラグＲＦＦ、及び出力画像有効フラグＩＥＦを其々を制御して、第二セレクタ制御信号ＲＴ７‘、第二トップフィールドファーストフラグＴＦＦ’、第二リピートファーストフィールドフラグＲＦＦ‘、及び第二出力画像有効フラグＩＥＦ’を出力する。
セレクタ３１４は、制御信号固定回路３２２に接続されて第二セレクタ制御信号ＲＴ７‘の供給をうける。同様に、符号化装置３１６も制御信号固定回路３２２に接続されて第二トップフィールドファーストフラグＴＦＦ’、第二リピートファーストフィールドフラグＲＦＦ‘、及び第二出力画像有効フラグＩＥＦ’の供給を受ける。
制御信号固定回路３２２は、ＶＯＢ終端信号がＨｉになって以降、ＴＦＦ=１、ＲＦＦ=０の状態、を検出すると、その後のエンコード前の画像については、ＴＦＦ=１、ＲＦＦ=０の状態、入力されるテレシネ画像ＲＴ１のフレームをそのままエンコード処理を行うように制御する。すなわち、ＴＦＦ‘=１、ＲＦＦ’=０、ＩＥＦ‘=１、ＲＴ７’=１と固定して、それ以降の冗長フィールドの削除を禁止する。なお、ＲＴ７、ＩＥＦの変化は、ＲＦＦ、ＴＦＦと同期しているので、ＲＦＦ、ＴＦＦの変化の検出するだけで十分である。
つまり、本実施形態に於けるビデオエンコーダ３００Ｂでは、セレクタ３１４及び符号化装置３１６は、ビデオエンコーダ３００Ａと違って、エンコードシステム制御部２００からのエンコードパラメータを含むＳｔ９とビデオストリームＳｔ１中のタイムコードに基づいて、VOB終端検出器３１８と制御信号固定回路３２２によって、ビデオストリームＳｔ１中のＶＯＢ終端を検知することにより、冗長フィールドの削除をより精密に制御できるので、より効率的且つ正確な逆テレシネ変換処理を可能としている。
図４３及び２１０４Ｂを参照して、ビデオエンコーダ３００Ｂによる逆テレシネ変換の方法について説明する。図４３及び図４４の第１段目から第５３段目までは、既に説明した逆テレシネ変換のタイミングを示す図４０及び図４１の其々と同様であるので説明を省く。但し、第５段目には、ＶＯＢの終端の検出信号ＲＴ９が表されている。枠体ＧＦ１は、ＶＯＢａの終端期間、枠体ＧＦ２は、ＶＯＢｂの先頭期間、枠体ＧＦ３は、ＶＯＢｂの終端期間を示す。
先ず、テレシネ画像ＲＴ１の逆テレシネ変換を考える。元のテレシネ画像ＲＴ１のフレームＦ１８で終わるＶＯＢａの終端に着目する。予め、冗長フィールドの検査を行い、冗長フィールドが含まれていることがわかっているとする。このテレシネ画像ＲＴ１をそのまま逆テレシネ変換すると、図４０に示すようなＲＦＦ‘、ＴＦＦ‘を生成する事になる。ここで、ＶＯＢａのフレームの内、ＴＦＦ‘=１、ＲＦＦ‘=０でかつ終端に最も近いフレームは、図４１ではフレームＦ１２’であるので、以降の枠体ＧＦ１に示す区間での冗長フィールドの削除を禁止すると、図４３の再生画像ＩＲに示すような必ずボトムフィールドで終了するＶＯＢａとなる。
次に、ＶＯＢｂの先頭に注目する。ＶＯＢｂの先頭では、実際の冗長フィールドの削除は禁止してＴＦＦ‘=１、ＲＦＦ‘=０の状態からフラグを出力し、冗長フィールドの検査の結果初めてフラグがＴＦＦ‘=１、ＲＦＦ‘=０の状態になってから冗長フィールドの削除を開始する。枠体ＧＦ２内の区間がその冗長フィールド除去の禁止期間である。
ＶＯＢｂの終端では、ＶＯＢａの終端と同様の処理を行う。即ち、枠体ＧＦ３で示す期間では冗長フィールドの削除を行わない。
ＶＯＢｃの先頭は、もともとＴＦＦ‘=１、ＲＦＦ‘=０であるので、すぐさま冗長フィールド削除のモードに入る。
以上のように各ＶＯＢセルを生成すると、ＶＯＢａの終端、ＶＯＢｂの先頭及び終端、ＶＯＢｃの先頭の何れもがＴＦＦ‘=１、ＲＦＦ‘=０の状態であり、ＶＯＢａ→ＶＯＢｂ→ＶＯＢｃと連続再生した場合も、また、ＶＯＢａ→ＶＯＢｃと連続再生した場合にも、フィールドの不連続はなくなり、シームレス再生が保証できることになる。
図４６に示すタイミングチャートを参照して、本発明にかかる逆テレシネ変換回路の実施形態２のビデオエンコーダ３００Ｂの動作をより詳しく説明する。本実施形態に於けるタイミングチャートは、図４２に示すビデオエンコーダ３００Ａとタイミングチャートに、ＶＯＢ終端信号ＲＴ９、第二セレクタ制御信号ＲＴ７‘、第二トップフィールドファーストフラグＴＦＦ’、第二リピートファーストフィールドフラグＲＦＦ‘、及び第二出力画像有効フラグＩＥＦ’の動作を追加して表した構成になっている。既に、図４３を参照して説明した、ＶＯＢ終端信号ＲＴ９に基づく、元のフラグと各第二フラグとの関係が明確に示されている。
同図に於いて、テレシネ画像入力のＦ４ｔのタイミングでタイムコードなどによる逆テレシネ停止信号であるＶＯＢ終端信号ＲＴ９が入力した場合を示している。逆テレシネ停止信号ＲＴ９が入力するまでの動作は、図４２で説明した場合と同様である。
逆テレシネ停止信号ＲＴ９が入力してから最初にＴＦＦ‘=１、ＲＦＦ‘=０を出力するステート３のフレーム以降、逆テレシネ操作を停止し、入力のテレシネ画像をそのまま出力している。これにより、どの位置で符号化を停止させても、トップフィールドが先行するフレームでセルが終了することとなり、複数のＶＯＢを連続再生した場合のシームレス再生を保証出来ることになる。
図４３、図４４、図４５、図４６を参照してＶＯＢ終端検出器３１８及び制御信号固定回路３２２についての上述の開示は、当業技術に熟練したものであれば、このような動作が可能なＶＯＢ終端検出器３１８及び制御信号固定回路３２２を、プログラム等のソフトウェアによって、あるいは電気回路によって構成するに十分であるので、具体的な構成についての説明を省く。
本実施形態では、タイムコードによりＶＯＢ終端を検出したが、フレーム数を数えるなどの方法によって実現しても、本発明の効果はいぜんとして有効である。また、ＴＦＦ‘=１、ＲＦＦ‘=０の状態でＶＯＢを終了する例をしめしたが、他の状態であっても複数のＶＯＢの境界でテレシネ周期に問題が起きないように制限すれば良い。
以上説明した実施形態では、１度のテレシネ画像の入力によって、順次逆テレシネ変換処理を行い、ビデオエンコード処理を行う方法を示した。次第２の実施形態として、１度目の入力で、テレシネ変換周期及びＴＦＦ，ＲＦＦを検出し、２度目の入力で図４３に示すように、ＴＦＦ‘，ＲＦＦ’を生成し、ビデオエンコード処理を行う方法について説明する。この場合の処理は、図３９に示すビデオエンコードブロックにおいて、テレシネ周期判定器３１２にエンコードを行うＶＯＢのテレシネ周期情報を格納するメモリを加える事で実現できる。
つまり、１度目のテレシネ画像入力により、順次逆テレシネ変換処理を行う、その結果、すなわちテレシネ周期情報をテレシネ周期判定器３１２に蓄積し、１度目の処理を終了する。次にテレシネ周期判定器３１２では、エンコード終了時刻のフレームより、時間をさかのぼり、それぞれの逆テレシネ変換画像のＴＦＦ，ＲＦＦを評価し、ＴＦＦ=１、ＲＦＦ=０の状態を検出したら、そのフレームからＶＯＢ終端までのフレームのＴＦＦ、ＲＦＦが、ＴＦＦ‘=１，ＲＦＦ’=０となるように設定する。
以上に説明した第２の実施形態の別の実施形態として、エンコードするテレシネ変換画像のテレシネ周期情報がわかっている場合、エンコード処理前に、そのテレシネ周期情報をテレシネ周期判定器３１２に入力し、前述した、ＴＦＦ，ＲＦＦの変換処理及び２度目の処理をテレシネ周期判定器３１２で行う事により、同様に実現できる。また、テレシネ周期判定器に、ＴＦＦ、ＲＦＦの変換処理を施したＴＦＦ‘，ＲＦＦ’を入力する事でも同様な効果を得る事ができる。
以上に示した逆テレシネ変換回路を含むビデオエンコードは、図２５のビデオエンコーダ３００に相当し、図３４のエンコーダフローチャートのサブルーチンであるステップ＃１８００で設定されたエンコードパラメータ、すなわち図２９で示したエンコードパラメータのビデオエンコードモードV_ENCMD設定の逆テレシネ変換処理をおこなうか否かに基づいて、さらにビデオエンコード開始時刻V_STTM、ビデオエンコード終了時刻V_ENDTMに基づき、図３４Ｂのステップ＃１９００でのビデオエンコード処理をおこなう。
以上説明したように、本発明によれば、セル同士を連続して再生しても、ボトムフィールド同士、或いはトップフィールド同士が連続することなく、セルの境界に於いてもシームレス再生を実現することが出来る。
産業上の利用可能性
以上のように、本発明にかかるビットストリームのインターリーブて媒体に記録再生する方法及びその装置は、様々な情報を搬送するビットストリームから構成されるタイトルをユーザーの要望に応じて編集して新たなタイトルを構成することができるオーサリングシステムに用いるのに適しており、更に言えば、近年開発されたデジタルビデオディスクシステム、いわゆるＤＶＤシステムに適している。
Claims (2)
- テレシネ変換されたビデオ信号から冗長フィールドを除去する逆テレシネ変換を施した中間信号を、冗長フィールドを除去したことを示す第１フラグ（ＲＦＦ）及びビデオフレームを構成するトップフィールドとボトムフィールドの内どちらのフィールドが時間的に先行しているかを示す第２フラグ（ＴＦＦ）と共に圧縮符号化したシステムストリーム（ＶＯＢ）を生成し、記録媒体に記録する信号記録装置であって、
ビデオ信号の第１ビデオフレームと前記第１ビデオフレームから１フレーム遅延する第２ビデオフレームとを記憶する記憶手段（３０４、３０６）と、
前記記録手段からの出力を選択する選択手段（３１４）と、
記憶された前記第１ビデオフレームを構成するフィールドと前記第２ビデオフレーム構成するフィールドとを比較しビデオ信号のテレシネ周期と冗長フィールドを判定する判定手段（３０８、３１０、３１２）と、
判定したテレシネ周期と冗長フィールドに基づき、ビデオ信号中の冗長フィールドを除去した中間信号（ＲＴ８）を前記選択手段を制御し出力させると供に、前記第１フラグ、前記第２フラグを生成し出力する制御手段（３１２、３２２）と、
前記中間信号（ＲＴ８）、前記第１フラグ、前記第２フラグを符号化した１つ以上のシステムストリーム（ＶＯＢ）を生成する符号化手段（３１６）とを備え、
前記信号記録装置は、さらに、入力されるビデオ信号から生成される１つ以上のシステムストリーム（ＶＯＢ）の各終端を検出する検出手段（３１８）を備え、
前記制御手段は、
各システムストリーム（ＶＯＢ）の終端で冗長フィールドの削除を禁止することにより、前記第１、第２フラグが所定の値を持つように前記ビデオ信号から前記記録信号への変換を行うことを特徴とする、信号記録装置。 - 前記第２フラグ（ＴＦＦ）は、所定の値として、システムストリームの先端ではトップフィールドで始まり、終端はボトムフィールドで終わる値を示す、請求の範囲１記載の信号記録装置。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP25273395 | 1995-09-29 | ||
| PCT/JP1996/002799 WO1997013362A1 (en) | 1995-09-29 | 1996-09-27 | Method and device for encoding seamless-connection of telecine-converted video data |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002146424A Division JP3437565B2 (ja) | 1995-09-29 | 2002-05-21 | 再生方法、再生装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP3920921B2 true JP3920921B2 (ja) | 2007-05-30 |
Family
ID=17241513
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP51414497A Expired - Lifetime JP3920921B2 (ja) | 1995-09-29 | 1996-09-27 | テレシネ変換されたビデオデータのシームレス接続エンコード方法及びその装置 |
Country Status (8)
| Country | Link |
|---|---|
| EP (1) | EP0920202A3 (ja) |
| JP (1) | JP3920921B2 (ja) |
| KR (1) | KR100386873B1 (ja) |
| CN (2) | CN1309253C (ja) |
| DE (1) | DE69602274T2 (ja) |
| HK (2) | HK1011909A1 (ja) |
| MX (1) | MX9801213A (ja) |
| TW (1) | TW303569B (ja) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040090554A1 (en) * | 2002-10-23 | 2004-05-13 | Takahiro Nishi | Picture coding method |
| US9560367B2 (en) | 2004-09-03 | 2017-01-31 | Nokia Technologies Oy | Parameter set and picture header in video coding |
| KR20080016999A (ko) | 2005-04-26 | 2008-02-25 | 톰슨 라이센싱 | 동기화된 스트림 패킹 |
| US8233048B2 (en) * | 2006-09-19 | 2012-07-31 | Mavs Lab. Inc. | Method for indexing a sports video program carried by a video stream |
| KR101268987B1 (ko) * | 2007-09-11 | 2013-05-29 | 삼성전자주식회사 | 메타데이터를 자동적으로 생성/갱신하는 멀티미디어 데이터기록 방법 및 장치 |
| KR101662141B1 (ko) * | 2015-08-10 | 2016-10-05 | 주식회사 인팩 | 다이아프램 진동 구동 장치 및 방법 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2664817B2 (ja) * | 1991-05-31 | 1997-10-22 | インターナショナル・ビジネス・マシーンズ・コーポレイション | フレーム列画像圧縮方法及びシステム並びにフレーム再構成方法及びシステム |
| JPH06153069A (ja) * | 1992-10-30 | 1994-05-31 | Sony Corp | 画像の変換装置、複製装置、再生装置、および表示装置 |
| JP3255308B2 (ja) * | 1992-12-18 | 2002-02-12 | ソニー株式会社 | データ再生装置 |
| US5463565A (en) * | 1993-10-29 | 1995-10-31 | Time Warner Entertainment Co., L.P. | Data block format for software carrier and player therefor |
-
1996
- 1996-09-26 TW TW85111842A patent/TW303569B/zh not_active IP Right Cessation
- 1996-09-27 CN CNB031309054A patent/CN1309253C/zh not_active Expired - Lifetime
- 1996-09-27 MX MX9801213A patent/MX9801213A/es unknown
- 1996-09-27 CN CN96197226A patent/CN1115047C/zh not_active Expired - Lifetime
- 1996-09-27 DE DE69602274T patent/DE69602274T2/de not_active Expired - Lifetime
- 1996-09-27 KR KR10-1998-0702166A patent/KR100386873B1/ko not_active IP Right Cessation
- 1996-09-27 JP JP51414497A patent/JP3920921B2/ja not_active Expired - Lifetime
- 1996-09-27 EP EP19990102251 patent/EP0920202A3/en not_active Ceased
-
1998
- 1998-12-10 HK HK98113149A patent/HK1011909A1/xx not_active IP Right Cessation
-
1999
- 1999-04-22 HK HK99101788A patent/HK1016793A1/xx not_active IP Right Cessation
Also Published As
| Publication number | Publication date |
|---|---|
| MX9801213A (es) | 1998-04-30 |
| HK1016793A1 (en) | 1999-11-05 |
| DE69602274T2 (de) | 1999-12-16 |
| DE69602274D1 (de) | 1999-06-02 |
| CN1516162A (zh) | 2004-07-28 |
| CN1115047C (zh) | 2003-07-16 |
| CN1309253C (zh) | 2007-04-04 |
| CN1197576A (zh) | 1998-10-28 |
| EP0920202A3 (en) | 1999-06-09 |
| TW303569B (ja) | 1997-04-21 |
| EP0920202A2 (en) | 1999-06-02 |
| KR19990063699A (ko) | 1999-07-26 |
| HK1011909A1 (en) | 1999-07-23 |
| KR100386873B1 (ko) | 2003-08-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3922592B2 (ja) | 記録方法 | |
| JP3827096B2 (ja) | 情報記録媒体の記録方法 | |
| JP3827097B2 (ja) | 情報記録方法 | |
| JP3769507B2 (ja) | 再生装置 | |
| JP3325581B2 (ja) | 再生方法及び再生装置 | |
| JP3963478B2 (ja) | ビットストリームのシームレス接続エンコード方法及びその装置 | |
| US5745645A (en) | Method and an apparatus for encoding telecine-converted video data for seamless connection | |
| JP3338039B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP2003087744A (ja) | ビットストリーム生成方法及び情報記録方法 | |
| JP3920921B2 (ja) | テレシネ変換されたビデオデータのシームレス接続エンコード方法及びその装置 | |
| JP3813070B2 (ja) | 光ディスクを再生する再生装置 | |
| JP3327917B2 (ja) | 記録方法、記録装置、及び光ディスク | |
| JP3350542B1 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3437565B2 (ja) | 再生方法、再生装置 | |
| JP3338042B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3338033B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3338036B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3338037B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3338041B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3350545B1 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3338034B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3338038B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3338035B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3338032B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク | |
| JP3338040B2 (ja) | 再生方法、再生装置、記録方法、記録装置、光ディスク |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060926 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061124 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070123 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070216 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100223 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110223 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120223 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130223 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130223 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140223 Year of fee payment: 7 |
|
| EXPY | Cancellation because of completion of term |