JPWO2005101828A1 - 記録媒体、再生装置、プログラム - Google Patents
記録媒体、再生装置、プログラム Download PDFInfo
- Publication number
- JPWO2005101828A1 JPWO2005101828A1 JP2006512392A JP2006512392A JPWO2005101828A1 JP WO2005101828 A1 JPWO2005101828 A1 JP WO2005101828A1 JP 2006512392 A JP2006512392 A JP 2006512392A JP 2006512392 A JP2006512392 A JP 2006512392A JP WO2005101828 A1 JPWO2005101828 A1 JP WO2005101828A1
- Authority
- JP
- Japan
- Prior art keywords
- picture
- avclip
- time
- playback
- entry
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000000872 buffer Substances 0.000 claims description 168
- 238000000034 method Methods 0.000 claims description 131
- 230000008569 process Effects 0.000 description 65
- 238000010586 diagram Methods 0.000 description 63
- 238000001824 photoionisation detection Methods 0.000 description 46
- 238000012545 processing Methods 0.000 description 43
- 239000000203 mixture Substances 0.000 description 31
- 238000002360 preparation method Methods 0.000 description 22
- 238000003860 storage Methods 0.000 description 18
- 230000006835 compression Effects 0.000 description 16
- 238000007906 compression Methods 0.000 description 16
- 230000003287 optical effect Effects 0.000 description 16
- 230000006872 improvement Effects 0.000 description 15
- 230000002452 interceptive effect Effects 0.000 description 14
- 238000006243 chemical reaction Methods 0.000 description 12
- 230000009191 jumping Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 230000008901 benefit Effects 0.000 description 8
- 238000011069 regeneration method Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 238000003825 pressing Methods 0.000 description 6
- 230000001771 impaired effect Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 238000013459 approach Methods 0.000 description 4
- 230000007774 longterm Effects 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 238000005070 sampling Methods 0.000 description 4
- 239000003086 colorant Substances 0.000 description 3
- 230000001172 regenerating effect Effects 0.000 description 3
- 206010011469 Crying Diseases 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 239000013078 crystal Substances 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 230000008929 regeneration Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000012447 hatching Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/005—Reproducing at a different information rate from the information rate of recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B20/12—Formatting, e.g. arrangement of data block or words on the record carriers
- G11B20/1217—Formatting, e.g. arrangement of data block or words on the record carriers on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B20/12—Formatting, e.g. arrangement of data block or words on the record carriers
- G11B2020/1264—Formatting, e.g. arrangement of data block or words on the record carriers wherein the formatting concerns a specific kind of data
- G11B2020/1288—Formatting by padding empty spaces with dummy data, e.g. writing zeroes or random data when de-icing optical discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2537—Optical discs
- G11B2220/2541—Blu-ray discs; Blue laser DVR discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2537—Optical discs
- G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Television Signal Processing For Recording (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Abstract
Description
以降、本発明に係る記録媒体の実施形態について説明する。先ず始めに、本発明に係る記録媒体の実施行為のうち、使用行為についての形態を説明する。図1は、本発明に係る記録媒体の、使用行為についての形態を示す図である。図1において、本発明に係る記録媒体は、BD−ROM100である。このBD−ROM100は、再生装置200、リモコン300、テレビ400により形成されるホームシアターシステムに、映画作品を供給するという用途に供される。
本図の第4段目にBD−ROMを示し、第3段目にBD−ROM上のトラックを示す。本図のトラックは、BD−ROMの内周から外周にかけて螺旋状に形成されているトラックを、横方向に引き伸ばして描画している。このトラックは、リードイン領域と、ボリューム領域と、リードアウト領域とからなる。本図のボリューム領域は、物理層、ファイルシステム層、応用層というレイヤモデルをもつ。ディレクトリ構造を用いてBD−ROMの応用層フォーマット(アプリケーションフォーマット)を表現すると、図中の第1段目のようになる。この第1段目においてBD−ROMには、Rootディレクトリの下に、BDMVディレクトリがある。
STREAMディレクトリには、いわばデジタルストリーム本体となるファイル群を格納しているディレクトリであり、拡張子m2tsが付与されたファイル
(00001.m2ts,00002.m2ts,00003.m2ts)が存在する。
(00001.mpls,00002.mpls,00003mpls)が存在する。
CLIPINFディレクトリには、拡張子clpiが付与されたファイル
(00001.clpi,00002.clpi,00003.clpi)が存在する。
<AVClipの構成>
続いて拡張子.m2tsが付与されたファイルについて説明する。図3は、拡張子.m2tsが付与されたファイルがどのように構成されているかを模式的に示す図である。拡張子.m2tsが付与されたファイル(00001.m2ts,00002.m2ts,00003.m2ts・・・・・)は、AVClipを格納している。AVClipは(中段)、複数のビデオフレーム(ピクチャpj1,2,3)からなるビデオストリーム、複数のオーディオフレームからなるオーディオストリームを(上1段目)、PESパケット列に変換し(上2段目)、更にTSパケットに変換し(上3段目)、同じく字幕系のプレゼンテーショングラフィクスストリーム(下1段目のPGストリーム)及び対話系のインタラクティブグラフィクスストリーム(下2段目のIGストリーム)をTSパケットに変換して(下3段目)、これらを多重化することで構成される。
AVClipを構成するTSパケットは、第2段目に示すようにTS_extra_header(図中の「EX」)が付される。
<ビデオストリーム>
続いてMPEG4−AVC形式のビデオストリームについて説明する。MPEG4−AVC形式のビデオストリームは、複数のピクチャからなる。図5(a)は、符号化順序に配置される複数のピクチャを示す。
<GOP構造>
図5(b)は、図5(a)に示したビデオストリームのGOP構造を示す図である。本図においてIDRピクチャと、このIDRピクチャに続くBピクチャ、Pピクチャは、1つのClosed−GOPを構成する。一方、Non−IDR Iピクチャと、Non−IDR Iピクチャに続くBピクチャ、Pピクチャは、1つのOpen−GOPを構成する。
<IDRピクチャ>
IDRピクチャをビデオストリーム中に挿入することの技術的意義について説明する。Cloed−GOPを規定するIDRピクチャは、IGOP毎というように、決まった単位で出現するものではない。1つのビデオストリームにおいてどの部分に、何個IDRピクチャを置くかはビデオストリームのエンコード条件によって変わる。よってエンコード条件によっては、IDRピクチャが殆ど置かれないこともあるし、IDRピクチャが多く置かれることもある。ここでIDRピクチャは、自身の圧縮符号化に、短時間参照ピクチャ、長時間参照ピクチャを利用することができないので、ビデオストリームに挿入されるIDRピクチャの数が多ければ多いほど、ビデオストリームの圧縮率は伸び悩む。つまりIDRピクチャの挿入数が多いと、その圧縮率の利点が損なわれてしまう。しかしビデオストリームの途中にこのIDRピクチャが、少なくとも1つ挿入されていることは、ストリームの途中からの特殊再生をおおいに効率化する。
<BD−ROMへの記録>
続いてIDRピクチャ、Non−IDR Iピクチャが、どのようにしてTSパケットに変換され、BD−ROMに記録されるかについて説明する。図9は、IDRピクチャ、Non−IDR IピクチャがTSパケットに変換される過程を示す図である。図中の第1段目は、IDRピクチャ、Non−IDR Iピクチャを示す。第2段目は、MPEG4−AVCに規定されたAccess Unitを示す。IDRピクチャ、Non−IDR Iピクチャを構成する複数のスライスデータは、シーケンシャルに配置され、AUD(Access Unit Delimiter),SPS(Sequence Parameter Set),PPS(Picture Parameter Set),SEI(Supplemental Enhanced info)が付加されることにより、Access Unitに変換されることになる。
第3段目はNAL unitを示す。第2段目におけるAUD,SPS,PPS,SEIに対し、ヘッダを付加することにより、AUD,SPS,PPS,SEI、スライスデータは、それぞれNAL unitに変換されることになる。NAL unitとは、MPEG4−AVCのネットワーク抽象レイヤ(Network Abstraction Layer)において、規定された単位であり、ITU−T Recommendation H.264等の様々な文献に記載されているので、詳細についてはこれらの文献を参照されたい。ここで重要であるのは、AUD,SPS,PPS,SEI,スライスデータは、それぞれ独立したNALunitに変換されているので、AUD,SPS,PPS,SEI,スライスデータのそれぞれは、ネットワーク抽象レイヤにおいて、それぞれ独立に取り扱われるという点である。
1つのGOPを再生するには、そのGOPの先頭に位置するIDRピクチャ、Non−IDR Iピクチャを構成するNAL unitのうち、Access Unit Delimiterを含むものをデコーダに投入せねばならない。つまりAccess Unit Delimiterを含むNAL unitが、IDRピクチャ、Non−IDR Iピクチャをデコードするための1つの指標になる。このAccess Unit Delimiterを含むNAL unitを、本実施形態では点(Point)として扱う。そして再生装置は、ビデオストリームを再生するにあたって、Access Unit Delimiterを含むNAL unitを、Iピクチャを再生するためのエントリー位置として解釈する。従って、AVClipにおいて、飛込再生を実行するには、IDRピクチャ,Non−IDR IピクチャのAccess Unit Delimiterが何処に存在するかを、把握することが非常に重要になる。以上がMPEG4−AVC形式のビデオストリームの構成である。
<Clip情報>
続いて拡張子.clpiが付与されたファイルについて説明する。拡張子.clpiが付与されたファイル(00001.clpi,00002.clpi,00003.clpi・・・・・)は、Clip情報を格納している。Clip情報は、個々のAVClipについての管理情報である。図10は、Clip情報の内部構成を示す図である。本図の左側に示すようにClip情報は、
i)AVClipファイルの属性情報を格納した『ClipInfo()』、
ii)ATC Sequence,STC Sequenceに関する情報を格納した『Sequence Info()』
iii)Program Sequenceに関する情報を格納した『Program Info()』
iv)『Characteristic Point Info(CPI())』からなる。
図中の引き出し線cu1は、i番目のProgram Sequence(Program Sequence(i))の構成をクローズアップしている。本引き出し線に示すように、Program Sequence(i)に対するProgram Infoは、Stream_PIDと、Stream_Coding_Infoとの組みをNs(i)個配列してなる(図中のStream_PID[i](0)、Stream_Coding_Info(i,0)〜Stream_PID[i](Ns(i)−1)、Stream_Coding_Info(i,Ns(i)−1))。
図11(a)は、ビデオストリームについてのStream_Coding_Infoを示し、図11(b)は、オーディオストリームについてのStream_Coding_Infoを示す。ビデオストリームのStream_Coding_Infoは、ビデオストリームの符号化方式が、MPEG4−AVC、MPEG2−Videoの何れであるかを示す『Stream_Coding_type』と、ビデオストリームの表示方式が480i,576i,480p,1080i,720p,1080pの何れであるかを示す『Video_format』,ビデオストリームのフレームレートが23.976Hz,29.97Hz,59.94Hzの何れであるかを示す『frame_rate』、ビデオストリームにおけるピクチャのアスペクト比が4:3,16:9の何れであるかを示す『aspect_ratio』を含む。
<CPI(EP_map)>
図10に戻って、CPIの説明を行う。図中の引き出し線cu2は、CPIの構成をクローズアップしている。引き出し線cu2に示すように、CPIはEP_mapからなる。EP_mapは、Ne個のEP_map_for_one_stream_PID(EP_map_for_one_stream_PID(0)〜EP_map_for_one_stream_PID(Ne−1))からなる。これらEP_map_for_one_stream_PIDは、AVClipに属する個々のエレメンタリストリームについてのEP_mapである。EP_mapは、1つのエレメンタリストリーム上において、IピクチャのAccess Unit Delimiterが存在するエントリー位置のパケット番号(SPN_EP_start)を、エントリー時刻(PTS_EP_start)と対応づけて示す情報である。図中の引き出し線cu3は、EP_map_for_one_stream_PIDの内部構成をクローズアップしている。
図中の引き出し線cu4は、EP_Highの内部構成をクローズアップしている。この引き出し線に示すように、EP_High(i)は、EP_Lowに対する参照値である『ref_to_EP_Low_id[i]』と、IピクチャのPTSの上位ビットを示す『PTS_EP_High[i]』と、IピクチャのSPNの上位ビットを示す『SPN_EP_High[i]』とからなる。ここでiとは、任意のEP_Highを識別するための識別子である。
『is_angle_change_point』は、Entry Pointにて指定されたIピクチャが、他のAVClipからの進入点になるか否かを示すフラグである。図12は、AVClipへの進入、AVClipからの脱出についての概念を示す図である。ここでAVClipの進入点とは、あるAVClipを構成するTSパケットを光ピックアップが読み取っている際、その光ピックアップをシークさせて、別のAVClipを構成するTSパケットの記録位置に光ピックアップを移動させることをいう。図12における矢印er1は、AVClipへの進入時における、光ピックアップの移動を模式的に示す。この進入時において、is_angle_change_point“=1”のEntry Pointで示されるTSパケットは、進入可能な位置として解釈される。
図5、図8に示したビデオストリームに対し、EP_mapがどのように設定されるかについて説明する。図13は、図5のビデオストリームに対するEP_map設定を示す図である。第1段目は、表示順序に配置された複数のピクチャを示し、第2段目は、そのピクチャにおける時間軸を示す。第4段目は、BD−ROM上のTSパケット列を示し、第3段目は、EP_mapの設定を示す。第2段目における時間軸のt1、t2、t3、t4、t5に、Iピクチャが存在する場合、これらt1〜t5が、EP_mapにおいてPTS_EP_startとして設定されることになる。一方、ビデオストリームのAccess Unit DelimiterがBD−ROMにおけるTSパケット列のn1、n2、n3、n4、n5に存在する場合、これらn1〜n5が、EP_mapにおいてSPN_EP_startとして設定される。これらt1〜t5、n1〜n5にあたるEntry Point#1〜Entry Point#5のうち、Entry Point#1、Entry Point#3は、IDRピクチャに対応しているので、is_angle_change_pointは“1”に設定される。それ以外のEntry Point#2、Entry Point#4、Entry Point#5におけるis_angle_change_pointは、“0”に設定される。
図14左側のEP_Low(0)〜(Nf−1)のうち、EP_Low(i)〜(i+1)のPTS_EP_Lowは、t1〜t5の下位ビットを示す。EP_Low(0)〜(Nf−1)のうち、EP_Low(i)〜(i+1)のSPN_EP_Highは、n1〜n5の下位ビットを示す。そしてEP_Low(i)〜(i+1)におけるis_angle_change_point(i)〜(i+1)のうち、(i),(i+2)は、対応するIピクチャがIDRピクチャであるので、is_angle_change_pointは“1”に設定されている。(i+1),(i+3),(i+4)は、対応するIピクチャがNon−IDR Iピクチャであるので、is_angle_change_pointは“0”に設定されている。
ここで図中のIn_timeから、飛込再生を実行する場合を考える。このIn_timeが飛び込み位置であるとすると、再生装置は、この飛び込み位置に最も近いEntry Pointであって、is_angle_change_pointが“1”に設定されているものを判定する。本図では、時刻t3にあたるEntry Pointが、is_angle_change_point“=1”に設定されているので、このPTS_EP_start=t3にあたるEntry Point#3からSPN_EP_start=n3を取り出し、AVClipを構成するTSパケットのうち、n3以降を読み出してデコーダに供給する。こうすることによりビデオストリーム先頭にまで読出範囲を拡大することなく、Iピクチャにあたるピクチャのデコードに必要な全ての参照ピクチャをデコーダ内に準備しておくことができる。
“1時間経過後”を示すIn_timeから飛込再生を実行する場合、15分前のt3まで読出範囲を拡大するだけで、飛込再生のデコードに必要な参照ピクチャを、デコーダ内に準備することができるので、読出範囲の必要最低限の拡大により、BD−ROM上のMPEG4−AVC形式のビデオストリームを自由な位置から再生してゆくことができる。これにより、BD−ROMを用いた映画作品の頒布という用途に、MPEG4−AVCを利用することができ、MPEG4−AVCの用途を大きく広げることができる。
<PlayList情報>
拡張子“mpls”が付与されたファイル(00001.mpls,00002.mpls,00003.mpls・・・・・)は、PlayList情報を格納したファイルである。PlayList情報は、AVClipを参照してPlayListと呼ばれる再生経路を定義する情報である。図16は、PlayList情報の構成を示す図であり、本図の左側に示すように、PlayList情報は、複数のPlayItem情報からなる。PlayItemとは、1つ以上のAVClip時間軸上において、In_Time,Out_Timeを指定することで定義される再生区間である。PlayItem情報を複数配置させることで、複数再生区間からなるPlayList(PL)が定義される。図中の破線hs1は、PlayItem情報の内部構成をクローズアップしている。本図に示すようにPlayItem情報は、対応するClip情報を示す『Clip_information_file_name』と、対応するAVClipの符号化方式を示す『Clip_codec_indentifier』と、『In_time』と、『Out_time』とからなる。図17は、AVClipと、PlayList情報との関係を示す図である。第1段目はAVClipがもつ時間軸を示し、第2段目は、PlayListがもつ時間軸(PL時間軸という)を示す。PlayList情報は、PlayItem#1,#2,#3という3つのPlayItem情報を含んでおり、これらPlayItem#1,#2,#3のIn_time,Out_timeにより、3つの再生区間が定義されることになる。これらの再生区間を配列させると、AVClip時間軸とは異なる時間軸が定義されることになる。これが第2段目に示すPL時間軸である。このように、PlayItem情報の定義により、AVClipとは異なる時間軸の定義が可能になる。
<再生装置の内部構成>
図18は、本発明に係る再生装置の内部構成を示す図である。本発明に係る再生装置は、本図に示す内部構成に基づき、工業的に生産される。本発明に係る再生装置は、主としてシステムLSIと、ドライブ装置という2つのパーツからなり、これらのパーツを装置のキャビネット及び基板に実装することで工業的に生産することができる。システムLSIは、再生装置の機能を果たす様々な処理部を集積した集積回路である。こうして生産される再生装置は、BDドライブ1、Arrivaltime Clock Counter2、Sourcede−packetetizer3、PID Filter4、Transport Buffer5、Multiplexed Buffer6、Coded Picture Buffer7、ビデオデコーダ8、Decoded Picture Buffer10、ビデオプレーン11、Transport Buffer12、Coded Data Buffer13、Stream Graphics Processor14、Object Buffer15、Composition Buffer16、Composition Controller17、Presentation Graphicsプレーン18、CLUT部19、Transport Buffer20、Coded Data Buffer21、Stream Graphics Processor22、Object Buffer23、Composition Buffer24、Composition Controller25、Intaractive Graphicsプレーン26、CLUT部27、合成部28、合成部29、スイッチ30、Network Device31、Local Storage32、Arrival Time Clock Counter33、Source De−Packetizer34、PIDフィルタ35、スイッチ36、Transport Buffer37、Elementary Buffer38、オーディオデコーダ39、Transport Buffer40、バッファ41、テキスト字幕デコーダ42、シナリオメモリ43、制御部44、PSRセット46から構成される。本図における内部構成は、MPEGのT−STDモデルをベースとしたデコーダモデルであり、ダウンコンバートを想定した含めたデコーダモデルになっている。
Arrival time Clock Counter2は、27MHzの水晶発振器(27MHz X−tal)に基づき、Arrival Time Clockを生成する。Arrival Time Clockとは、TSパケットに付与されたATSの基準となる時間軸を規定するクロック信号である。
Transport Buffer(TB)5は、ビデオストリームに帰属するTSパケットがPIDフィルタ4から出力された際、一旦蓄積されるバッファである。
Coded Picture Buffer(CPB)7は、符号化状態にあるピクチャ(Iピクチャ、Bピクチャ、Pピクチャ)が格納されるバッファである。
Decoded Picture Buffer10は、復号されたピクチャが書き込まれるバッファである。
ビデオプレーン11は、非圧縮形式のピクチャを格納しておくためのプレーンである。プレーンとは、再生装置において一画面分の画素データを格納しておくためのメモリ領域である。ビデオプレーン11における解像度は1920×1080であり、このビデオプレーン11に格納されたピクチャデータは、16ビットのYUV値で表現された画素データにより構成される。
Coded Data Buffer(CDB)13は、PGストリームを構成するPESパケットが格納されるバッファである。
Stream Graphics Processor(SGP)14は、グラフィクスデータを格納したPESパケット(ODS)をデコードして、デコードにより得られたインデックスカラーからなる非圧縮状態のビットマップをグラフィクスオブジェクトとしてObject Buffer15に書き込む。
Composition Buffer16は、グラフィクスデータ描画のための制御情報(PCS)が配置されるメモリである。
Graphics Controller17は、Composition Buffer16に配置されたPCSを解読して、解読結果に基づく制御をする。
Transport Buffer(TB)20は、IGストリームに帰属するTSパケットが一旦蓄積されるバッファである。
Coded Data Buffer(CDB)21は、IGストリームを構成するPESパケットが格納されるバッファである。
Object Buffer23は、Stream Graphics Processor22のデコードにより得られたグラフィクスオブジェクトが配置される。
Graphics Controller25は、Composition Buffer24に配置された制御情報を解読して、解読結果に基づく制御をする。
Interactive Graphicsプレーン26は、Stream Graphics Processor(SGP)22によるデコードで得られた非圧縮グラフィクスが書き込まれる。本プレーンにおける解像度は1920×1080であり、Intaractive Graphicsプレーン26中の非圧縮グラフィクスの各画素は8ビットのインデックスカラーで表現される。CLUT(Color Lookup Table)を用いてかかるインデックスカラーを変換することにより、Intaractive Graphicsプレーン26に格納された非圧縮グラフィクスは、表示に供される。
合成部28はビデオプレーン11に格納された非圧縮状態のフレーム画像と、Presentation Graphicsプレーン18に格納された非圧縮状態のグラフィクスオブジェクトとを合成させる。かかる合成により、動画像上に、字幕が重ね合わされた合成画像を得ることができる。
スイッチ30は、BD−ROMから読み出されたTSパケット、Local Storage32から読み出されたTSパケットの何れか一方を、選択的にTransport Buffer20に供給する。
Local Storage32は、様々な記録媒体及び通信媒体から供給されたコンテンツを格納しておくためのハードディスクである。Network Device31により確立されたコネクションを通じてwebサイトからダウンロードされたコンテンツ等も、このLocal Storage32に格納される。
スイッチ36は、BD−ROMから読み出されたTSパケット、Local Storage32から読み出されたTSパケットのどちらかをオーディオデコーダ39側に許可要求する。
Transport Buffer(TB)37は、オーディオストリームに帰属するTSパケットを蓄積する。
オーディオデコーダ39は、Elementary Buffer38から出力されたPESパケットを復号して、非圧縮形式のオーディオデータを出力する。
Transport Buffer(TB)40は、テキスト字幕ストリームに帰属するTSパケットを蓄積する。
テキスト字幕デコーダ42は、バッファ41に読み出されたPESパケットをデコードして、表示に供する。このデコードは、Local Storage32から別途読み出されるフォントを用いて、テキスト字幕ストリーム中のテキスト文字列を、ビットマップに展開することでなされる。デコードにより得られたテキスト字幕は、Presentation Graphicsプレーン18に書き込まれる。
制御部44は、命令ROMと、CPUとからなり、命令ROMに格納されているソフトウェアを実行して、再生装置全体の制御を実行する。この制御の内容は、ユーザ操作に応じて発生するユーザイベント、及び、PSRセット46における各PSRの設定値に応じて動的に変化する。
PSR(7)は、0〜255の値に設定されることで、現在の再生時点が属するPlay Item(以下カレントPIという)の番号を示す。
PSR(8)は、0〜OxFFFFFFFFの値に設定されることで、45KHzの時間精度を用いて現在の再生時点(カレントPTM)を示す。
Decoded Picture Buffer10には、復号化されたピクチャが複数格納される。図19は、Decoded Picture Buffer10の内部構成を示す図であり、本図に示すように、Decoded Picture Buffer10には復号化されたピクチャとして、参照ピクチャと、非参照ピクチャとが格納される。参照ピクチャには、短時間参照ピクチャと、長時間参照ピクチャとがある。短時間参照ピクチャは、FIFO領域に格納され、先入先出し式に扱われる。一方、長時間参照ピクチャは、FIFO領域に格納されず、先入先出し式には扱われない。
倍速再生は、ビデオストリームを構成する複数ピクチャのうち、Iピクチャ(IDRピクチャ、Non−IDR Iピクチャを含む)を順次再生してゆくことにより、実現することができる。ここでEP_mapのEntry Pointには、IDRピクチャ及びNon−IDR Iピクチャの位置及びサイズが示されているので、ビデオストリームのうちIピクチャや、Iピクチャのみを読み込んで再生することにより、2倍速、3倍速といった特殊再生を実現することができる。
これらの制御の根幹にあるのは、時間情報からIピクチャアドレスを導く処理である。図22は、時間情報をIピクチャアドレスに変換する手順を示すフローチャートである。本フローチャートにおいて、飛込再生の飛込位置を示す時間情報をIn_timeと表記している。図22のステップS1では、In_timeをPTS_EP_startとし、ステップS2では、PTS_EP_startに最も近い、EP_High_id、EP_Low_idの組みを求める。ここでEP_High_idとは、In_time以前の時点を示すEP_Highであって、In_timeに最も近いものを特定する識別子である。一方、EP_Low_idとは、EP_High[EP_High_id]以降、In_time以前の時点を示すEP_Lowであって、In_timeに最も近いものを特定する識別子である。
こうしてEP_Low_idを求めれば、ステップS3〜ステップS5からなるループ処理に移行する。EP_Low_idを変数jに代入した上で(ステップS3)、ステップS4〜ステップS5からなるループ処理を実行するというものである。このループ処理は、ステップS5がYesと判定されるまで、変数jのデクリメント(ステップS4)を繰り返すものである。このステップS5は、変数jにて特定されるEntry Pointのis_angle_change_point(PTS_EP_Low[j].is_angle_change_point)が1であるか否かを判定するものであり、変数jにて特定されるEntry Pointのis_angle_change_pointが連続して“0”を示している限り、このループ処理は繰り返し実行される。
その後、PlayItem#xがカレントPlayListの最後のPIであるかの判定がなされる(ステップS109)。
以上のように本実施形態によれば、is_angle_change_point“=1”のEntry Pointにより指示されるピクチャまで読出範囲を広げれば、IDRピクチャをビデオデコーダ8に供給することができ、飛込再生時のデコードに必要な全ての参照ピクチャをDecoded Picture Buffer10内に準備することができるので、飛込再生時における読出範囲の拡大を必要最小限にすることができる。
(第2実施形態)
第1実施形態では、EP_mapは、AVClipにおける進入点を指示する、is_angle_change_pointをEP_mapのデータ構造と共に開示した。第2実施形態では、is_angle_change_pointにより指示される進入点及び脱出点により実現される、アングル切り換え操作について説明する。アングル切り換え操作とは、第1実施形態で述べたように、現在再生中のAVClipからの「脱出」と、別のAVClipへの「進入」とからなる操作のことである。
『number_of_angles』は、マルチアングル区間を示すよう『is_multi_angles』が設定されている場合、このマルチアングル区間を構成するアングル数を示す。
『is_seamless_angle_change』は、シームレスなアングル切り換えが意図されているかを示す。シームレスなアングル切り換えが意図されているかどうかは、AVClipが、後述するインターリーブ記録により記録されているか否かによって変わる。従って、インターリーブ記録により記録されている場合、『is_seamless_angle_change』はオンに設定され、記録されてない場合、『is_seamless_angle_change』はオフに設定される。
『Clip_Information_file_name[angle_id]』には、アングル区間を構成するAVClipのファイル名が記述される。
『Clip_codec_identifier[angle_id]』は、アングル情報のClip_Information_file_nameにて記述されたファイル名のAVClipにおける符号化方式を示す。
図26(a)は、PlayItem情報の4つのClip_Information_file_nameによりなされた一括指定を示す図である。本図において第1段目〜第4段目は、4つのAVClip時間軸(AVClip#1,#2,#3,#4の時間軸)を示し、第5段目は、PL時間軸を示す。PlayItem情報が有する、4つのClip_Information_file_nameにて、これら4つの時間軸が指定されている。こうすることで、PlayItemが有するIn_time,Out_timeにより、択一的に再生可能な4つの再生区間が定義されることになる。これにより、PL時間軸には、切り換え可能な複数アングル映像からなる区間(いわゆるマルチアングル区間)が定義されることになる。In_time,Out_timeにより指定される、4つのAVClip上の4つの再生区間は、PlayList時間軸において同じ再生時間帯に位置することになる。
図24に示したAVClip#1〜AVClip#4は、4つのアングルから撮影された動画データであるものとする。この場合AVClip#1〜#4は、
AVClip#1⇒
AVClip#1.1/5,AVClip#1.2/5,AVClip#1.3/5,AVClip#1.4/5,AVClip#1.5/5
AVClip#2⇒
AVClip#2.1/5,AVClip#2.2/5,AVClip#2.3/5,AVClip#2.4/5,AVClip#2.5/5
AVClip#3⇒
AVClip#3.1/5,AVClip#3.2/5,AVClip#3.3/5,AVClip#3.4/5,AVClip#3.5/5
AVClip#4⇒
AVClip#4.1/5,AVClip#4.2/5,AVClip#4.3/5,AVClip#4.4/5,AVClip#4.5/5
という5つのエクステントに分割される。
図26(b)は、各AVClipを構成するエクステントを、PlayList時間軸上に記述した図である。各AVClipを構成する5つのエクステントは、同じ再生時間帯に位置する。つまり、AVclip#1.1/5、AVclip#2.1/5、AVclip#3.1/5、AVclip#4.1/5は同じ時間帯に位置する。AVclip#1.2/5、AVclip#2.2/5、AVclip#3.2/5、AVclip#4.2/5は同じ時間帯に、AVclip#1.3/5、AVclip#2.3/5、AVclip#3.3/5、AVclip#4.3/5は同じ時間帯に位置する。
図27(a)は、マルチアングル区間を構成する4つのAVClipがBD−ROM上でどのように配置されているかという、アロケーションイメージを示す。ここで4つのAVClipのそれぞれが、5つエクステントから構成されているとすると、各AVClipを構成する5つの分割部分のうち、1つ目のもの(AVClip#1.1/5,AVClip#1.2/5.AVClip#3.1/5,AVClip#4.1/5)がひとまとまりに記録される。これらAVClip#1.1/5〜AVClip#4.1/5は、同じ時間帯に再生されるべきAVClipの一部である。このように同じ時間帯に再生されるべきエクステントが、集められ、連続することになる。かかるインターリーブ記録により、AVClip#1を構成するエクステントと、AVClip#2を構成するエクステントとが交互に現れるので、例えばAVClip#1.1/5、AVClip#2.1/5をまとめて読み出させれば、AVClip#1.1/5、AVClip#2.1/5のうち一方を択一的にデコードすることができる。これによりユーザ操作に応じたアングル切り換えが実現されることになる。
以上のようにAVClip#2を構成する各エクステントの先頭は、is_angle_change_point“=1”に設定されたEntry Pointにより指示されることになる。これによりエクステントの先頭は、他のAVClipからの進入点として解釈されることになる。エクステントの末尾は、is_angle_change_point“=1”により指定された点の直前にあたるから、他のAVClipへの脱出点として解釈される。図29は、AVClip#2を構成する各エクステントについてのEntry Point設定であるが、AVClip#1を構成する各エクステント、AVClip#3,#4,#5を構成する各エクステントの先頭も、AVClip#2同様、is_angle_change_point“=1”に設定されたEntry Pointにより指示される。AVClip#1,#2,#3,#4,#5を構成する各エクステントの末尾と、エクステントの先頭との間の境界において、脱出、進入が可能になるので、かかるシームレスなアングル切換が可能になる。
PSR(3)の設定値が1である場合、PlayItem情報において互換部分にあるClip_information_file_nameが参照され、このClip_information_file_nameに記述されているファイル名00001.clpiのClip情報がメモリに読み出されることになる。そしてこのClip情報の中にあるEntry Pointが参照され、AVClip(00001.m2ts)の再生がなされる。
PSR(3)の設定値が3である場合、PlayItem情報においてAngle情報[3]内にあるClip_information_file_nameが参照され、このClip_information_file_nameに記述されているファイル名00003.clpiのClip情報がメモリに読み出されることになる。そしてこのClip情報の中にあるEntry Pointが参照され、AVClip(00003.m2ts)の再生がなされる。
続いて図25のPlayItem情報に基づく、制御部44の処理手順について説明する。図31は、第2実施形態に係るPlayList情報再生手順を示すフローチャートである。
このようにPSR(3)の設定値に応じて、異なるAVClipをアクセスすることにより、アングル区間の選択的な再生が実現される。
このステップS50〜ステップS52の繰り返しにより、1つのエクステントの内部において、読出先を示すカレントアドレスは、順次更新されてゆく。
ここでアングルキーの押下によりアングル切り換えがなされたなら、PSR(3)の数値に、“1”を加えた値を、変数vに代入する。数値ボタンの押下によりアングル切り換えがなされた場合は、その押下された数値キーに対応する値を変数vに代入する。
ステップS52がYesになれば、ステップS55〜ステップS57の処理を実行する。ステップS55は、準備フラグが=1であるか否かの判定であり、もし準備フラグが0であれば、カレントAVClipの次のエクステントをカレントエクステントに設定し(ステップS56)、カレントエクステントの先頭Access Unit Delimiterのアドレスをカレントアドレスに設定した上で(ステップS57)、ステップS50〜ステップS52からなるループ処理に戻る。これにより準備フラグが=0である場合は、カレントアングルに属する次のエクステントが、読み込まれることになる。
先ず初めに、切換先アングルのエクステントのうち、カレントエクステントの次の時間帯に再生されるものを、エクステントdstに設定する(ステップS58)。そしてエクステントdstの先頭Access Unit Delimiterを指示するEPtopを特定する(ステップS59)。その後、EPtopのis_angle_change_pointが=1であるか否かを判定する(ステップS60)。この判定は、エクステントdstの先頭が、進入点になりうるかどうかの判定を意味する。もしis_angle_change_pointが=0であるなら、準備フラグを=1に設定したままステップS56に移行する。ステップS56〜ステップS57の処理は、カレントアングルに属する次のエクステントの読み込みである。かかる処理により、カレントアングルの再生は継続することになる。つまり、エクステントdstが、is_angle_change_point“=1”に設定された進入点でないなら、カレントアングルの再生を継続するのである。
図34は、アングル映像切り換え操作がなされた際のBD−ROMからの読み出しを示す図である。AVClip#1を構成する5つのエクステントのうち、AVClip#1.2/5が読み出されている途中で、アングル切換操作を意図する操作がユーザによりなされたとする(ステップS51でYes)。これにより準備フラグは1に設定される(ステップS54)。この操作は、AVClip#1にあたるアングル映像からAVClip#2にあたるアングル映像への切り換えを意図するものである。切り換え操作は、AVclip#1.2/5の読み出しの途中でなされていたため、切り換え時点の次の時間帯に再生されるエクステントとして、AVclip#2.3/5が、エクステントdstとして特定される(ステップS58)。このエクステントdstの先頭は、PTS_EP_start=t3にあたるEntry Point#3により指示されているので、このAVClip#2のEntry Point#3におけるis_angle_change_pointが参照される(ステップS60)。ここでEntry Point#3のis_angle_change_pointは=1であり、進入点として解釈することができる。故に、エクステントdstにあたるAVclip#2.3/5を、カレントエクステントに設定して(ステップS61)、このカレントエクステント先頭のAccess Unit Delimiterのアドレスを、カレントアドレスに設定した上で(ステップS62)、AVClip#2を示す“2”を、PSR(3)を設定する(ステップS64)。こうすることにより、以降、AVClip#2を構成するAVclip#2.3/5、AVclip#2.4/5、AVclip#2.5/5が読み出されることになる。
また、AVclip#2.3/5への切り換えが可能となる期間は、PlayList時間軸において、同じ時間帯に位置するAVclip#1のエクステント(AVclip#1.3/5)の再生が開始されるまでである。即ち、同じ時間帯に位置するエクステント(AVclip#1.3/5)の再生が開始されれば、もはやAVclip#1.3/5への再生切り換えを実現することはできない。
第1実施形態は、IDRピクチャが15分、30分置きに置かれている場合の飛込再生を効率化するための改良を提案した。これに対し第3実施形態は、ビデオストリームを構成する複数のピクチャのうち、どれをIDRピクチャにするかという、IDRピクチャ選択を提案する。つまりエンコード条件を定めるにあたって、どのピクチャをIDRピクチャにするという最適な選択を提案する。MPEG4−AVC形式のビデオストリームは、MPEG4−AVCに多重化され、Clip情報を介してPlayList情報により参照される。本実施形態におけるIDRピクチャの選択は、このPlayList情報の性質を考慮に入れたものである。
PlayList情報を構成する複数のPlayItem情報のうち、先頭のPlayItem情報のIn_timeにて指定されるピクチャは、IDRピクチャであり、このIDRピクチャは、is_angle_change_point“=1”に設定されたEntry Pointにより指示されるので、制御部44は、In_timeに対応するEntry Pointに示されるSPN_EP_start以降を読み出すことにより、IDRピクチャをビデオデコーダ8に供給する。ビデオデコーダ8へのIDRピクチャ供給により、Decoded Picture Buffer10のクリアがなされる。
また、PLMark情報によりチャプターが規定されているので、本実施形態に係る再生装置は、PlayList情報を用いたチャプターサーチ機能及びチャプタースキップ機能を実行する。チャプターサーチ機能とは、PLMark情報に記述されているref_to_PlayItem_Idに対応するPlayItem情報を、複数のPlayItem情報の中から特定して、特定したPlayItem情報が定義されているAVClipにおいて、PLMark情報に記述されたmark_time_stampに示される位置からの飛込再生を行うものであり、この際、制御部44は、複数のEntry Pointのうち、PLMark情報に記述されたmark_time_stampに最も近いPTS_EP_startをもつEntry Pointを特定して、特定したEntry PointのSPN_EP_startに対応するIピクチャアドレスからの再生を行わせる。
本フローチャートにおいて先ずチャプターメニューにおけるチャプター選択を待ち(ステップS124)、チャプター選択がなされれば、選択されたチャプターにあたるPLMark情報をカレントPlayListMarkとする(ステップS125)。ステップS126では、カレントPlayListMarkのref_to_PlayItem_Idに記述されているPIを、PlayItem#xに設定し、ステップS127では、PlayItem#xのClip_information_file_nameで指定されるClip情報を読み込む。ステップS128では、カレントClip情報のEP_mapを用いて、カレントPlayListMarkのmark_time_stampを、Iピクチャアドレスuに変換する。ここでPLMark情報のmark_time_stampで指示されているピクチャは、is_angle_change_point“=1”に設定されたEntry Pointにより指示されている。そのため、Iピクチャアドレスuは、IDRピクチャのアドレスを指示することになる。
以上の説明は、本発明の全ての実施行為の形態を示している訳ではない。下記(A)(B)(C)(D)・・・・・の変更を施した実施行為の形態によっても、本発明の実施は可能となる。本願の請求項に係る各発明は、以上に記載した複数の実施形態及びそれらの変形形態を拡張した記載、ないし、一般化した記載としている。拡張ないし一般化の程度は、本発明の技術分野の、出願当時の技術水準の特性に基づく。
2 Arrival time Clock Counter
3 Source de−packetetizer
4 PID Filter4
5 Transport Buffer5
6 Multiplexed Buffer6
7 Coded Picture Buffer7
8 ビデオデコーダ8
10 Decoded Picture Buffer10
11 ビデオプレーン11
12 Transport Buffer12
13 Coded Data Buffer13
14 Stream Graphics Processor14
15 Object Buffer15
15 Composition Buffer16
17 Composition Controller17
18 Presentation Graphicsプレーン18
19 CLUT部19
20 Transport Buffer20
21 Coded Data Buffer21
22 Stream Graphics Processor22
23 Object Buffer23
24 Composition Buffer24
25 Composition Controller25
26 Intaractive Graphicsプレーン26
27 CLUT部27
28 合成部28
29 合成部29
30 スイッチ30
31 Network Device31
32 Local Storage32
33 Arrival Time Clock Counter33
34 Source De−Packetizer34
35 PIDフィルタ
36 スイッチ
37 Transport Buffer
38 Elementary Buffer
39 オーディオデコーダ
40 Transport Buffer
41 バッファ
42 テキスト字幕デコーダ
43 シナリオメモリ
44 制御部
46 PSRセット
100 BD−ROM
200 再生装置
300 リモコン
400 テレビ
以降、本発明に係る記録媒体の実施形態について説明する。先ず始めに、本発明に係る記録媒体の実施行為のうち、使用行為についての形態を説明する。図1は、本発明に係る記録媒体の、使用行為についての形態を示す図である。図1において、本発明に係る記録媒体は、BD-ROM100である。このBD-ROM100は、再生装置200、リモコン300、テレビ400により形成されるホームシアターシステムに、映画作品を供給するという用途に供される。
本図の第4段目にBD-ROMを示し、第3段目にBD-ROM上のトラックを示す。本図のトラックは、BD-ROMの内周から外周にかけて螺旋状に形成されているトラックを、横方向に引き伸ばして描画している。このトラックは、リードイン領域と、ボリューム領域と、リードアウト領域とからなる。本図のボリューム領域は、物理層、ファイルシステム層、応用層というレイヤモデルをもつ。ディレクトリ構造を用いてBD-ROMの応用層フォーマット(アプリケーションフォーマット)を表現すると、図中の第1段目のようになる。この第1段目においてBD-ROMには、Rootディレクトリの下に、BDMVディレクトリがある。
STREAMディレクトリには、いわばデジタルストリーム本体となるファイル群を格納しているディレクトリであり、拡張子m2tsが付与されたファイル(00001.m2ts,00002.m2ts,00003.m2ts)が存在する。
CLIPINFディレクトリには、拡張子clpiが付与されたファイル(00001.clpi,00002.clpi,00003.clpi)が存在する。
<AVClipの構成>
続いて拡張子.m2tsが付与されたファイルについて説明する。図3は、拡張子.m2tsが付与されたファイルがどのように構成されているかを模式的に示す図である。拡張子.m2tsが付与されたファイル(00001.m2ts,00002.m2ts,00003.m2ts・・・・・)は、AVClipを格納している。AVClipは(中段)、複数のビデオフレーム(ピクチャpj1,2,3)からなるビデオストリーム、複数のオーディオフレームからなるオーディオストリームを(上1段目)、PESパケット列に変換し(上2段目)、更にTSパケットに変換し(上3段目)、同じく字幕系のプレゼンテーショングラフィクスストリーム(下1段目のPGストリーム)及び対話系のインタラクティブグラフィクスストリーム(下2段目のIGストリーム)をTSパケットに変換して(下3段目)、これらを多重化することで構成される。
AVClipを構成するTSパケットは、第2段目に示すようにTS_extra_header(図中の「EX」)が付される。
<ビデオストリーム>
続いてMPEG4-AVC形式のビデオストリームについて説明する。MPEG4-AVC形式のビデオストリームは、複数のピクチャからなる。図5(a)は、符号化順序に配置される複数のピクチャを示す。
predictive(B)形式のスライスデータからなるピクチャをいい、Pピクチャとは、Predictive(P)形式のスライスデータからなるピクチャをいう。Bピクチャには、refrenceBピクチャと、nonrefrenceBピクチャとがある。
<GOP構造>
図5(b)は、図5(a)に示したビデオストリームのGOP構造を示す図である。本図においてIDRピクチャと、このIDRピクチャに続くBピクチャ、Pピクチャは、1つのClosed-GOPを構成する。一方、Non-IDRIピクチャと、Non-IDR Iピクチャに続くBピクチャ、Pピクチャは、1つのOpen-GOPを構成する。
<IDRピクチャ>
IDRピクチャをビデオストリーム中に挿入することの技術的意義について説明する。Cloed-GOPを規定するIDRピクチャは、1GOP毎というように、決まった単位で出現するものではない。1つのビデオストリームにおいてどの部分に、何個IDRピクチャを置くかはビデオストリームのエンコード条件によって変わる。よってエンコード条件によっては、IDRピクチャが殆ど置かれないこともあるし、IDRピクチャが多く置かれることもある。ここでIDRピクチャは、自身の圧縮符号化に、短時間参照ピクチャ、長時間参照ピクチャを利用することができないので、ビデオストリームに挿入されるIDRピクチャの数が多ければ多いほど、ビデオストリームの圧縮率は伸び悩む。つまりIDRピクチャの挿入数が多いと、その圧縮率の利点が損なわれてしまう。しかしビデオストリームの途中にこのIDRピクチャが、少なくとも1つ挿入されていることは、ストリームの途中からの特殊再生をおおいに効率化する。
<BD-ROMへの記録>
続いてIDRピクチャ、Non-IDR Iピクチャが、どのようにしてTSパケットに変換され、BD-ROMに記録されるかについて説明する。図9は、IDRピクチャ、Non-IDRIピクチャがTSパケットに変換される過程を示す図である。図中の第1段目は、IDRピクチャ、Non-IDR Iピクチャを示す。第2段目は、MPEG4-AVCに規定されたAccessUnitを示す。IDRピクチャ、Non-IDR Iピクチャを構成する複数のスライスデータは、シーケンシャルに配置され、AUD(Access UnitDelimiter),SPS(Sequence Parameter Set),PPS(Picture ParameterSet),SEI(Supplemental Enhanced info)が付加されることにより、Access Unitに変換されることになる。
第3段目はNAL unitを示す。第2段目におけるAUD,SPS,PPS,SEIに対し、ヘッダを付加することにより、AUD,SPS,PPS,SEI、スライスデータは、それぞれNAL
unitに変換されることになる。NAL unitとは、MPEG4-AVCのネットワーク抽象レイヤ(Network Abstraction Layer)において、規定された単位であり、ITU-T
Recommendation H.264等の様々な文献に記載されているので、詳細についてはこれらの文献を参照されたい。ここで重要であるのは、AUD,SPS,PPS,SEI,スライスデータは、それぞれ独立したNALunitに変換されているので、AUD,SPS,PPS,SEI,スライスデータのそれぞれは、ネットワーク抽象レイヤにおいて、それぞれ独立に取り扱われるという点である。
1つのGOPを再生するには、そのGOPの先頭に位置するIDRピクチャ、Non-IDR Iピクチャを構成するNAL unitのうち、Access UnitDelimiterを含むものをデコーダに投入せねばならない。つまりAccess Unit Delimiterを含むNAL unitが、IDRピクチャ、Non-IDRIピクチャをデコードするための1つの指標になる。このAccess Unit Delimiterを含むNAL unitを、本実施形態では点(Point)として扱う。そして再生装置は、ビデオストリームを再生するにあたって、AccessUnit Delimiterを含むNAL unitを、Iピクチャを再生するためのエントリー位置として解釈する。従って、AVClipにおいて、飛込再生を実行するには、IDRピクチャ,Non-IDRIピクチャのAccess Unit Delimiterが何処に存在するかを、把握することが非常に重要になる。以上がMPEG4-AVC形式のビデオストリームの構成である。
<Clip情報>
続いて拡張子.clpiが付与されたファイルについて説明する。拡張子.clpiが付与されたファイル(00001.clpi,00002.clpi,00003.clpi・・・・・)は、Clip情報を格納している。Clip情報は、個々のAVClipについての管理情報である。図10は、Clip情報の内部構成を示す図である。本図の左側に示すようにClip情報は、
i)AVClipファイルの属性情報を格納した『ClipInfo()』、
ii)ATC Sequence,STC Sequenceに関する情報を格納した『Sequence Info()』
iii)Program Sequenceに関する情報を格納した『Program Info()』
iv)『Characteristic Point Info(CPI())』からなる。
図中の引き出し線cu1は、i番目のProgram Sequence(Program Sequence(i))の構成をクローズアップしている。本引き出し線に示すように、Program
Sequence(i)に対するProgram Infoは、Stream_PIDと、Stream_Coding_Infoとの組みをNs(i)個配列してなる(図中のStream_PID[i](0)、Stream_Coding_Info(i,0)〜Stream_PID[i](Ns(i)-1)、Stream_Coding_Info(i,Ns(i)-1))。
図11(a)は、ビデオストリームについてのStream_Coding_Infoを示し、図11(b)は、オーディオストリームについてのStream_Coding_Infoを示す。ビデオストリームのStream_Coding_Infoは、ビデオストリームの符号化方式が、MPEG4-AVC、MPEG2-Videoの何れであるかを示す『Stream_Coding_type』と、ビデオストリームの表示方式が480i,576i,480p,1080i,720p,1080pの何れであるかを示す『Video_format』,ビデオストリームのフレームレートが23.976Hz,29.97Hz,59.94Hzの何れであるかを示す『frame_rate』、ビデオストリームにおけるピクチャのアスペクト比が4:3,16:9の何れであるかを示す『aspect_ratio』を含む。
<CPI(EP_map)>
図10に戻って、CPIの説明を行う。図中の引き出し線cu2は、CPIの構成をクローズアップしている。引き出し線cu2に示すように、CPIはEP_mapからなる。EP_mapは、Ne個のEP_map_for_one_stream_PID(EP_map_for_one_stream_PID(0)〜EP_map_for_one_stream_PID(Ne-1))からなる。これらEP_map_for_one_stream_PIDは、AVClipに属する個々のエレメンタリストリームについてのEP_mapである。EP_mapは、1つのエレメンタリストリーム上において、IピクチャのAccessUnit Delimiterが存在するエントリー位置のパケット番号(SPN_EP_start)を、エントリー時刻(PTS_EP_start)と対応づけて示す情報である。図中の引き出し線cu3は、EP_map_for_one_stream_PIDの内部構成をクローズアップしている。
図中の引き出し線cu4は、EP_Highの内部構成をクローズアップしている。この引き出し線に示すように、EP_High(i)は、EP_Lowに対する参照値である『ref_to_EP_Low_id[i]』と、IピクチャのPTSの上位ビットを示す『PTS_EP_High[i]』と、IピクチャのSPNの上位ビットを示す『SPN_EP_High[i]』とからなる。ここでiとは、任意のEP_Highを識別するための識別子である。
『is_angle_change_point』は、Entry Pointにて指定されたIピクチャが、他のAVClipからの進入点になるか否かを示すフラグである。図12は、AVClipへの進入、AVClipからの脱出についての概念を示す図である。ここでAVClipの進入点とは、あるAVClipを構成するTSパケットを光ピックアップが読み取っている際、その光ピックアップをシークさせて、別のAVClipを構成するTSパケットの記録位置に光ピックアップを移動させることをいう。図12における矢印er1は、AVClipへの進入時における、光ピックアップの移動を模式的に示す。この進入時において、is_angle_change_point“=1”のEntryPointで示されるTSパケットは、進入可能な位置として解釈される。
図5、図8に示したビデオストリームに対し、EP_mapがどのように設定されるかについて説明する。図13は、図5のビデオストリームに対するEP_map設定を示す図である。第1段目は、表示順序に配置された複数のピクチャを示し、第2段目は、そのピクチャにおける時間軸を示す。第4段目は、BD-ROM上のTSパケット列を示し、第3段目は、EP_mapの設定を示す。第2段目における時間軸のt1、t2、t3、t4、t5に、Iピクチャが存在する場合、これらt1〜t5が、EP_mapにおいてPTS_EP_startとして設定されることになる。一方、ビデオストリームのAccessUnit DelimiterがBD-ROMにおけるTSパケット列のn1、n2、n3、n4、n5に存在する場合、これらn1〜n5が、EP_mapにおいてSPN_EP_startとして設定される。これらt1〜t5、n1〜n5にあたるEntryPoint#1〜Entry Point#5のうち、Entry Point#1、Entry Point#3は、IDRピクチャに対応しているので、is_angle_change_pointは“1”に設定される。それ以外のEntryPoint#2、Entry Point#4、Entry Point#5におけるis_angle_change_pointは、“0”に設定される。
図14左側のEP_Low(0)〜(Nf-1)のうち、EP_Low(i)〜(i+1)のPTS_EP_Lowは、t1〜t5の下位ビットを示す。EP_Low(0)〜(Nf-1)のうち、EP_Low(i)〜(i+1)のSPN_EP_Highは、n1〜n5の下位ビットを示す。そしてEP_Low(i)〜(i+1)におけるis_angle_change_point(i)〜(i+1)のうち、(i),(i+2)は、対応するIピクチャがIDRピクチャであるので、is_angle_change_pointは“1”に設定されている。(i+1),(i+3),(i+4)は、対応するIピクチャがNon-IDRIピクチャであるので、is_angle_change_pointは“0”に設定されている。
ここで図中のIn_timeから、飛込再生を実行する場合を考える。このIn_timeが飛び込み位置であるとすると、再生装置は、この飛び込み位置に最も近いEntryPointであって、is_angle_change_pointが“1”に設定されているものを判定する。本図では、時刻t3にあたるEntry Pointが、is_angle_change_point“=1”に設定されているので、このPTS_EP_start=t3にあたるEntryPoint#3からSPN_EP_start=n3を取り出し、AVClipを構成するTSパケットのうち、n3以降を読み出してデコーダに供給する。こうすることによりビデオストリーム先頭にまで読出範囲を拡大することなく、Iピクチャにあたるピクチャのデコードに必要な全ての参照ピクチャをデコーダ内に準備しておくことができる。
“1時間経過後”を示すIn_timeから飛込再生を実行する場合、15分前のt3まで読出範囲を拡大するだけで、飛込再生のデコードに必要な参照ピクチャを、デコーダ内に準備することができるので、読出範囲の必要最低限の拡大により、BD-ROM上のMPEG4-AVC形式のビデオストリームを自由な位置から再生してゆくことができる。これにより、BD-ROMを用いた映画作品の頒布という用途に、MPEG4-AVCを利用することができ、MPEG4-AVCの用途を大きく広げることができる。
<PlayList情報>
拡張子“mpls”が付与されたファイル(00001.mpls,00002.mpls,00003.mpls・・・・・)は、PlayList情報を格納したファイルである。PlayList情報は、AVClipを参照してPlayListと呼ばれる再生経路を定義する情報である。図16は、PlayList情報の構成を示す図であり、本図の左側に示すように、PlayList情報は、複数のPlayItem情報からなる。PlayItemとは、1つ以上のAVClip時間軸上において、In_Time,Out_Timeを指定することで定義される再生区間である。PlayItem情報を複数配置させることで、複数再生区間からなるPlayList(PL)が定義される。図中の破線hs1は、PlayItem情報の内部構成をクローズアップしている。本図に示すようにPlayItem情報は、対応するClip情報を示す『Clip_information_file_name』と、対応するAVClipの符号化方式を示す『Clip_codec_indentifier』と、『In_time』と、『Out_time』とからなる。図17は、AVClipと、PlayList情報との関係を示す図である。第1段目はAVClipがもつ時間軸を示し、第2段目は、PlayListがもつ時間軸(PL時間軸という)を示す。PlayList情報は、PlayItem#1,#2,#3という3つのPlayItem情報を含んでおり、これらPlayItem#1,#2,#3のIn_time,Out_timeにより、3つの再生区間が定義されることになる。これらの再生区間を配列させると、AVClip時間軸とは異なる時間軸が定義されることになる。これが第2段目に示すPL時間軸である。このように、PlayItem情報の定義により、AVClipとは異なる時間軸の定義が可能になる。
<再生装置の内部構成>
図18は、本発明に係る再生装置の内部構成を示す図である。本発明に係る再生装置は、本図に示す内部構成に基づき、工業的に生産される。本発明に係る再生装置は、主としてシステムLSIと、ドライブ装置という2つのパーツからなり、これらのパーツを装置のキャビネット及び基板に実装することで工業的に生産することができる。システムLSIは、再生装置の機能を果たす様々な処理部を集積した集積回路である。こうして生産される再生装置は、BDドライブ1、ArrivaltimeClock Counter2、Source
de-packetetizer3、PID Filter4、Transport Buffer5、Multiplexed Buffer6、CodedPicture Buffer7、ビデオデコーダ8、Decoded Picture Buffer10、ビデオプレーン11、Transport Buffer12、CodedData Buffer13、Stream Graphics Processor14、Object Buffer15、Composition Buffer16、CompositionController17、Presentation Graphicsプレーン18、CLUT部19、Transport Buffer20、Coded DataBuffer21、Stream Graphics Processor22、Object Buffer23、Composition Buffer24、CompositionController25、Intaractive Graphicsプレーン26、CLUT部27、合成部28、合成部29、スイッチ30、NetworkDevice31、Local Storage32、Arrival Time Clock Counter33、Source De-Packetizer34、PIDフィルタ35、スイッチ36、TransportBuffer37、Elementary Buffer38、オーディオデコーダ39、Transport Buffer40、バッファ41、テキスト字幕デコーダ42、シナリオメモリ43、制御部44、PSRセット46から構成される。本図における内部構成は、MPEGのT-STDモデルをベースとしたデコーダモデルであり、ダウンコンバートを想定した含めたデコーダモデルになっている。
Arrival time Clock Counter2は、27MHzの水晶発振器(27MHz X-tal)に基づき、Arrival Time Clockを生成する。ArrivalTime Clockとは、TSパケットに付与されたATSの基準となる時間軸を規定するクロック信号である。
Transport Buffer(TB)5は、ビデオストリームに帰属するTSパケットがPIDフィルタ4から出力された際、一旦蓄積されるバッファである。
Coded Picture Buffer(CPB)7は、符号化状態にあるピクチャ(Iピクチャ、Bピクチャ、Pピクチャ)が格納されるバッファである。
Decoded Picture Buffer10は、復号されたピクチャが書き込まれるバッファである。
ビデオプレーン11は、非圧縮形式のピクチャを格納しておくためのプレーンである。プレーンとは、再生装置において一画面分の画素データを格納しておくためのメモリ領域である。ビデオプレーン11における解像度は1920×1080であり、このビデオプレーン11に格納されたピクチャデータは、16ビットのYUV値で表現された画素データにより構成される。
Coded Data Buffer(CDB)13は、PGストリームを構成するPESパケットが格納されるバッファである。
Stream Graphics Processor(SGP)14は、グラフィクスデータを格納したPESパケット(ODS)をデコードして、デコードにより得られたインデックスカラーからなる非圧縮状態のビットマップをグラフィクスオブジェクトとしてObject
Buffer15に書き込む。
Composition Buffer16は、グラフィクスデータ描画のための制御情報(PCS)が配置されるメモリである。
Graphics Controller17は、Composition Buffer16に配置されたPCSを解読して、解読結果に基づく制御をする。
Transport Buffer(TB)20は、IGストリームに帰属するTSパケットが一旦蓄積されるバッファである。
Coded Data Buffer(CDB)21は、IGストリームを構成するPESパケットが格納されるバッファである。
Object Buffer23は、Stream Graphics Processor22のデコードにより得られたグラフィクスオブジェクトが配置される。
Graphics Controller25は、Composition Buffer24に配置された制御情報を解読して、解読結果に基づく制御をする。
Interactive Graphicsプレーン26は、Stream Graphics Processor(SGP)22によるデコードで得られた非圧縮グラフィクスが書き込まれる。本プレーンにおける解像度は1920×1080であり、IntaractiveGraphicsプレーン26中の非圧縮グラフィクスの各画素は8ビットのインデックスカラーで表現される。CLUT(Color Lookup Table)を用いてかかるインデックスカラーを変換することにより、IntaractiveGraphicsプレーン26に格納された非圧縮グラフィクスは、表示に供される。
合成部28はビデオプレーン11に格納された非圧縮状態のフレーム画像と、Presentation Graphicsプレーン18に格納された非圧縮状態のグラフィクスオブジェクトとを合成させる。かかる合成により、動画像上に、字幕が重ね合わされた合成画像を得ることができる。
スイッチ30は、BD-ROMから読み出されたTSパケット、Local Storage32から読み出されたTSパケットの何れか一方を、選択的にTransportBuffer20に供給する。
Local Storage32は、様々な記録媒体及び通信媒体から供給されたコンテンツを格納しておくためのハードディスクである。Network Device31により確立されたコネクションを通じてwebサイトからダウンロードされたコンテンツ等も、このLocalStorage32に格納される。
スイッチ36は、BD-ROMから読み出されたTSパケット、Local Storage32から読み出されたTSパケットのどちらかをオーディオデコーダ39側に許可要求する。
Transport Buffer(TB)37は、オーディオストリームに帰属するTSパケットを蓄積する。
オーディオデコーダ39は、Elementary Buffer38から出力されたPESパケットを復号して、非圧縮形式のオーディオデータを出力する。
Transport Buffer(TB)40は、テキスト字幕ストリームに帰属するTSパケットを蓄積する。
テキスト字幕デコーダ42は、バッファ41に読み出されたPESパケットをデコードして、表示に供する。このデコードは、Local Storage32から別途読み出されるフォントを用いて、テキスト字幕ストリーム中のテキスト文字列を、ビットマップに展開することでなされる。デコードにより得られたテキスト字幕は、PresentationGraphicsプレーン18に書き込まれる。
制御部44は、命令ROMと、CPUとからなり、命令ROMに格納されているソフトウェアを実行して、再生装置全体の制御を実行する。この制御の内容は、ユーザ操作に応じて発生するユーザイベント、及び、PSRセット46における各PSRの設定値に応じて動的に変化する。
PSR(7)は、0〜255の値に設定されることで、現在の再生時点が属するPlay Item(以下カレントPIという)の番号を示す。
PSR(8)は、0〜OxFFFFFFFFの値に設定されることで、45KHzの時間精度を用いて現在の再生時点(カレントPTM)を示す。
Decoded Picture Buffer10には、復号化されたピクチャが複数格納される。図19は、Decoded Picture
Buffer10の内部構成を示す図であり、本図に示すように、Decoded Picture Buffer10には復号化されたピクチャとして、参照ピクチャと、非参照ピクチャとが格納される。参照ピクチャには、短時間参照ピクチャと、長時間参照ピクチャとがある。短時間参照ピクチャは、FIFO領域に格納され、先入先出し式に扱われる。一方、長時間参照ピクチャは、FIFO領域に格納されず、先入先出し式には扱われない。
倍速再生は、ビデオストリームを構成する複数ピクチャのうち、Iピクチャ(IDRピクチャ、Non-IDR Iピクチャを含む)を順次再生してゆくことにより、実現することができる。ここでEP_mapのEntryPointには、IDRピクチャ及びNon-IDR Iピクチャの位置及びサイズが示されているので、ビデオストリームのうちIピクチャや、Iピクチャのみを読み込んで再生することにより、2倍速、3倍速といった特殊再生を実現することができる。
これらの制御の根幹にあるのは、時間情報からIピクチャアドレスを導く処理である。図22は、時間情報をIピクチャアドレスに変換する手順を示すフローチャートである。本フローチャートにおいて、飛込再生の飛込位置を示す時間情報をIn_timeと表記している。図22のステップS1では、In_timeをPTS_EP_startとし、ステップS2では、PTS_EP_startに最も近い、EP_High_id、EP_Low_idの組みを求める。ここでEP_High_idとは、In_time以前の時点を示すEP_Highであって、In_timeに最も近いものを特定する識別子である。一方、EP_Low_idとは、EP_High[EP_High_id]以降、In_time以前の時点を示すEP_Lowであって、In_timeに最も近いものを特定する識別子である。
こうしてEP_Low_idを求めれば、ステップS3〜ステップS5からなるループ処理に移行する。EP_Low_idを変数jに代入した上で(ステップS3)、ステップS4〜ステップS5からなるループ処理を実行するというものである。このループ処理は、ステップS5がYesと判定されるまで、変数jのデクリメント(ステップS4)を繰り返すものである。このステップS5は、変数jにて特定されるEntryPointのis_angle_change_point(PTS_EP_Low[j].is_angle_change_point)が1であるか否かを判定するものであり、変数jにて特定されるEntryPointのis_angle_change_pointが連続して“0”を示している限り、このループ処理は繰り返し実行される。
その後、PlayItem#xがカレントPlayListの最後のPIであるかの判定がなされる(ステップS109)。
以上のように本実施形態によれば、is_angle_change_point“=1”のEntry Pointにより指示されるピクチャまで読出範囲を広げれば、IDRピクチャをビデオデコーダ8に供給することができ、飛込再生時のデコードに必要な全ての参照ピクチャをDecodedPicture Buffer10内に準備することができるので、飛込再生時における読出範囲の拡大を必要最小限にすることができる。
(第2実施形態)
第1実施形態では、EP_mapは、AVClipにおける進入点を指示する、is_angle_change_pointをEP_mapのデータ構造と共に開示した。第2実施形態では、is_angle_change_pointにより指示される進入点及び脱出点により実現される、アングル切り換え操作について説明する。アングル切り換え操作とは、第1実施形態で述べたように、現在再生中のAVClipからの「脱出」と、別のAVClipへの「進入」とからなる操作のことである。
『number_of_angles』は、マルチアングル区間を示すよう『is_multi_angles』が設定されている場合、このマルチアングル区間を構成するアングル数を示す。
『is_seamless_angle_change』は、シームレスなアングル切り換えが意図されているかを示す。シームレスなアングル切り換えが意図されているかどうかは、AVClipが、後述するインターリーブ記録により記録されているか否かによって変わる。従って、インターリーブ記録により記録されている場合、『is_seamless_angle_change』はオンに設定され、記録されてない場合、『is_seamless_angle_change』はオフに設定される。
『Clip_Information_file_name[angle_id]』には、アングル区間を構成するAVClipのファイル名が記述される。
『Clip_codec_identifier[angle_id]』は、アングル情報のClip_Information_file_nameにて記述されたファイル名のAVClipにおける符号化方式を示す。
図26(a)は、PlayItem情報の4つのClip_Information_file_nameによりなされた一括指定を示す図である。本図において第1段目〜第4段目は、4つのAVClip時間軸(AVClip#1,#2,#3,#4の時間軸)を示し、第5段目は、PL時間軸を示す。PlayItem情報が有する、4つのClip_Information_file_nameにて、これら4つの時間軸が指定されている。こうすることで、PlayItemが有するIn_time,Out_timeにより、択一的に再生可能な4つの再生区間が定義されることになる。これにより、PL時間軸には、切り換え可能な複数アングル映像からなる区間(いわゆるマルチアングル区間)が定義されることになる。In_time,Out_timeにより指定される、4つのAVClip上の4つの再生区間は、PlayList時間軸において同じ再生時間帯に位置することになる。
図24に示したAVClip#1〜AVClip#4は、4つのアングルから撮影された動画データであるものとする。この場合AVClip#1〜#4は、
AVClip#1⇒
AVClip#1.1/5,AVClip#1.2/5,AVClip#1.3/5,AVClip#1.4/5,AVClip#1.5/5
AVClip#2⇒
AVClip#2.1/5,AVClip#2.2/5,AVClip#2.3/5,AVClip#2.4/5,AVClip#2.5/5
AVClip#3⇒
AVClip#3.1/5,AVClip#3.2/5,AVClip#3.3/5,AVClip#3.4/5,AVClip#3.5/5
AVClip#4⇒
AVClip#4.1/5,AVClip#4.2/5,AVClip#4.3/5,AVClip#4.4/5,AVClip#4.5/5
という5つのエクステントに分割される。
図26(b)は、各AVClipを構成するエクステントを、PlayList時間軸上に記述した図である。各AVClipを構成する5つのエクステントは、同じ再生時間帯に位置する。つまり、AVclip#1.1/5、AVclip#2.1/5、AVclip#3.1/5、AVclip#4.1/5は同じ時間帯に位置する。AVclip#1.2/5、AVclip#2.2/5、AVclip#3.2/5、AVclip#4.2/5は同じ時間帯に、AVclip#1.3/5、AVclip#2.3/5、AVclip#3.3/5、AVclip#4.3/5は同じ時間帯に位置する。
図27(a)は、マルチアングル区間を構成する4つのAVClipがBD-ROM上でどのように配置されているかという、アロケーションイメージを示す。ここで4つのAVClipのそれぞれが、5つエクステントから構成されているとすると、各AVClipを構成する5つの分割部分のうち、1つ目のもの(AVClip#1.1/5,AVClip#1.2/5.AVClip#3.1/5,AVClip#4.1/5)がひとまとまりに記録される。これらAVClip#1.1/5〜AVClip#4.1/5は、同じ時間帯に再生されるべきAVClipの一部である。このように同じ時間帯に再生されるべきエクステントが、集められ、連続することになる。かかるインターリーブ記録により、AVClip#1を構成するエクステントと、AVClip#2を構成するエクステントとが交互に現れるので、例えばAVClip#1.1/5、AVClip#2.1/5をまとめて読み出させれば、AVClip#1.1/5、AVClip#2.1/5のうち一方を択一的にデコードすることができる。これによりユーザ操作に応じたアングル切り換えが実現されることになる。
以上のようにAVClip#2を構成する各エクステントの先頭は、is_angle_change_point“=1”に設定されたEntry Pointにより指示されることになる。これによりエクステントの先頭は、他のAVClipからの進入点として解釈されることになる。エクステントの末尾は、is_angle_change_point“=1”により指定された点の直前にあたるから、他のAVClipへの脱出点として解釈される。図29は、AVClip#2を構成する各エクステントについてのEntryPoint設定であるが、AVClip#1を構成する各エクステント、AVClip#3,#4,#5を構成する各エクステントの先頭も、AVClip#2同様、is_angle_change_point“=1”に設定されたEntryPointにより指示される。AVClip#1,#2,#3,#4,#5を構成する各エクステントの末尾と、エクステントの先頭との間の境界において、脱出、進入が可能になるので、かかるシームレスなアングル切換が可能になる。
PSR(3)の設定値が1である場合、PlayItem情報において互換部分にあるClip_information_file_nameが参照され、このClip_information_file_nameに記述されているファイル名00001.clpiのClip情報がメモリに読み出されることになる。そしてこのClip情報の中にあるEntryPointが参照され、AVClip(00001.m2ts)の再生がなされる。
PSR(3)の設定値が3である場合、PlayItem情報においてAngle情報[3]内にあるClip_information_file_nameが参照され、このClip_information_file_nameに記述されているファイル名00003.clpiのClip情報がメモリに読み出されることになる。そしてこのClip情報の中にあるEntryPointが参照され、AVClip(00003.m2ts)の再生がなされる。
続いて図25のPlayItem情報に基づく、制御部44の処理手順について説明する。図31は、第2実施形態に係るPlayList情報再生手順を示すフローチャートである。
このようにPSR(3)の設定値に応じて、異なるAVClipをアクセスすることにより、アングル区間の選択的な再生が実現される。
このステップS50〜ステップS52の繰り返しにより、1つのエクステントの内部において、読出先を示すカレントアドレスは、順次更新されてゆく。
ここでアングルキーの押下によりアングル切り換えがなされたなら、PSR(3)の数値に、“1”を加えた値を、変数vに代入する。数値ボタンの押下によりアングル切り換えがなされた場合は、その押下された数値キーに対応する値を変数vに代入する。
ステップS52がYesになれば、ステップS55〜ステップS57の処理を実行する。ステップS55は、準備フラグが=1であるか否かの判定であり、もし準備フラグが0であれば、カレントAVClipの次のエクステントをカレントエクステントに設定し(ステップS56)、カレントエクステントの先頭AccessUnit Delimiterのアドレスをカレントアドレスに設定した上で(ステップS57)、ステップS50〜ステップS52からなるループ処理に戻る。これにより準備フラグが=0である場合は、カレントアングルに属する次のエクステントが、読み込まれることになる。
先ず初めに、切換先アングルのエクステントのうち、カレントエクステントの次の時間帯に再生されるものを、エクステントdstに設定する(ステップS58)。そしてエクステントdstの先頭AccessUnit Delimiterを指示するEPtopを特定する(ステップS59)。その後、EPtopのis_angle_change_pointが=1であるか否かを判定する(ステップS60)。この判定は、エクステントdstの先頭が、進入点になりうるかどうかの判定を意味する。もしis_angle_change_pointが=0であるなら、準備フラグを=1に設定したままステップS56に移行する。ステップS56〜ステップS57の処理は、カレントアングルに属する次のエクステントの読み込みである。かかる処理により、カレントアングルの再生は継続することになる。つまり、エクステントdstが、is_angle_change_point“=1”に設定された進入点でないなら、カレントアングルの再生を継続するのである。
図34は、アングル映像切り換え操作がなされた際のBD-ROMからの読み出しを示す図である。AVClip#1を構成する5つのエクステントのうち、AVClip#1.2/5が読み出されている途中で、アングル切換操作を意図する操作がユーザによりなされたとする(ステップS51でYes)。これにより準備フラグは1に設定される(ステップS54)。この操作は、AVClip#1にあたるアングル映像からAVClip#2にあたるアングル映像への切り換えを意図するものである。切り換え操作は、AVclip#1.2/5の読み出しの途中でなされていたため、切り換え時点の次の時間帯に再生されるエクステントとして、AVclip#2.3/5が、エクステントdstとして特定される(ステップS58)。このエクステントdstの先頭は、PTS_EP_start=t3にあたるEntryPoint#3により指示されているので、このAVClip#2のEntry Point#3におけるis_angle_change_pointが参照される(ステップS60)。ここでEntryPoint#3のis_angle_change_pointは=1であり、進入点として解釈することができる。故に、エクステントdstにあたるAVclip#2.3/5を、カレントエクステントに設定して(ステップS61)、このカレントエクステント先頭のAccessUnit Delimiterのアドレスを、カレントアドレスに設定した上で(ステップS62)、AVClip#2を示す“2”を、PSR(3)を設定する(ステップS64)。こうすることにより、以降、AVClip#2を構成するAVclip#2.3/5、AVclip#2.4/5、AVclip#2.5/5が読み出されることになる。
また、AVclip#2.3/5への切り換えが可能となる期間は、PlayList時間軸において、同じ時間帯に位置するAVclip#1のエクステント(AVclip#1.3/5)の再生が開始されるまでである。即ち、同じ時間帯に位置するエクステント(AVclip#1.3/5)の再生が開始されれば、もはやAVclip#1.3/5への再生切り換えを実現することはできない。
第1実施形態は、IDRピクチャが15分、30分置きに置かれている場合の飛込再生を効率化するための改良を提案した。これに対し第3実施形態は、ビデオストリームを構成する複数のピクチャのうち、どれをIDRピクチャにするかという、IDRピクチャ選択を提案する。つまりエンコード条件を定めるにあたって、どのピクチャをIDRピクチャにするという最適な選択を提案する。MPEG4-AVC形式のビデオストリームは、MPEG4-AVCに多重化され、Clip情報を介してPlayList情報により参照される。本実施形態におけるIDRピクチャの選択は、このPlayList情報の性質を考慮に入れたものである。
PlayList情報を構成する複数のPlayItem情報のうち、先頭のPlayItem情報のIn_timeにて指定されるピクチャは、IDRピクチャであり、このIDRピクチャは、is_angle_change_point“=1”に設定されたEntryPointにより指示されるので、制御部44は、In_timeに対応するEntry Pointに示されるSPN_EP_start以降を読み出すことにより、IDRピクチャをビデオデコーダ8に供給する。ビデオデコーダ8へのIDRピクチャ供給により、DecodedPicture Buffer10のクリアがなされる。
また、PLMark情報によりチャプターが規定されているので、本実施形態に係る再生装置は、PlayList情報を用いたチャプターサーチ機能及びチャプタースキップ機能を実行する。チャプターサーチ機能とは、PLMark情報に記述されているref_to_PlayItem_Idに対応するPlayItem情報を、複数のPlayItem情報の中から特定して、特定したPlayItem情報が定義されているAVClipにおいて、PLMark情報に記述されたmark_time_stampに示される位置からの飛込再生を行うものであり、この際、制御部44は、複数のEntryPointのうち、PLMark情報に記述されたmark_time_stampに最も近いPTS_EP_startをもつEntry Pointを特定して、特定したEntryPointのSPN_EP_startに対応するIピクチャアドレスからの再生を行わせる。
本フローチャートにおいて先ずチャプターメニューにおけるチャプター選択を待ち(ステップS124)、チャプター選択がなされれば、選択されたチャプターにあたるPLMark情報をカレントPlayListMarkとする(ステップS125)。ステップS126では、カレントPlayListMarkのref_to_PlayItem_Idに記述されているPIを、PlayItem#xに設定し、ステップS127では、PlayItem#xのClip_information_file_nameで指定されるClip情報を読み込む。ステップS128では、カレントClip情報のEP_mapを用いて、カレントPlayListMarkのmark_time_stampを、Iピクチャアドレスuに変換する。ここでPLMark情報のmark_time_stampで指示されているピクチャは、is_angle_change_point“=1”に設定されたEntryPointにより指示されている。そのため、Iピクチャアドレスuは、IDRピクチャのアドレスを指示することになる。
以上の説明は、本発明の全ての実施行為の形態を示している訳ではない。下記(A)(B)(C)(D)・・・・・の変更を施した実施行為の形態によっても、本発明の実施は可能となる。本願の請求項に係る各発明は、以上に記載した複数の実施形態及びそれらの変形形態を拡張した記載、ないし、一般化した記載としている。拡張ないし一般化の程度は、本発明の技術分野の、出願当時の技術水準の特性に基づく。
2 Arrival time Clock Counter
3 Source de-packetetizer
4 PID Filter4
5 Transport Buffer5
6 Multiplexed Buffer6
7 Coded Picture Buffer7
8 ビデオデコーダ8
10 Decoded Picture Buffer10
11 ビデオプレーン11
12 Transport Buffer12
13 Coded Data Buffer13
14 Stream Graphics Processor14
15 Object Buffer15
15 Composition Buffer16
17 Composition Controller17
18 Presentation Graphicsプレーン18
19 CLUT部19
20 Transport Buffer20
21 Coded Data Buffer21
22 Stream Graphics Processor22
23 Object Buffer23
24 Composition Buffer24
25 Composition Controller25
26 Intaractive Graphicsプレーン26
27 CLUT部27
28 合成部28
29 合成部29
30 スイッチ30
31 Network Device31
32 Local Storage32
33 Arrival Time Clock Counter33
34 Source De-Packetizer34
35 PIDフィルタ
36 スイッチ
37 Transport Buffer
38 Elementary Buffer
39 オーディオデコーダ
40 Transport Buffer
41 バッファ
42 テキスト字幕デコーダ
43 シナリオメモリ
44 制御部
46 PSRセット
100 BD-ROM
200 再生装置
300 リモコン
400 テレビ
Claims (10)
- 記録媒体であって、
ビデオストリームと、エントリーマップとが記録されており、
エントリーマップは、ビデオストリーム内における複数のエントリー位置を、エントリー時刻と、フラグとに対応づけて示し、
前記フラグは、
各エントリー位置に存在するピクチャが、デコーディングのリフレッシュ動作を意図しているイントラピクチャであるか否かを示す
ことを特徴とする記録媒体。 - 前記ビデオストリームは、マルチアングル区間において1つのアングル映像を構成しており、
前記リフレッシュを意図したピクチャは、
マルチアングル区間における他のアングル映像からの再生切り換えが可能となる位置に存在する、ことを特徴とする請求項1記載の記録媒体。 - 前記ビデオストリームは、複数のセグメントに分割されて記録媒体に記録されており、
前記再生が可能になる位置とは、
セグメントの先頭にあたる、ことを特徴とする請求項2記載の記録媒体。 - 前記記録媒体には、複数の管理情報ファイルと、再生区間情報とが記録されており、
再生区間情報は、ビデオストリームにおけるマルチアングル区間の始点及び終点を規定する情報であり、複数の管理情報ファイルのファイル名が記述された領域を有しており、
前記エントリーマップは、
複数のうち、1つの管理情報ファイル内にある、ことを特徴とする請求項3記載の記録媒体。 - ビデオストリーム内における複数のエントリー位置を、エントリー時刻と、フラグとに対応づけて示すエントリーマップに基づき、ビデオストリームを再生する再生装置であって、
ビデオストリームを構成するピクチャを、記録媒体から読み出す読出手段と、
読み出されたピクチャを再生する再生手段と、
任意の再生開始時点からの再生が命じられた場合、フラグがオンに設定されているエントリー時刻のうち、再生開始時点にもっとも近いものを特定し、特定されたエントリー時刻に対応するエントリー位置からの読み出しを、読出手段に行わせる制御手段と
を備えることを特徴とする再生装置。 - 前記再生手段は、
複数の参照ピクチャが格納されているピクチャバッファと、
参照ピクチャを用いた動き補償を実行するデコーダとを備え、
フラグがオンに設定されているエントリー位置には、デコーディングのリフレッシュを意図しているイントラピクチャが存在しており、
前記デコーダは、
当該イントラピクチャをデコードした際、ピクチャバッファの格納内容をクリアする、請求項5記載の再生装置。 - 前記記録媒体には、複数の管理情報ファイルと、再生区間情報とが記録されており、
再生区間情報は、ビデオストリームにおけるマルチアングル区間の始点及び終点を規定する情報であり、複数の管理情報ファイルのファイル名が記述された領域を有しており、
前記再生装置は、
再生対象となるアングル映像を示す値を格納している状態レジスタと、
ユーザによる操作に従い、状態レジスタの値を更新する更新手段とを備え、
前記読出手段は、
状態レジスタの更新があれば、再生区間情報にファイル名が記述されている管理情報ファイルのうち、更新後の値に対応するものを、記録媒体から読み出し、
前記制御手段により参照されるエントリーマップは、
読み出された管理情報ファイル内にある、請求項5記載の再生装置。 - 前記記録媒体には、AVファイルが複数記録されており、
読出手段の読み出しの対象となるビデオストリームは、
取り出された管理情報ファイルのファイル名と同じファイル名を有する、AVファイル内に存在し、
読出手段は、
AVファイルを構成する複数のエクステントのうち、特定されたエントリー時刻に対応するエントリー位置にあたるものを読み出す、請求項7記載の再生装置。 - 記録媒体に記録されたビデオストリームを再生する手順を、コンピュータに行わせるプログラムであって、
前記記録媒体には、ビデオストリーム内における複数のエントリー位置を、エントリー時刻と、フラグとに対応づけて示すエントリーマップが記録されており、
ビデオストリームを構成するピクチャを、記録媒体から読み出す読出ステップと、
読み出されたピクチャを再生する再生ステップと、
任意の再生開始時点からの再生が命じられた場合、フラグがオンに設定されているエントリー時刻のうち、再生開始時点にもっとも近いものを特定し、特定されたエントリー時刻に対応するエントリー位置からの読み出しを、読出ステップに行わせる制御ステップと
を備えることを特徴とするプログラム。 - 記録媒体に記録されたビデオストリームを再生する再生方法であって、
前記記録媒体には、ビデオストリーム内における複数のエントリー位置を、エントリー時刻と、フラグとに対応づけて示すエントリーマップが記録されており、
ビデオストリームを構成するピクチャを、記録媒体から読み出す読出ステップと、
読み出されたピクチャを再生する再生ステップと、
任意の再生開始時点からの再生が命じられた場合、フラグがオンに設定されているエントリー時刻のうち、再生開始時点にもっとも近いものを特定し、特定されたエントリー時刻に対応するエントリー位置からの読み出しを、読出ステップに行わせる制御ステップと
を備えることを特徴とする再生方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004121593 | 2004-04-16 | ||
JP2004121593 | 2004-04-16 | ||
PCT/JP2005/007321 WO2005101828A1 (ja) | 2004-04-16 | 2005-04-15 | 記録媒体、再生装置、プログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008134126A Division JP4750823B2 (ja) | 2004-04-16 | 2008-05-22 | 記録媒体、再生装置、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2005101828A1 true JPWO2005101828A1 (ja) | 2008-03-06 |
JP4249224B2 JP4249224B2 (ja) | 2009-04-02 |
Family
ID=35150354
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006512392A Active JP4249224B2 (ja) | 2004-04-16 | 2005-04-15 | 再生装置、及び記録方法 |
JP2008134126A Expired - Fee Related JP4750823B2 (ja) | 2004-04-16 | 2008-05-22 | 記録媒体、再生装置、プログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008134126A Expired - Fee Related JP4750823B2 (ja) | 2004-04-16 | 2008-05-22 | 記録媒体、再生装置、プログラム |
Country Status (8)
Country | Link |
---|---|
US (2) | US7778521B2 (ja) |
EP (1) | EP1746826A4 (ja) |
JP (2) | JP4249224B2 (ja) |
KR (1) | KR101129142B1 (ja) |
CN (2) | CN101673574B (ja) |
MX (1) | MXPA06011814A (ja) |
TW (1) | TWI405466B (ja) |
WO (1) | WO2005101828A1 (ja) |
Families Citing this family (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI405466B (zh) * | 2004-04-16 | 2013-08-11 | Panasonic Corp | A regeneration device, a regeneration program, a regeneration method, and a regeneration system |
EP1999883A4 (en) | 2006-03-14 | 2013-03-06 | Divx Llc | FEDERATED DIGITAL RIGHTS MANAGEMENT SYSTEM COMPRISING CONFIDENCE SYSTEMS |
CN101321284B (zh) * | 2007-06-10 | 2012-01-04 | 华为技术有限公司 | 一种编解码方法、设备及系统 |
US20080317124A1 (en) * | 2007-06-25 | 2008-12-25 | Sukhee Cho | Multi-view video coding system, decoding system, bitstream extraction system for decoding base view and supporting view random access |
US8510303B2 (en) | 2009-01-07 | 2013-08-13 | Divx, Llc | Singular, collective and automated creation of a media guide for online content |
EP2333778A1 (en) * | 2009-12-04 | 2011-06-15 | Lg Electronics Inc. | Digital data reproducing apparatus and method for controlling the same |
CA2782825C (en) | 2009-12-04 | 2016-04-26 | Divx, Llc | Elementary bitstream cryptographic material transport systems and methods |
US9485546B2 (en) * | 2010-06-29 | 2016-11-01 | Qualcomm Incorporated | Signaling video samples for trick mode video representations |
JP2012018727A (ja) * | 2010-07-08 | 2012-01-26 | Sony Corp | 情報処理装置、および情報処理方法、並びにプログラム |
US9185439B2 (en) | 2010-07-15 | 2015-11-10 | Qualcomm Incorporated | Signaling data for multiplexing video components |
US9247312B2 (en) | 2011-01-05 | 2016-01-26 | Sonic Ip, Inc. | Systems and methods for encoding source media in matroska container files for adaptive bitrate streaming using hypertext transfer protocol |
US20120230430A1 (en) * | 2011-03-10 | 2012-09-13 | Stephan Wenger | Parameter Set Maintenance in Video Coding |
KR101803970B1 (ko) * | 2011-03-16 | 2017-12-28 | 삼성전자주식회사 | 컨텐트를 구성하는 장치 및 방법 |
US9467708B2 (en) | 2011-08-30 | 2016-10-11 | Sonic Ip, Inc. | Selection of resolutions for seamless resolution switching of multimedia content |
US8964977B2 (en) | 2011-09-01 | 2015-02-24 | Sonic Ip, Inc. | Systems and methods for saving encoded media streamed using adaptive bitrate streaming |
US8909922B2 (en) | 2011-09-01 | 2014-12-09 | Sonic Ip, Inc. | Systems and methods for playing back alternative streams of protected content protected using common cryptographic information |
US8768079B2 (en) | 2011-10-13 | 2014-07-01 | Sharp Laboratories Of America, Inc. | Tracking a reference picture on an electronic device |
US8787688B2 (en) * | 2011-10-13 | 2014-07-22 | Sharp Laboratories Of America, Inc. | Tracking a reference picture based on a designated picture on an electronic device |
US9197685B2 (en) * | 2012-06-28 | 2015-11-24 | Sonic Ip, Inc. | Systems and methods for fast video startup using trick play streams |
US9804668B2 (en) | 2012-07-18 | 2017-10-31 | Verimatrix, Inc. | Systems and methods for rapid content switching to provide a linear TV experience using streaming content distribution |
WO2014015110A1 (en) | 2012-07-18 | 2014-01-23 | Verimatrix, Inc. | Systems and methods for rapid content switching to provide a linear tv experience using streaming content distribution |
US9179144B2 (en) * | 2012-11-28 | 2015-11-03 | Cisco Technology, Inc. | Fast switching hybrid video decoder |
US9313510B2 (en) | 2012-12-31 | 2016-04-12 | Sonic Ip, Inc. | Use of objective quality measures of streamed content to reduce streaming bandwidth |
US9191457B2 (en) | 2012-12-31 | 2015-11-17 | Sonic Ip, Inc. | Systems, methods, and media for controlling delivery of content |
US9906785B2 (en) | 2013-03-15 | 2018-02-27 | Sonic Ip, Inc. | Systems, methods, and media for transcoding video data according to encoding parameters indicated by received metadata |
US10397292B2 (en) | 2013-03-15 | 2019-08-27 | Divx, Llc | Systems, methods, and media for delivery of content |
US9247317B2 (en) | 2013-05-30 | 2016-01-26 | Sonic Ip, Inc. | Content streaming with client device trick play index |
US9094737B2 (en) | 2013-05-30 | 2015-07-28 | Sonic Ip, Inc. | Network video streaming with trick play based on separate trick play files |
US9967305B2 (en) | 2013-06-28 | 2018-05-08 | Divx, Llc | Systems, methods, and media for streaming media content |
US9866878B2 (en) | 2014-04-05 | 2018-01-09 | Sonic Ip, Inc. | Systems and methods for encoding and playing back video at different frame rates using enhancement layers |
JP6868775B2 (ja) * | 2015-08-26 | 2021-05-12 | ソニーグループ株式会社 | 記録装置、および記録方法、並びにプログラム |
US10075292B2 (en) | 2016-03-30 | 2018-09-11 | Divx, Llc | Systems and methods for quick start-up of playback |
US10652594B2 (en) | 2016-07-07 | 2020-05-12 | Time Warner Cable Enterprises Llc | Apparatus and methods for presentation of key frames in encrypted content |
US10498795B2 (en) | 2017-02-17 | 2019-12-03 | Divx, Llc | Systems and methods for adaptive switching between multiple content delivery networks during adaptive bitrate streaming |
US10958948B2 (en) * | 2017-08-29 | 2021-03-23 | Charter Communications Operating, Llc | Apparatus and methods for latency reduction in digital content switching operations |
US10939142B2 (en) | 2018-02-27 | 2021-03-02 | Charter Communications Operating, Llc | Apparatus and methods for content storage, distribution and security within a content distribution network |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0814475B1 (en) * | 1996-01-08 | 2003-05-07 | Kabushiki Kaisha Toshiba | Information recording medium, recording method and reproduction apparatus |
TW361046B (en) * | 1996-10-31 | 1999-06-11 | Matsushita Electric Ind Co Ltd | Dynamic picture image decoding apparatus and method of decoding dynamic picture image |
JPH114444A (ja) | 1997-06-11 | 1999-01-06 | Sony Corp | 画像符号化装置および方法 |
US20030113096A1 (en) * | 1997-07-07 | 2003-06-19 | Kabushiki Kaisha Toshiba | Multi-screen display system for automatically changing a plurality of simultaneously displayed images |
JP3595151B2 (ja) | 1998-02-20 | 2004-12-02 | 株式会社東芝 | 使用可能キー表示システムで用いる光ディスク、この光ディスクを用いる方法および装置 |
JP3510783B2 (ja) * | 1998-03-12 | 2004-03-29 | シャープ株式会社 | 動画像記録再生方法及び動画像記録再生装置 |
JP3058870B1 (ja) | 1999-02-05 | 2000-07-04 | 株式会社次世代デジタルテレビジョン放送システム研究所 | Afc回路 |
JP4328989B2 (ja) | 1999-11-24 | 2009-09-09 | ソニー株式会社 | 再生装置、再生方法、並びに記録媒体 |
JP4599740B2 (ja) * | 2000-04-21 | 2010-12-15 | ソニー株式会社 | 情報処理装置および方法、記録媒体、プログラム、並びに記録媒体 |
KR100806432B1 (ko) * | 2000-04-21 | 2008-02-21 | 소니 가부시끼 가이샤 | 정보 처리 장치 및 방법, 프로그램과 기록 매체 |
JP4682434B2 (ja) | 2000-04-21 | 2011-05-11 | ソニー株式会社 | 情報処理装置および方法、記録媒体、並びにプログラム |
EP2268016A3 (en) * | 2000-04-21 | 2013-01-02 | Sony Corporation | Information processing method and apparatus, program and recording medium |
JP4538908B2 (ja) * | 2000-06-14 | 2010-09-08 | ソニー株式会社 | データ変換装置及び方法 |
JP4416959B2 (ja) | 2001-04-26 | 2010-02-17 | 富士通マイクロエレクトロニクス株式会社 | Xyアドレス型固体撮像装置のフリッカノイズ低減方法 |
JP3748078B2 (ja) | 2001-06-22 | 2006-02-22 | オムロン株式会社 | 安全ネットワークシステム及び安全スレーブ |
KR100434740B1 (ko) * | 2001-11-09 | 2004-06-10 | 주식회사 휴맥스 | 디지털 방송 프로그램에서의 저배속 재생방법 |
JP3852366B2 (ja) * | 2002-04-26 | 2006-11-29 | ソニー株式会社 | 符号化装置および方法、復号装置および方法、並びにプログラム |
KR100631243B1 (ko) | 2002-06-21 | 2006-10-02 | 엘지전자 주식회사 | 비디오 데이터의 재생을 관리하기 위한 데이터 구조를갖는 기록 매체 |
CN101350214B (zh) * | 2002-06-24 | 2015-07-01 | Lg电子株式会社 | 记录和再现用于视频数据的再现的数据结构的方法及装置 |
AU2003243049B2 (en) * | 2002-06-28 | 2010-03-04 | Lg Electronics Inc. | Recording medium having data structure for managing recording and reproduction of multiple path data recorded thereon and recording and reproducing methods and apparatus |
JP3513148B1 (ja) * | 2002-10-11 | 2004-03-31 | 株式会社エヌ・ティ・ティ・ドコモ | 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置、動画像符号化プログラム、及び動画像復号プログラム |
KR100997700B1 (ko) | 2002-11-11 | 2010-12-02 | 소니 주식회사 | 정보처리장치 및 방법, 프로그램 저장매체, 기록매체 및프로그램 |
KR100636129B1 (ko) * | 2002-12-16 | 2006-10-19 | 삼성전자주식회사 | 멀티 앵글을 지원하는 데이터 구조로 기록된 정보저장매체및 그 장치 |
WO2004095455A1 (ja) | 2003-04-23 | 2004-11-04 | Matsushita Electric Industrial Co., Ltd. | 記録媒体、再生装置、記録方法、再生プログラム、再生方法。 |
TWI405466B (zh) * | 2004-04-16 | 2013-08-11 | Panasonic Corp | A regeneration device, a regeneration program, a regeneration method, and a regeneration system |
-
2005
- 2005-04-15 TW TW094112060A patent/TWI405466B/zh active
- 2005-04-15 JP JP2006512392A patent/JP4249224B2/ja active Active
- 2005-04-15 CN CN2009101657471A patent/CN101673574B/zh not_active Expired - Fee Related
- 2005-04-15 WO PCT/JP2005/007321 patent/WO2005101828A1/ja active Application Filing
- 2005-04-15 EP EP05730640A patent/EP1746826A4/en not_active Ceased
- 2005-04-15 CN CNB2005800197381A patent/CN100544419C/zh active Active
- 2005-04-15 MX MXPA06011814A patent/MXPA06011814A/es active IP Right Grant
- 2005-04-15 US US10/594,688 patent/US7778521B2/en not_active Expired - Fee Related
- 2005-04-15 KR KR1020067023751A patent/KR101129142B1/ko not_active IP Right Cessation
-
2008
- 2008-05-22 JP JP2008134126A patent/JP4750823B2/ja not_active Expired - Fee Related
-
2010
- 2010-07-06 US US12/830,526 patent/US8521002B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20100272412A1 (en) | 2010-10-28 |
US20070274679A1 (en) | 2007-11-29 |
JP4750823B2 (ja) | 2011-08-17 |
US8521002B2 (en) | 2013-08-27 |
WO2005101828A1 (ja) | 2005-10-27 |
JP2008295048A (ja) | 2008-12-04 |
CN1969548A (zh) | 2007-05-23 |
KR101129142B1 (ko) | 2012-03-26 |
MXPA06011814A (es) | 2006-12-15 |
CN100544419C (zh) | 2009-09-23 |
JP4249224B2 (ja) | 2009-04-02 |
TWI405466B (zh) | 2013-08-11 |
TW200605667A (en) | 2006-02-01 |
CN101673574A (zh) | 2010-03-17 |
EP1746826A1 (en) | 2007-01-24 |
KR20070015576A (ko) | 2007-02-05 |
CN101673574B (zh) | 2013-03-06 |
EP1746826A4 (en) | 2010-04-21 |
US7778521B2 (en) | 2010-08-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4750824B2 (ja) | 記録媒体、再生装置、プログラム | |
JP4750823B2 (ja) | 記録媒体、再生装置、プログラム | |
JP4295802B2 (ja) | 記録方法、記録媒体再生システム | |
KR100884150B1 (ko) | 슬라이드 쇼에서 랜덤 액세스를 고속으로 실현할 수 있는 기록매체, 재생장치, 컴퓨터 판독 가능한 기록매체, 기록방법, 재생방법 | |
JP4308863B2 (ja) | 再生装置、記録方法、再生方法、プログラム | |
JP4764855B2 (ja) | 記録方法、再生システム | |
KR100884148B1 (ko) | 슬라이드 쇼에서 랜덤 액세스를 고속으로 실현할 수 있는 기록매체, 재생장치, 컴퓨터 판독 가능한 기록매체, 기록방법, 재생방법 | |
JP4204621B2 (ja) | 再生装置、記録方法、再生方法、プログラム | |
JP4658986B2 (ja) | システムlsi |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080415 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080522 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20080522 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20080704 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080916 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081114 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20081216 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090114 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120123 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4249224 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130123 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140123 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140123 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150123 Year of fee payment: 6 |