CN102655014B - 信息处理设备、信息处理方法、播放设备、播放方法和程序 - Google Patents

信息处理设备、信息处理方法、播放设备、播放方法和程序 Download PDF

Info

Publication number
CN102655014B
CN102655014B CN201210114866.6A CN201210114866A CN102655014B CN 102655014 B CN102655014 B CN 102655014B CN 201210114866 A CN201210114866 A CN 201210114866A CN 102655014 B CN102655014 B CN 102655014B
Authority
CN
China
Prior art keywords
stream
file
bulk
viewpoint video
basic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201210114866.6A
Other languages
English (en)
Other versions
CN102655014A (zh
Inventor
加藤元树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102655014A publication Critical patent/CN102655014A/zh
Application granted granted Critical
Publication of CN102655014B publication Critical patent/CN102655014B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/87Regeneration of colour television signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/93Regeneration of the television signal or of selected parts thereof
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • G11B20/1217Formatting, e.g. arrangement of data block or words on the record carriers on discs
    • G11B20/1252Formatting, e.g. arrangement of data block or words on the record carriers on discs for discontinuous data, e.g. digital information signals, computer programme data
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3027Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365Multiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347Demultiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • H04N21/4385Multiplex stream processing, e.g. multiplex stream decrypting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8451Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • G11B2020/10592Audio or video recording specifically adapted for recording or reproducing multichannel signals
    • G11B2020/106113D video data
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • G11B2020/1264Formatting, e.g. arrangement of data block or words on the record carriers wherein the formatting concerns a specific kind of data
    • G11B2020/1289Formatting of user data
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/87Regeneration of colour television signals
    • H04N9/8715Regeneration of colour television signals involving the mixing of the reproduced video signal with a non-recorded signal, e.g. a text signal

Abstract

公开了信息处理设备、信息处理方法、播放设备、播放方法和程序,其能够适当地播放立体图像(3D图像)的内容。在指示了利用基本视点视频和D1视点视频的3D播放时,PlayList文件的interleaved_file_info()中描述的“10000.ilvt(ref_to_D1_B_interleaved_file_name)”被指定,并且通过UDF文件系统从光盘读取基本视点视频的大块和D1视点视频的大块。已读取的基本视点视频的大块和D1视点视频的大块被提供给解码器单元,并被播放。本发明可以应用到遵循BD-ROM标准的播放设备。

Description

信息处理设备、信息处理方法、播放设备、播放方法和程序
本申请是PCT国际申请号为PCT/JP2010/056078,国际申请日为2010年4月2日,进入中国国家阶段日为2010年11月30日,国家申请号为201080001711.0、题为“信息处理设备、信息处理方法、播放设备、播放方法和程序”的发明专利申请的分案申请。
技术领域
本发明涉及信息处理设备、信息处理方法、播放设备、播放方法和程序,更具体而言涉及使得能够适当地播放来自记录介质的3D(维)图像内容的信息处理设备、信息处理方法、播放设备、播放方法和程序。
背景技术
作为诸如电影等之类的内容,二维(2D)图像内容是主流,但是近来,其中实现立体视觉景象的三维(3D)图像内容已被关注。
有多种方法作为显示3D图像(下文也称作立体图像)的方法,但是在使用任何方法时,3D图像的数据量都比2D图像的数据量大。
另外,诸如电影之类的高分辨率图像内容可能非常大,因此必需有大容量记录介质来记录诸如3D图像之类的具有大量数据的较大大小的图像内容。
存在诸如BD(Blu-Ray(注册商标))-ROM(只读存储器)之类的Blu-ray(注册商标)光盘(此后亦称为BD)作为这种大容量记录介质。
现在,提出了一种文件管理设备,其中,信号在记录介质上的位置由比扇区小的预定单元来指定并被文件创建装置形成为文件,从而即使在在可选位置处分离或者合并文件化的信号(filed signal)之类的编辑处理时,也不需要仅在部分信号要被编辑时将文件化的信号再次记录到记录介质上以形成文件,可以仅对文件管理信息执行编辑处理,从而可以极大地 简化文件处理(专利文件1)。
引用列表
专利文献
PTL 1:日本未实审专利申请公开No.11-195287
发明内容
技术问题
现在,根据当前的BD标准,尚未定义如何将3D图像内容记录到BD上或者如何播放3D图像内容。
然而,如果记录和播放3D图像内容的方法依赖于创作3D图像内容的作者,则要考虑3D图像内容不能被适当地播放。
考虑到这种情形作出了本发明,本发明使得能够适当地播放来自诸如BD之类的记录介质的立体图像(3D图像)。
根据本发明第一方面的播放设备具有:读取装置,该读取装置从记录介质读取交织文件、读取第一信息文件、并且读取第二信息文件,所述交织文件是其中以预定数据量的大块为单位交织了第一复用流和第二复用流的文件,所述第一复用流包括通过利用预定编码方法对视频流进行编码而生成的基本流和扩充流中的基本流,而所述第二复用流包括与所述基本流相对应的所述扩充流,并且所述第一信息文件是所述第一复用流的信息、并具有构成所述复用流的大块的数目和每个大块在所述第一复用流内的开始分组号,而所述第二信息文件是所述第二复用流的信息、并具有构成所述第二复用流的大块的数目和每个大块在所述第二复用流内的开始分组号;以及分离装置,该分离装置利用所述第一信息文件和所述第二信息文件将所述交织文件分离成所述第一复用流和所述第二复用流。
可以作出一种布置,其中所述大块是连续排列在所述记录介质上的源分组的集合。
可以作出一种布置,其中所述第一信息文件具有的所述大块的数目和所述第二信息文件具有的所述大块的数目具有相同的数目。
可以作出一种布置,其中所述第一信息文件还具有关于构成所述第一 复用流的源分组的总数的信息;并且所述第二信息文件还具有关于构成所述第二复用流的源分组的总数的信息。
可以作出一种布置,其中所述第一信息文件具有的所述大块的数目被表示为(n+1),构成所述第一复用流的大块表示为B[i](i=0至n),并且从所述第一复用流的开头起的第k大块表示为B[k];构成所述第二复用流的大块表示为D[i](i=0至n),并且从所述第二复用流的开头起的第k大块表示为D[k];B[k]的开始分组号表示为SPN_chunk_start_1[k];D[k]的开始分组号表示为SPN_chunk_start_2[k],构成所述第一复用流的源分组的总数表示为number_of_source_packets1;并且构成所述第二复用流的源分组的总数表示为number_of_source_packets2,所述分离装置可以通过(SPN_chunk_start_1[k+1]-SPN_chunk_start_1[k])计算构成B[k]的源分组的数目,其中k=0至(n-1),通过(SPN_chunk_start_2[k+1]-SPN_chunk_start_2[k])计算构成D[k]的源分组的数目,其中k=0至(n-1),通过(number_of_source_packets1-SPN_chunk_start_1[n])计算构成B[n]的源分组的数目,并且通过(number_of_source_packets2-SPN_chunk_start_2[n])计算构成D[n]的源分组的数目。
可以作出一种布置,其中对于B[i]和D[i],具有相同i值的一组大块具有相同的播放时间。
还可以设置控制读取读取装置的读取的控制装置。在该情形中,可以使所述控制装置读取EP_map,所述EP_map是所述第一复用流的信息并且是具有如下内容的信息:所述第一复用流内的入口点的数目、对每个入口点指示PTS(呈现时间戳)的PTS_EP_start[i]以及作为示出每个入口点的位置的源分组号的SPN_EP_start[i];检测值小于并且最接近所指定的播放开始时间点的PTS_EP_start[m];检测与该PTS_EP_start[m]相对应的SPN_EP_start[m];检测值小于并且最接近SPN_EP_start[m]的SPN_chunk_start_1[k]及其k;并且将SPN_chunk_start_1[k]和SPN_chunk_start_2[k]之和确定为所述交织文件的读取开始地址。
可以作出一种布置,其中所述基本流和所述扩充流分别是通过利用H.264/AVC对所述视频流进行编码而生成的基本视点视频流和从属视点视 频流。
根据本发明第一方面的播放方法包括以下步骤:从记录介质读取交织文件,所述交织文件是其中以预定数据量的大块为单位交织了第一复用流和第二复用流的文件,所述第一复用流包括通过利用预定编码方法对视频流进行编码而生成的基本流和扩充流中的基本流,而所述第二复用流包括与所述基本流相对应的所述扩充流;读取第一信息文件,所述第一信息文件是所述第一复用流的信息、并具有构成所述复用流的大块的数目和每个大块在所述第一复用流内的开始分组号,读取第二信息文件,所述第二信息文件是所述第二复用流的信息、并具有构成所述第二复用流的大块的数目和每个大块在所述第二复用流内的开始分组号;以及利用所述第一信息文件和所述第二信息文件将所述交织文件分离成所述第一复用流和所述第二复用流。
根据本发明第一方面的一种程序,使计算机执行包括以下步骤的处理:从记录介质读取交织文件,所述交织文件是其中以预定数据量的大块为单位交织了第一复用流和第二复用流的文件,所述第一复用流包括通过利用预定编码方法对视频流进行编码而生成的基本流和扩充流中的基本流,而所述第二复用流包括与所述基本流相对应的所述扩充流;读取第一信息文件,所述第一信息文件是所述第一复用流的信息、并具有构成所述复用流的大块的数目和每个大块在所述第一复用流内的开始分组号,读取第二信息文件,所述第二信息文件是所述第二复用流的信息、并具有构成所述第二复用流的大块的数目和每个大块在所述第二复用流内的开始分组号;以及利用所述第一信息文件和所述第二信息文件将所述交织文件分离成所述第一复用流和所述第二复用流。
根据本发明第二方面的信息处理设备包括:设置装置,该设置装置将记录状态信息设置到播放管理信息文件中,所述记录状态信息指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上,所述播放管理信息文件管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放;并且如果所述基本流数据和所述扩充流数据以所述区域为单位、以交织状态被记录,则设置对所 述基本流和所述扩充流进行管理的一虚拟文件作为所述播放管理信息文件。
可以作出一种布置,其中所述设置装置还将片断信息文件的、描述与作为所述基本流的播放节的片断有关的信息的标识信息,以及所述片断信息文件的、描述与所述扩充流的要与所述基本流片断一起用来播放3维图像的片断有关的信息的标识信息设置在所述播放管理信息文件中。
可以作出一种布置,其中所述设置装置在所述基本流的所述片断信息文件中设置与所述基本流的区域有关的信息;并且在所述扩充流的所述片断信息文件中设置与所述扩充流的区域有关的信息。
可以作出一种布置,其中所述基本流和所述扩充流分别是通过利用H.264/AVC对所述视频流进行编码而生成的基本视点视频流和从属视点视频流。
根据本发明第二方面的信息处理方法包括以下步骤:将记录状态信息设置到播放管理信息文件中,所述记录状态信息指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上,所述播放管理信息文件管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放;并且如果所述基本流数据和所述扩充流数据以所述区域为单位、以交织状态被记录,则设置对所述基本流和所述扩充流进行管理的一虚拟文件作为所述播放管理信息文件。
根据本发明第二方面的程序使计算机执行包括以下步骤的处理:将记录状态信息设置到播放管理信息文件中,所述记录状态信息指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上,所述播放管理信息文件管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放;并且如果所述基本流数据和所述扩充流数据以所述区域为单位、以交织状态被记录,则设置对所述基本流和所述扩充流进行管理的一虚拟文件作为所述播放管理信息文件。
根据本发明第三方面的播放设备包括:控制装置,该控制装置在以下情形下基于设置为播放管理信息文件的对基本流和扩充流进行管理的虚拟文件,使得从光盘读取所述基本流和所述扩充流,该情形是指:记录状态 信息指示出了数据是以区域单位、以交织状态记录的,其中,所述记录状态信息设置在管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放的播放管理信息文件中,并且指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上。
还可以设置播放装置,该播放装置播放从所述光盘读取的所述基本流和所述扩充流。
还可以设置分离装置,该分离装置在以下情形下基于各个片断信息文件中设置的与所述区域有关的信息将由所述控制装置读取的数据分离成所述基本流数据和所述扩充流数据,该情形是指:片断信息文件中的、其中与所述基本流的区域有关的信息被描述为与作为所述基本流的播放节的片断有关的信息的标识信息,以及所述片断信息文件中的、其中与所述扩充流的区域有关的信息被描述为与所述扩充流的、与所述基本流的所述片断一起用于播放3维图像的片断有关的信息的标识信息被设置在所述播放管理信息文件中。
可以作出一种布置,其中与所述区域有关的信息是与所述片断结合的流文件中的每个所述区域的开始的源分组号码。
可以作出一种布置,其中所述基本流和所述扩充流分别是通过利用H.264/AVC对所述视频流进行编码而生成的基本视点视频流和从属视点视频流。
根据本发明第三方面的播放方法包括以下步骤:在以下情形下基于设置在播放管理信息文件中的对基本流和扩充流进行管理的虚拟文件,使得从光盘读取所述基本流和所述扩充流,在该情形中,记录状态信息指示出了数据是以区域单位、以交织状态记录的,其中所述记录状态信息设置在管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放的播放管理信息文件中,并且指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上。
根据本发明第三方面的程序使计算机执行包括以下步骤的处理:在以下情形下基于设置在播放管理信息文件中的对基本流和扩充流进行管理的 虚拟文件,使得从光盘读取所述基本流和所述扩充流,在该情形中,记录状态信息指示出了数据是以区域单位、以交织状态记录的,其中,所述记录状态信息设置在管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放的播放管理信息文件中,并且指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上。
根据本发明第四方面的播放设备包括:控制装置,该控制装置在记录状态信息指示数据是以区域单位、以交织状态被记录的情形中,参考设置为播放管理信息文件的对基本流和扩充流进行管理的虚拟文件,其中,所述记录状态信息设置在管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放的播放管理信息文件中,并且指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上,并且,在片断信息文件中的、描述与作为由被设置为播放管理信息文件的虚拟文件所管理的扩充流的播放节的片断有关的信息的标识信息和记录在光盘上的、所述扩充流的片断的所述片断信息文件中的标识信息不匹配的情形中,则从所述光盘读取基本流片断的数据,并且读取记录在除所述光盘之外的记录介质中的扩充流的片断的数据作为与所述基本流的片断的数据一起用于播放三维图像的扩充流的片断的数据。
可以作出一种布置,其中所述基本流和所述扩充流分别是通过利用H.264/AVC对所述视频流进行编码而生成的基本视点视频流和从属视点视频流。
根据本发明第四方面的播放方法包括以下步骤:在记录状态信息指示数据是以区域单位、以交织状态被记录的情形中,参考设置为播放管理信息文件的对基本流和扩充流进行管理的虚拟文件,其中,所述记录状态信息设置在管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放的播放管理信息文件中,并且指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上,并且,在片断信息文件中的、描述与作为由被设置为播放管理信息文件的虚拟文件所管理的扩充流的播放节的片断有关的信息的标识信息和记 录在光盘上的、所述扩充流的片断的所述片断信息文件中的标识信息不匹配的情形中,则从所述光盘读取基本流片断的数据,并且读取记录在除所述光盘之外的记录介质中的扩充流的片断的数据作为与所述基本流的片断的数据一起用于播放三维图像的扩充流的片断的数据。
根据本发明第四方面的程序使计算机执行包括以下步骤的处理:在记录状态信息指示数据是以区域单位、以交织状态被记录的情形中,参考设置为播放管理信息文件的对基本流和扩充流进行管理的虚拟文件,其中所述记录状态信息设置在管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放的播放管理信息文件中,指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上,并且在片断信息文件中的、描述与作为由被设置为播放管理信息文件的虚拟文件所管理的扩充流的播放节的片断有关的信息的标识信息和记录在光盘上的、所述扩充流的片断的所述片断信息文件中的标识信息不匹配的情形中,则从所述光盘读取基本流片断的数据,并且读取记录在除所述光盘之外的记录介质中的扩充流的片断的数据作为与所述基本流的片断的数据一起用于播放三维图像的扩充流的片断的数据。
在本发明的第一方面中,交织文件被从记录介质读取,并且还读取第一信息文件,所述交织文件是其中以预定数据量的大块单位交织了第一复用流和第二复用流的文件,所述第一复用流包括通过利用预定编码方法对视频流进行编码而生成的基本流和扩充流中的基本流,而所述第二复用流包括与所述基本流相对应的所述扩充流,并且所述第一信息文件是所述第一复用流的信息、并具有构成所述复用流的大块的数目和每个大块在所述第一复用流内的开始分组号。另外,还读取第二信息文件,所述第二信息文件是所述第二复用流的信息、并具有构成所述第二复用流的大块的数目和每个大块在所述第二复用流内的开始分组号;并且利用所述第一信息文件和所述第二信息文件将所述交织文件被分离成所述第一复用流和所述第二复用流。
在本发明的第二方面中,记录状态信息被设置到播放管理信息文件中,所述记录状态信息指示基本流数据和扩充流数据是否以预定数据单位 的区域为单位、以交织状态被记录在光盘上,所述播放管理信息文件管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放;并且如果所述基本流数据和所述扩充流数据以所述区域为单位、以交织状态被记录,则对所述基本流和所述扩充流进行管理的虚拟文件被设置为所述播放管理信息文件。
在本发明的第三方面中,在以下情形中基于设置为播放管理信息文件的对基本流和扩充流进行管理的虚拟文件,所述基本流和所述扩充流被从光盘读取,在该情形中记录状态信息指示数据是以区域单位、以交织状态记录的,其中所述记录状态信息设置在管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放的播放管理信息文件中,指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上。
在本发明的第四方面中,在记录状态信息指示数据是以区域单位、以交织状态被记录的情形中,参考设置为播放管理信息文件的对基本流和扩充流进行管理的虚拟文件,其中所述记录状态信息设置在管理对通过利用预定编码方法对多个视频数据进行编码而生成的基本流和扩充流的播放的播放管理信息文件中,并且指示基本流数据和扩充流数据是否以预定数据单位的区域为单位、以交织状态被记录在光盘上,并且在片断信息文件中的、描述与作为由被设置为播放管理信息文件的虚拟文件所管理的扩充流的播放节的片断有关的信息的标识信息和记录在光盘上的、所述扩充流的片断的所述片断信息文件中的标识信息不匹配的情形中,则从所述光盘读取基本流的片断的数据,并且读取记录在除所述光盘之外的记录介质中的扩充流的片断的数据作为与所述基本流的片断的数据一起用于播放三维图像的扩充流的片断的数据。
本发明的有益效果
根据本发明,可以适当地播放立体图像(3D图像)。
附图说明
图1示出了包括本发明被应用到的播放设备的播放系统的配置示例。
图2示出了拍摄示例。
图3的框图示出了MVC编码器的配置示例。
图4示出了参考图像的示例。
图5示出了TS的配置示例。
图6示出了TS的另一个配置示例。
图7示出了TS的又一个配置示例。
图8示出了AV流的管理的示例。
图9示出了主路径(Main Path)和辅路径(Sub Path)的配置。
图10示出了要记录到光盘中的文件的管理配置的示例。
图11示出了PlayList(播放列表)文件的语法。
图12示出了图11中的P1ayList()的语法。
图13示出了图12中的SubPath()的语法。
图14示出了图13中的SubPlayItem(i)的语法。
图15示出了图12中的PlayItem()的语法。
图16示出了图15中的STN_table()的语法。
图17示出了3D_PlayList的具体示例。
图18示出了类型的含义。
图19示出了SubPath_type的含义。
图20示出了播放设备的配置示例。
图21示出了图20中的解码器单元的配置示例。
图22示出了3D_PL_type的示例。
图23示出了clpi文件的语法。
图24示出了利用图22和图23中的数据执行的文件管理的概念。
图25的流程图说明了根据图22中的3D_PlayList文件执行的播放处理。
图26示出了chunk_map()的语法示例。
图27示出了chunk_map()的一个具体示例。
图28示出了大块的分离。
图29示出了3D_PlayList的另一个示例。
图30示出了clpi文件的语法。
图31示出了利用图29和图30中的数据执行的文件管理的概念。
图32的流程图说明了根据图29中的3D_PlayList文件执行的播放处理。
图33示出了又一个3D_PlayList。
图34示出了clpi文件的语法。
图35示出了利用图33和图34中的数据执行的文件管理的概念。
图36的流程图说明了根据图33中的3D_PlayList文件执行的播放处理。
图37示出了图27中的chunk_map()的内容的概况。
图38示出了EP_map()的语法。
图39的流程图说明了播放设备的随机访问处理。
图40示出了由步骤S44和S45中的处理指定的位置的示例。
图41示出了由步骤S46中的处理识别出的SPN_chunk_start[k]。
图42示出了记录在光盘上的AV流的配置。
图43示出了Clip AV流的示例。
图44示出了EP_map的示例。
图45示出了由SPN_EP_start指示的源分组的数据配置的示例。
图46的框图示出了软件装配处理单元的配置示例。
图47示出了包括软件装配处理单元的配置的一个示例。
具体实施方式
[播放系统的配置]
图1示出了包括本发明被应用到的播放设备201的播放系统的配置示例。
如图1所示,该播放系统包括通过HDMI(高清多媒体接口)线缆等连接的播放设备201和显示设备203。诸如BD之类的光盘202被安装到播放设备201。
用于显示视点数目为2的立体图像(也称作3D图像)所必需的流记 录在光盘202中。
每个流的数据以区域(extent)为单位交织地记录在光盘202上。
播放设备201是与记录在光盘202中的流的3D播放相对应的播放器。播放设备201播放光盘202中记录的流,并且在由电视接收机等构成的显示设备203上显示通过播放获得的3D图像。播放设备201以同样的方式播放音频,并且从提供给显示设备203的扬声器等中输出。
可以这样显示3D图像的流被记录到光盘202上。例如H.264AVC(高级视频编码)/MVC(多视点视频编码)被用作将流记录到光盘202上的编码方法。
[H.264AVC/MVC简档]
H.264AVC/MVC定义了称作基本视点视频的图像流和称作从属视点视频的图像流。此后,将H.264AVC/MVC简档适当地简称为MVC。
图2示出了拍摄示例。
如图2所示,通过将同一物体作为对象来利用用于L图像的相机和用于R图像的相机执行拍摄。由用于L图像的相机和用于R图像的相机拍摄的视频的基础流(elementary stream)被输入到MVC编码器。
图3的框图示出了MVC编码器的配置示例。
如图3所示,MVC编码器211包括H.264/AVC编码器221、H.264/AVC解码器222、Depth(深度)计算单元223、从属视点视频编码器224和复用器225。
由用于L图像的相机拍摄的视频#1的流被输入到H.264/AVC编码器221和Depth计算单元223。另外,由用于R图像的相机拍摄的视频#2的流被输入到Depth计算单元223和从属视点视频编码器224。视频#2的流也可以被输入到H.264/AVC编码器221和Depth计算单元223,而视频#1的流可以被输入到Depth计算单元223和从属视点视频编码器224。
H.264/AVC码器221将视频#1的流编码成例如H.264AVC/High简档视频流。H.264/AVC编码器221将经编码获得的AVC视频流作为基本视点视频流,输出到H.264/AVC解码器222和复用器225。
H.264/AVC解码器222对自H.264/AVC编码器221提供来的AVC视频流进行解码,并且将经解码获得的视频#1的流输出到从属视点视频编码器224。
Depth计算单元223基于视频#1的流和视频#2的流计算Depth(视差(parallax)),并且将计算出的Depth数据输出到复用器225。
从属视点视频编码器224对自H.264/AVC解码器222提供来的视频#1的流和外部输入的视频#2的流进行编码,并输出从属视点视频流。
基本视点视频不允许利用另一个流作为参考图像的预测编码,但是如图4所示,允许利用基本视点视频作为参考图像的预测编码。例如,在L图像作为基本视点视频并且R图像作为从属视点视频的情况下执行编码时,作为编码结果获得的从属视点视频流的数据量小于基本视点视频流的数据量。
现在,由于利用H.264/AVC编码,已对基本视点视频执行了时间方向上的预测。另外,同样对于从属视点视频,也与视点之间的预测一起执行了时间方向上的预测。为了解码从属视点视频,需要先完成对对应的基本视点视频的解码,因为基本视点视频在编码时被作为参考源。
从属视点视频编码器224将通过利用这种视点间的预测而获得的从属视点视频流输出到复用器225。
复用器225将自H.264/AVC编码器221提供来的基本视点视频流、自Depth计算单元223提供来的从属视点视频流(Depth的数据)和自从属视点视频编码器224提供来的从属视点视频流复用成例如MPEG2TS。基本视点视频流和从属视点视频流可以被复用到单个MPEG2TS中,或者可以被包括在分离的MPEG2TS中。
复用器225输出所生成的TS(MPEG2TS)。从复用器225输出的TS与其他管理数据一起被记录到记录设备中的光盘202中,并且以记录在光盘202中的方式被提供给播放设备201。
在下面,在两种从属视点视频中,由Depth信息构成的从属视点视频被称作D1视点视频,而由R图像构成的从属视点视频称作D2视点视频。注意,由R图像构成的从属视点视频可以作为D1视点视频处理,而 由Depth信息构成的从属视点视频可以作为D2视点视频处理。
另外,利用基本视点视频和D1视点视频执行的3D播放将称作B-D1播放。利用基本视点视频和D2视点视频执行的3D播放将称作B-D2播放。
如果根据用户等的指令执行B-D1播放,则播放设备201从光盘202读取并播放基本视点视频流和D1视点视频流。
同样,如果执行B-D2播放,则播放设备201从光盘202读取并播放基本视点视频流和D2视点视频流。
此外,如果执行一般2D图像的播放,则播放设备201仅从光盘202读取并播放基本视点视频流。
基本视点视频流是利用H.264/AVC编码的AVC视频流,因此,只要播放机兼容BD格式,就可以播放该基本视点视频流,并且可以显示2D图像。
[TS的配置示例]
图5示出了TS的配置示例。
基本视点视频、从属视点视频、主音频、基本PG、从属PG、基本IG和从属IG中的每个的流都被复用到图5中的主TS中。因此,从属视点视频流可以与基本视点视频流一起被包括在主TS中。
主TS和辅TS被记录到光盘202中。主TS是至少包括基本视点视频流的TS。辅TS是与主TS一起使用的并且包括基本视点视频流之外的流的TS。
基本视点和从属视点每个的流被准备用于PG和IG,以便与视频类似地实现3D显示。
图6示出了TS的另一个配置示例。
基本视点视频和从属视点视频每个的流都被复用到图6中的主TS中。
另一方面,主音频、基本PG、从属PG、基本IG和从属IG中的每个的流都被复用到辅TS中。
因此,视频流可以被复用到主TS中,而PG和IG等的流被复用到辅TS中。
图7示出了TS的又一个配置示例。
基本视点视频、主音频、基本PG、从属PG、基本IG和从属IG每个的流都被复用到图7中的主TS中。
另一方面,从属视点视频流被包括在辅TS中。
因此,从属视点视频流可以被包括在与基本视点视频流分离的另一个TS中。
[应用格式]
图8示出了播放设备201的AV流管理的示例。
AV流的管理是利用图8中示出的PlayList(播放列表)和Clip两层执行的。可以将AV流记录在光盘202上以及播放设备201的本地存储设备中。
现在,包括一个AV流和作为附接到其的信息的Clip信息的对被作为一个对象,并且将被总地称作Clip。在这里,存储AV流的文件将被称作AV流文件。另外,存储Clip信息的文件也称作Clip信息文件。
AV流被映射到时间轴上,并且每个Clip的访问点主要利用时间戳在PlayList中指定。Clip信息文件用于寻找AV流内开始解码的地址等。
PlayList是AV流的一组播放节(section)。AV流内的一个播放节称作一个PlayItem(播放项)。PlayItem在时间轴上利用播放节的一对入点(In point)和出点(Out point)代表。如图8所示,PlayList由单个或多个PlayItem构成。
从图8的左侧起的第一个PlayList包括两个PlayItem,左侧的Clip中包括的AV流的前半部分和后半部分分别由它的两个PlayItem引用。
从左侧起的第二个PlayList包括一个PlayItem,由其引用右侧的Clip中包括的整个AV流。
从左侧起的第三个PlayList包括两个PlayItem,左侧的Clip中包括的AV流的一部分和右侧的Clip中包括的AV流的一部分分别被这两个 PlayItem引用。
例如,如果从左侧起第一个PlayList中包括的左侧的PlayItem已被盘导航程序指定为播放对象,则执行对由该PlayItem引用的、左侧的Clip中包括的AV流的前半部分的播放。因此,PlayList被用作用于管理AV流的播放的播放管理信息。
在PlayList内,根据一个或多个PlayItem的排列创建的播放路径将称作主路径(Main Path)。
另外,在PlayList内,根据一个或多个SubPlayItem创建的、与主路径并列的播放路径将称作辅路径(Sub Path)。
图9示出了主路径和辅路径的配置。
PlayList可以具有一个主路径和一个或多个辅路径。
上述基本视点视频流作为构成主路径的PlayItem引用的流被管理。另外,从属视点视频流作为构成辅路径的SubPlayItem引用的流被管理。
图9中的PlayList具有一个主路径和三个辅路径,该一个主路径包括一列三个PlayItem。
构成主路径的PlayItem具有从头开始按照次序为设置的ID。辅路径也具有从头开始按照次序的ID:Subpath_id=0、Subpath_id=1并且Subpath_id=2。
在图9中的示例中,在Subpath_id=0的辅路径中包括一个SubPlayItem,在Subpath_id=1的辅路径中包括两个SubPlayItem,并且在Subpath_id=2的辅路径中包括一个SubPlayItem。
至少一个视频流(主图像数据)被包括在由一个PlayItem引用的ClipAV流中。
另外,该Clip AV流中可能包括或者可能不包括在与该Clip AV流中包括的视频流相同的定时处(同步)播放的一个或多个音频流。
Clip AV流中可能包括或者可能不包括与该Clip AV流中包括的视频流同步播放的一个或多个位图的字幕数据(PG(呈现图形))流。
Clip AV流中可能包括或者可能不包括与该Clip AV流中包括的视频流同步播放的一个或多个IG(交互图形)流。IG流用于显示由用户操作 的按钮等图形。
在由一个PlayItem引用的Clip AV流中,复用了视频流、与其同步播放的零个或多个音频流、零个或多个PG流和零个或多个IG流。
另外,一个SubPlayItem引用作为与由PlayItem引用的Clip AV流不同的流的视频流、音频流、或PG流等。
利用这种PlayList、PlayItem和SubPlayItem来管理AV流例如在日本未实审专利申请公开No.2008-252740和日本未实审专利申请公开No.2005-348314中有所描述。
[目录结构]
图10示出了要记录在光盘202上的文件的管理结构的示例。
如图10所示,文件是以层级方式通过目录结构管理的。在光盘202上创建了一个根目录。根目录下是由一个记录播放系统管理的范围。
BDMV目录布置在根目录下。
作为设置了名“Index.bdmv”的文件的Index文件(索引文件)和作为设置了名“MovieObject.bdmv”的文件的MovieObject文件紧接着被存储在BDMV目录下面。
在BDMV目录下面还提供了BACKUP目录、PLAYLIST目录、CLIPINF目录、STREAM目录等。
描述了PlayList的PlayList文件被存储在PLAYLIST目录中。5位数字和扩展名“.mpls”组合而成的名称被设置给每个PlayList文件。文件名“00000.mpls”被设置给图10中示出的一个PlayList文件。
Clip信息文件被存储在CLIPINF目录中。5位数字和扩展名“.clpi”组合而成的名称被设置给每个Clip信息文件。
文件名“00001.clpi”、“00002.clpi”和“00003.clpi”分别被设置给图10中的三个Clip信息文件。下文中,Clip信息文件将被适当地称作clpi文件。
例如,clpi文件“00001.clpi”是描述了与基本视点视频的Clip有关的信息的文件。
clpi文件“00002.clpi”是描述了与D2视点视频的Clip有关的信息的文件。
clpi文件“00003.clpi”是描述了与D1视点视频的Clip有关的信息的文件。
流文件被存储在STREAM目录中。5位数字和扩展名“.m2ts”组合而成的名称或者5位数字和扩展名“.ilvt”组合而成的名称被设置给每个流文件。下文中,设置了扩展名“.m2ts”的文件将被适当地称作m2ts文件。另外,设置了扩展名“.ilvt”的文件将称作ilvt文件。
m2ts文件“00001.m2ts”是用于2D播放的文件,并且通过指定该文件而执行对基本视点视频流的读取。
m2ts文件“00002.m2ts”是D2视点视频流文件,而m2ts文件“00003.m2ts”是D1视点视频流文件。
ilvt文件“10000.ilvt”是用于B-D1播放的文件,并且通过指定该文件而执行对基本视点视频流和D1视点视频流的读取。
ilvt文件“20000.ilvt”是用于B-D2播放的文件,并且通过指定该文件而执行对基本视点视频流和D2视点视频流的读取。
除了图10中所示的目录外,在BDMV目录下面还提供了存储音频流文件等的目录。
[各个数据的语法]
图11示出了PlayList文件的语法。
PlayList文件是设置了扩展名“.mpls”的文件,存储在图10中的PLAYLIST目录中。
图11中的type_indicator表示“xxxxx.mpls”文件的类型。
version_number表示“xxxxx.mpls”文件的版本号。version_number由4位数字构成。例如,指示出这是“3D规格版本”的“0240”被设置在用于3D播放的PlayList文件中。其中PlayList文件被设置有“0240”的PlayList是后面将描述的3D_PlayList。
PlayList_start_address表示PlayList()的开头地址,以从PlayList文件的 开头字节起的相对字节数为单位。
PlayListMark_start_address表示PlayListMark()的开头地址,以从PlayList文件的开头字节起的相对字节数为单位。
ExtensionData_start_address表示ExtensionData()的开头地址,以从PlayList文件的开头字节起的相对字节数为单位。
160比特的reserved_for_future_use被包括在ExtensionData_start_address之后。
与诸如播放限制之类的PlayList的播放控制有关的参数存储在AppInfoPlayList()中。
与主路径、辅路径等有关的参数存储在PlayList()中。后面将描述PlayList()的内容。
PlayList的标记信息,即,与作为用户操作的跳跃目的地(跳跃点)或者用于指示章跳跃等的命令的标记有关的信息,存储在PlayListMark()中。
ExtensionData()被形成以使得私有数据被插入到其中。
图12示出了图11中的PlayList()的语法。
length(长度)是一个32比特的无符号整数,指示从该length字段到PlayList()的末尾的字节数。即,length表示从reserved_for_future_use到PlayList末尾的字节数。
在length之后准备了16比特的reserved_for_future_use。
number_of_PlayItems是一个16比特的字段,指示PlayList内PlayItem的数目。在图9中的示例的情形中,PlayItem的数目为3。按照PlayItem()在PlayList内出现的次序从0起向PlayItem_id赋值。例如,在图9中赋予了PlayItem_id=0、1、2。
number_of_SubPaths是一个16比特的字段,指示PlayList内辅路径的数目。在图9的中的示例的情形中,辅路径的数目为3。按照SubPath()在PlayList中出现的次序从0起向SubPath_id赋值。例如,在图9中赋予了SubPath_id=0、1、2。在下文中,PlayItem()仅由PlayItem的数目引用,并且SubPath()仅由辅路径的数目引用。
图13示出了图12中的SubPath()的语法。
length是一个32比特的无符号整数,指示从该length字段到SubPath()的末尾的字节数。即,length表示从reserved_for_future_use到SubPath末尾的字节数。
在length之后准备了16比特的reserved_for_future_use。
Subpath_type是一个8比特的字段,指示辅路径应用的类型。例如SubPath_type被用于例如指示辅路径的类型是音频、位图字幕或者文本字幕。
在SubPath_type之后准备了15比特的reserved_for_future_use。
is_repeat_SubPath是一个1比特的指定辅路径的播放方法的字段,并且指示在主路径的播放期间重复执行对辅路径的播放还是只执行一次对辅路径的播放。例如,该字段在如下情况中被使用:由主路径引用的Clip的播放定时和由辅路径引用的Clip的播放定时不同(主路径作为静止图像幻灯片播放的路径,而辅路径是作为背景音乐的音频的路径)。
在is_repeat_SubPath之后准备了8比特的reserved_for_future_use。
number_of_SubPlayItems是一个8比特的字段,指示在一个辅路径中的SubPlayItem的数目(条目的数目)。例如,图9中的SubPath_id=0的SubPlayItem的number_of_SubPlayItems  为1,而SubPath_id=1的SubPlayItem的number_of_SubPlayItems为2。在下文中,SubPlayItem()仅由SubPlayItem的数目引用。
图14示出了图13中的SubPlayItem(i)的语法。
length是一个16比特的无符号整数,指示从该length字段到SubPlayItem()的末尾的字节数。
图14中的SubPlayItem(i)分别对SubPlayItem引用一个Clip的情形和SubPlayItem引用多个Clip的情形进行了描述。
将对SubPlayItem引用一个Clip的情形进行描述。
Clip_Information_file_name[0]表示被SubPlayItem引用的Clip信息文件的名称。
Clip_codec_identifier[0]表示Clip的编解码方法。在 Clip_codec_identifier[0]之后包括有reserved_for_future_use。
is_multi_Clip_entries是指示对多个Clip的登记的存在性的标志。如果is_multi_Clip_entries标志为on,则对SubPlayItem引用多个Clip的情形中的语法进行参考。
ref_to_STC_id[0]是与STC间断点有关的信息(系统时间基础的间断点)。
SubPlayItem_IN_time表示辅路径播放节的开始位置,并且SubPlayItem_OUT_time表示结束位置。
sync_PlayItem_id和sync_start_PTS_of_PlayItem表示辅路径在主路径的时间轴上开始播放的时间点。
SubPlayItem_IN_time、SubPlayItem_OUT_time、sync_PlayItem_id和sync_start_PTS_of_PlayItem由SubPlayItem所引用的Clip共用。
下面将对“如果is_multi_Clip_entries==1b”并且SubPlayItem引用多个Clip的情形进行描述。
num_of_Clip_entries表示要被引用的Clip的数目。Clip_Information_file_name[SubClip_entry_id]的数目指定排除了Clip_Information_file_name[0]的Clip的数目。
Clip_codec_identifier[SubClip_entry_id]表示Clip的编解码方法。
ref_to_STC_id[SubClip_entry_id]是与STC间断点有关的信息(系统时间基础的间断点)。在ref_to_STC_id[SubClip_entry_id]之后准备有reserved_for_future_use。
图15示出了图12中的PlayItem()的语法。
length是一个16比特的无符号整数,指示从该length字段到PlayItem()的末尾的字节数。
Clip_Information_file_name[0]表示由PlayItem引用的Clip信息文件的文件名。注意,相同的5位数字被包含在包括Clip的m2ts文件的文件名以及名与其对应的Clip信息文件的文件名中。
Clip_codec_identifier[0]表示Clip  的编解码方法。在Clip_codec_identifier[0]之后准备了reserved_for_future_use。在 reserved_for_future_use之后包括有is_multi_angle和connection_condition。
ref_to_STC_id[0]是与STC间断点有关的信息(系统时间基础的间断点)。
IN_time表示PlayItem的播放节的开始位置,而OUT_time表示结束位置。
在0UT_time后包括有U0_mask_table()、PlayItem_random_access_mode和still_mode。
STN_table()中包括由目标PlayItem引用的AV流的信息。另外,如果辅路径要与目标PlayItem相关联地被播放,则还包括由构成其辅路径的SubPlayItem引用的AV流的信息。
图16示出了图15中的STN_table()的语法。
STN_table()被设置为PlayItem的属性。
length是一个16比特的无符号整数,指示从该length字段到STN_table()的末尾的字节数。在该length之后还准备有16比特的reserved_for_future_use。
number_of_video_stream_entries表示要输入(登记)到STN_table()表中的流的数目,在其中提供了video_stream_id。
video_stream_id是用于标识视频流的信息。例如,基本视点视频流就是利用该video_stream_id来标识的。
从属视点视频流的ID可以定义在STN_table()中,或者可以通过计算,例如通过将预定值与基本视点视频流的ID相加来找到。
video_stream_number是从用户看的视频流号,用于视频切换。
number_of_audio_stream_entries表示被输入到STN_table()中的第一音频流的流数目,在其中提供了audio_stream_id。audio_stream_id是用于标识音频流的信息,并且audio_stream_number是从用户看的音频流号,用于音频切换。
number_of_audio_stream2_entries表示被输入到STN_table()中的第二音频流的流数目,在其中提供了audio_stream_id2。audo_stream_id2是用于标识音频流的信息,并且audio_stream_number是从用户看的音频流号,用 于音频切换。在该示例中,实现了对要播放的音频的切换。
number_of_PG_txtST_stream_entries表示被输入到STN_table()中的流的数目,在其中提供了PG_txtST_stream_id。通过对位图字幕进行游标长度编码而获得的PG流以及文本字幕文件(txtST)被输入到这里。PG_txtST_stream_id  是用于标识字幕流的信息,并且PG_txtST_stream_number是从用户看的字幕流号,用于字幕切换。
number_of_IG_stream_entries表示被输入到STN_table()中的流的数目,在其中提供了IG_stream_id。IG流被输入到这里。IG_stream_id是用于标识IG流的信息,并且IG_stream_number是从用户看的图形流号,用于图形切换。
主TS和辅TS的ID也被登记到STN_table()中。在stream_attribute()中描述了其ID不是基础流,而是TS_ID。
[PlayList的具体示例]
图17示出了作为用于3D播放的PlayList的3D_PL_type的具体示例。
为了便于描述,在图17的左侧示出了用于指示行号的数字和“:”。这里的行号和“:”并不是3D_PlayList的组成部分。
第2行中的number_of_PlayItems对应于图12中的number_of_PlayItems,并且指示3D_PlayList中PlayItem的数目。从第2行到第8行是对PlayItem的描述。即,从第3行到第8行对应于图12中利用for语句对PlayItem的描述。
第5行中的ref_to_B_clpi_file_name对应于图15中的Clip_Information_file_name[0],并且指示存储基本视点视频流的m2ts文件的文件名中除扩展名“.m2ts”之外的5位数字。在该描述中,标识出了要被引用的m2ts文件和基本视点视频Clip的clip文件。
第6行中的type(类型)示出了基本视点视频和光盘202上与其相关联的D1/D2视点视频数据的排列的类型。type是利用例如图15中的Clip_codec_identifier[0]之后的reserved_for_future_use设置的。
图18示出了type的含义。
type的值为0表明基本视点视频、D1视点视频和D2视点视频未被交织。
在该情形中,分组中的一个或者现有的D1/D2视点视频二者被与基本视点视频分组一起复用到一个MPEG2-TS中。
type的值为1表明基本视点视频、D1视点视频和D2视点视频全部被交织。
在该情形中,包括B视点视频的第一TS、包括D1视点视频的第二TS和包括D2视点视频的第三TS这三个TS都以区域为单位被交织在光盘202上。
type的值为2表明基本视点视频和D1视点视频被交织。
在该情形中,包括B视点视频的第一TS和包括D1视点视频分组的第二TS这两个TS以区域为单位被交织在光盘202上。D2视点视频分组可以被复用到第一TS中。另外,D2视点视频分组也可以被复用到第二TS中。
type的值为3表明基本视点视频和D2视点视频被交织。
在该情形中,包括B视点视频的第一TS和包括D2视点视频分组的第二TS这两个TS以区域为单位被交织在光盘202上。D1视点视频分组可以被复用到第一TS中。另外,D1视点视频分组也可以被复用到第二TS中。
返回对图17的说明,第7行中的STN_table对应于图15中的STN_table()。如参考图16所述,在STN_table中描述了在3D_PlayList中引用的每个流的ID。
第9行中的number_of_SubPaths对应于图12中的nunber_of_SubPaths,指示3D_PlayList中SubPath的数目。从第9行到第14行是对SubPath的描述。即,从第10行到第14行对应于图12中利用for语句对SubPath的描述。
第12行的SubPath_type对应于图13中的SubPath_type,并且示出了SubPath的类型。
图19示出了SubPath_type的含义。
现在描述图19中示出的各个主要值,SubPath_type的值为8表明是播放D2视点视频的辅路径。
另外,SubPath_type的值为9表明是播放D1视点视频的辅路径。
图17中的第13行中的ref_to_clpi_file_name对应于图14中的Clip_Information_file_name[0]。
如果SubPath播放D1视点视频,则ref_to_clpi_file_name指示存储D1视点视频的m2ts文件的文件名中除扩展名“.m2ts”外的五位数字。在该说明中,标识出了要引用的clpi文件。
另一方面,如果SubPath播放D2视点视频,则第13行中的ref_to_clpi_file_name指示存储D2视点视频的m2ts文件的文件名中除扩展名“.m2ts”外的五位数字。
从第16行到第30行是有关interleaved_file_info(),即,ilvt文件的描述。例如,利用PlayItem()和SubPath()中的reserved_for_future_use,准备了与ilvt文件有关的描述。
从第17行到第22行,描述了第6行中的type的值为1并且基本视点视频、D1视点视频和D2视点视频都被交织的情形。
第18行中的ref_to_D1-B_interleaved_file_name指示用于播放基本视点视频和D1视点视频的ilvt文件的文件名中除扩展名“.ilvt”外的五位数字。
第19行中的ref_to_D2-B_interleaved_file_name指示用于播放基本视点视频和D2视点视频的ilvt文件的文件名中除扩展名“.ilvt”外的五位数字。
第20行中的ref_to_D1_clpi_file_name指示用于存储D1视点视频的m2ts文件的文件名中除扩展名“.m2ts”外的五位数字。在该说明中,标识出了在播放D1视点视频的m2ts文件时要引用的clpi文件。
第21行中的ref_to_D2_clpi_file_name指示用于存储D2视点视频的m2ts文件的文件名中除扩展名“.m2ts”外的五位数字。在该说明中,标识出了在播放D2视点视频的m2ts文件时要引用的clpi文件。
从第23行到第26行,说明了第6行中的type的值为2并且基本视点视频和D1视点视频被交织的情形。
第24行中的ref_to_D1-B_interleaved_file_name指示用于播放基本视点视频和D1视点视频的ilvt文件的文件名中除扩展名“.ilvt”外的五位数字。
第25行中的ref_to_D1_clpi_file_name指示用于存储D1视点视频的m2ts文件的文件名中除扩展名“.m2ts”外的五位数字。在该说明中,标识出了在播放D1视点视频的m2ts文件时要引用的clpi文件。
从第27行到第30行,说明了第6行中的type的值为3并且基本视点视频和D2视点视频被交织的情形。
第28行中的ref_to_D1-B_interleaved_file_name指示用于播放基本视点视频和D2视点视频的ilvt文件的文件名中除扩展名“.ilvt”外的五位数字。
第29行中的ref_to_D2_clpi_file_name指示用于存储D2视点视频的m2ts文件的文件名中除扩展名“.m2ts”外的五位数字。在该说明中,标识出了在播放D2视点视频的m2ts文件时要引用的clpi文件。
因此,如果在光盘202中数据被交织,则信息被描述在3D_PlayList中,其中可针对D1视点视频和D2视点视频标识出与Clip AV流相对应的clpi文件的文件名。
[播放设备201的配置示例]
图20的框图示出了播放设备201的配置示例。
控制器251执行预先准备好的控制程序来控制播放设备201的整个操作。
例如,控制器251控制盘驱动器252读取用于3D播放的PlayList文件。另外,控制器251还基于STN_table中登记的ID读取主TS和辅TS,并将这些提供给解码器单元256。
盘驱动器252根据控制器251的控制从光盘202读取数据,并且将读取的数据输出到控制器251、存储器253或解码器单元256。
存储器253适当地存储控制器251执行各种类型的处理必需的数据。
本地存储设备254由例如HDD(硬盘驱动器)配置而成。从服务器272下载的D1/D2视点视频流等被记录到本地存储设备254中。记录在本地存储设备254中的流也被适当地提供给解码器单元256。
因特网接口255根据控制器251的控制经由网络271执行与服务器272的通信,并将从服务器272下载的数据提供给本地存储设备254。
用于更新记录在光盘202中的数据是从服务器272下载的。下载的D1/D2视点视频流能够与记录在光盘202中的基本视点视频流一起使用,从而可以实现对与光盘202上的内容不同的内容进行3D播放。在下载了D1/D2视点视频流时,PlayList的内容也被适当地更新。
解码器单元256对自盘驱动器252或本地存储设备254提供来的流进行解码,并将获得的视频信号输出到显示设备203。音频信号也经由预定的路径被输出到显示设备203。
操作输入单元257包括诸如按钮、按键、触摸板、拨盘、鼠标之类的输入设备和用于接收从预定的遥控器发送来的红外线之类的信号的接收单元。操作输入单元257检测用户的操作,来将表示检测到的操作的内容的信号提供给控制器251。
图21示出了解码器单元256的配置示例。
分离单元281在控制器251的控制下将自盘驱动器252提供来的数据分离成构成主TS的分组的数据和构成辅TS的分组的数据。例如,从光盘202读取的TS基于3D PlayList文件中的STN_table()中描述的流ID而被提供给分离单元281。
分离单元281将所分离的构成主TS的分组输出并存储到读缓冲器282中,并将构成辅TS的分组输出并存储到读缓冲器285中。
另外,分离单元281还将自本地存储设备254提供来的构成辅TS的分组输出并存储到读缓冲器285中。
如上所述,存在自服务器272下载的D1/D2视点视频被存储到本地存储设备254中的情形。在被指示与记录在光盘202上的基本视点视频一起播放时,用作辅TS的D1/D2视点视频流被从本地存储设备254读取并被 提供给分离单元281。
PID过滤器283基于每个分组中设置的PID来分配读缓冲器282中存储的构成主TS的分组。构成基本视点视频的分组的PID、构成D1视点视频的分组的PID和构成D2视点视频的分组的PID每个由控制器251指定。
PID过滤器283从读缓冲器282读取主TS中包括的基本视点视频分组,并将其输出并存储到ES缓冲器284中。由基本视点视频分组构成的ES(基础流)被存储到ES缓冲器284中。
另外,如果D1/D2视点视频分组被复用到主TS中,则基于PID提取出其分组并输出到开关287。
PID过滤器286从读缓冲器285读取包括在辅TS中的D1/D2视点视频分组,并将其输出到开关287。
注意,仅描述了对基本视点视频和D1/D2视点视频的处理,但是如参考图5所述,诸如PG和IG之类的图形数据也可以被复用到主TS中。类似地,如参考图6所述,D1/D2视点视频之外的字幕数据和图形数据也可以被复用到辅TS中。
PID过滤器283和PID过滤器286适当地基于PID分配其数据,并将其输出到预定的输出目的地。用于解码图形数据等的解码器被连接到图21中的PID过滤器283和PID过滤器286的框中示出的输出目的地端子(圆圈)。
开关287将自PID过滤器283提供来的D1/D2视点视频分组输出并存储到ES缓冲器288中。另外,开关287还将自PID过滤器286提供来的D1/D2视点视频分组输出并存储到ES缓冲器288中。由D1/D2视点视频分组构成的ES被存储到ES缓冲器288中。
开关289将ES缓冲器284中存储的基本视点视频分组和ES缓冲器288中存储的D1/D2视点视频分组的经解码的分组输出到解码器290。诸如DTS(解码时间戳)之类的时间点信息被设置到基本视点视频和D1/D2视点视频的PES分组中,并且基于其时间点信息执行从缓冲器的读取。
视频解码器290对自开关289提供来的分组进行解码,并输出通过解 码而获得的基本视点视频或D1/D2视点视频的数据。
[3D_PlayList的示例1]
图22示出了3D_PlayList的一个示例。
图22中的PlayList文件“00000.mpls”中描述的3D_PlayList是管理光盘202的播放的PlayList,在光盘202中交织了基本视点视频、D1视点视频和D2视点视频。即,type值为1。
在图22的示例中,PlayItem()的ref_to_B_clpi_file_name是“00001”。根据该描述,如果播放作为基本视点视频m2ts的“00001.m2ts”,则识别出引用图10中的clpi文件“00001.clpi”。
另外,SubPath()[1]的SubPath_type为“9”。SubPath_type为“9”表明这里的第一SubPath是播放D2视点视频的辅路径。
SubPath()[1]的ref_to_clpi_file_name为“00002”。根据该描述,如果播放D2视点视频,则识别出引用图10中的clpi文件“00002.clpi”。
SubPath()[2]的SubPath_type为“8”。SubPath_type为“8”表明这里的第二SubPath是播放D1视点视频的辅路径。
SubPath()[2]的ref_to_clpi_file_name为“00003”。根据该描述,如果播放D1视点视频,则识别出引用图10中的clpi文件“00003.clpi”。
interleaved_file_info()的ref_to_D1-B_interleaved_file_name是“10000”。根据该描述,如果播放D1-B,则识别出引用图10中的ilvt文件“10000.ilvt”。
另外,interleaved_file_info()的ref_to_D2-B_interleaved_file_name是“20000”。根据该描述,如果播放D2-B,则识别出引用图10中的ilvt文件“20000.ilvt”。
ref_to_D1_clpi_file_name是“00003”。根据该描述,如果播放D1视点视频,则识别出引用图10中的clpi文件“00003.clpi”。
ref_to_D2_clpi_file_name是“00002”。根据该描述,如果播放D2视点视频,则识别出引用图10中的clpi文件“00002.clpi”。
图23示出了与图22中的3D_PlayList一起使用的clpi文件的语法。
图23中的A示出了clpi文件“00001.clpi”的示例。如上所述,clpi文件“00001.clpi”是在播放作为基本视点视频m2ts文件的“00001.m2ts”时要引用的文件。
number_of_source_packets1指示m2ts文件“00001.m2ts”中包括的源分组的数目。
EP_map指示m2ts文件“00001.m2ts”中包括的TS内的入口点(entry point,EP)的位置信息。
chunk_map()指示源分组号(SPN),源分组号指示m2ts文件“00001.m2ts”中包括的TS中按照从开头的大块(chunk)起每个大块的开始位置的源分组号。
一个大块属于一个TS,并且是在光盘202上连续排列的源分组的集合。现在将描述可应用于光盘202上排列的一个区域的一个大块。
chunk_map()指示每个大块的长度。稍后将描述chunk_map()的具体示例。
图23中的B示出了clpi文件“00002.clpi”的示例。clpi文件“00002.clpi”是在播放D2视点视频时要引用的文件。
图23中的C示出了clpi文件“00003.clpi”的示例。clpi文件“00003.clpi”是在播放D1视点视频时要引用的文件。对图23中的B和图23中的C的说明与图23中的A的相同。
图24示出了利用图22和图23中的数据执行的文件管理的概念。
如图24所示,文件管理是以物理层、文件系统层和应用层这三层配置的形式执行的。图22中的3D_PlayList和图23中的clpi文件是应用层信息。
物理层是光盘202的层,其中以交织的状态记录了基本视点视频、D1视点视频和D2视点视频三者。
在图24中的示例中,D1视点视频大块、D2视点视频大块和基本视点视频大块按照它们的顺序排列。在图24中,由字母“B”标注的框指示基本视点视频大块、由字母“D1”标注的框指示D1视点视频大块、而由字母“D2”标注的框指示D2视点视频大块。
因此,基本视点视频、D1视点视频和D2视点视频的区域(大块)被排列为交织在光盘202上。交织排列是指来自相同类型流的区域不相邻的循环排列。
在文件系统层中,由应用利用文件名所指定的流文件(m2ts文件、ilvt文件)和光盘202上的各个大块被相关联。文件系统例如是UDF文件系统。
如图24所示,m2ts文件“00001.m2ts”由光盘202上排列的基本视点视频大块构成。
另外,m2ts文件“00002.m2ts”由光盘202上排列的D2视点视频大块构成。
m2ts文件“00003.m2ts”由光盘202上排列的D1视点视频大块构成。
文件“20000.ilvt”由光盘202上排列的D2视点视频大块和基本视点视频大块构成。
文件“10000.ilvt”由光盘202上排列的D1视点视频大块和基本视点视频大块构成。
如果应用指定“00001.m2ts”并且指示读出数据以便执行2D播放,则根据文件系统的管理来读取基本视点视频大块。
另外,如果应用指定“10000.ilvt”并且指示读出数据以便执行B-D1播放,则根据文件系统的管理来读取D1视点视频大块和基本视点视频大块。
如果应用指定“20000.ilvt”并且指示读出数据以便执行B-D2播放,则根据文件系统的管理来读取D2视点视频大块和基本视点视频大块。
[操作示例1]
现在,将参考图25的流程图描述根据图22中的3D_PlayList文件执行的播放处理。
在步骤S1中,控制器251根据type的值来确认基本视点视频、D1视点视频和D2视点视频都被交织。
在该情形中,在步骤S2中,控制器251前进到读取interleaved_file_info()。
在步骤S3,控制器251基于用户操作等判断是否已指示了B-D1播放。
如果在步骤S3中判断出已指示了B-D1播放,则在步骤S4中,控制器251指定在interleaved_file_info()中描述的“10000.ilvt”(ref_to_D1-B_interleaved_file_name),并且使得通过UDF文件系统从光盘202读取基本视点视频大块和D1视点视频大块。
由盘驱动器252读取的基本视点视频大块和D1视点视频大块被提供给解码器单元256的分离单元281。
在步骤S5中,分离单元281基于图23中的“00001.clpi”(ref_to_B_clpi_file_name  )的chunk_map()和“00003.clpi”(ref_to_D1_clpi_file_name)的chunk_map(),将提供来的数据分离成“00001.m2ts”m2ts文件数据和“00003.m2ts”m2ts文件数据。分离单元281将“00001.m2ts”m2ts文件数据输出到读取缓冲器282,将“00003.m2ts”m2ts文件数据输出到读取缓冲器285。后面将描述利用chunk_map()执行数据的分离。
存储在读缓冲器282中的“00001.m2ts”m2ts文件数据经由PID过滤器283、ES缓冲器284和开关289被提供给解码器290。并且存储在读取缓冲器285中的“00003.m2ts”m2ts文件数据经由PID过滤器286、开关287、ES缓冲器288和开关289被提供给解码器290。
在步骤S6中,解码器290解码(播放)自开关289顺序提供来的分组。
另一方面,如果在步骤S3中判断出尚未指示B-D1播放,即,如果判断出已指示了B-D2播放,则在步骤S7中,控制器251指定在interleaved_file_info()中描述的“20000.ilvt  ”(ref_to_D1-B_interleaved_file_name),并且使得通过UDF文件系统从光盘202读取基本视点视频大块和D2视点视频大块。
在步骤S8中,分离单元281基于“00001.clpi” (ref_to_B_clpi_file_name  )的chunk_map()和“00002.clpi”(ref_to_D2_clpi_file_name)的chunk_map(),将提供来的数据分离成“00001.m2ts”m2ts文件数据和“00002.m2ts”m2ts文件数据。分离单元281将“00001.m2ts”m2ts文件数据输出到读缓冲器282,将“00002.m2ts”m2ts文件数据输出到读缓冲器285。
此后,“00001.m2ts”m2ts文件数据和“00002.m2ts”m2ts文件数据被提供给解码器290,与B-D1播放时类似,在步骤S6中被播放。
[利用chunk_map()的数据分离]
图26示出了chunk_map()的语法的一个示例。
number_of_chunks指示要引用的大块的数目。在number_of_chunks之后,仅描述了这里指定了数目的块信息。
SPN_chunk_start[i]指示例如以开头大块的开始位置作为基点,从该基点的位置到每个大块的开始位置的SPN(lenght)。从开头大块起按照顺序描述了到每个大块的开始位置的SPN。
图27示出了chunk_map()的具体示例。
图27中的A是在clpi文件“00001.clpi”中描述的chunk_map(),其中number_of_chunks是(n+1)。
另外,SPN_chunk_start[i]是0、c1、c2、…、cn。
如图28中的C中所示的第一值0指示以m2ts文件“00001.m2ts”中包括的基本视点视频的开头大块的开始位置为基点从该基点的位置到第一大块(B[0])的开始位置的SPN为0。
第二个值c1指示从该基点位置到第二大块(B[1])的开始位置的SPN为c1。
第三个值c2指示从该基点位置到第三大块(B[2])的开始位置的SPN为c2。
第n+1个值cn指示从该基点位置到最后一个大块,即第n+1个大块(B[n])的开始位置的SPN为cn。
图27中的B是在clpi文件“00002.clpi”中描述的chunk_map(),其中 number_of_chunks是(n+1)。
另外,SPN_chunk_start[i]是0、b1、b2、…、bn。
如图28中的B中所示的第一值0指示以m2ts文件“00002.m2ts”中包括的D2视点视频的开头大块的开始位置为基点从该基点的位置到第一大块(D2[0])的开始位置的SPN为0。
第二个值b1指示从该基点位置到第二大块(D2[1])的开始位置的SPN为b1。
第三个值b2指示从该基点位置到第三大块(D2[2])的开始位置的SPN为b2。
第n+1个值bn指示从该基点位置到最后一个大块,即第n+1个大块(D2[n])的开始位置的SPN为bn。
图27中的C是在clpi文件“00003.clpi”中描述的chunk_map(),其中number_of_chunks是(n+1)。
另外,SPN_chunk_start[i]是0、a1、a2、…、an。
如图28中的A中所示的第一值0指示以m2ts文件“00003.m2ts”中包括的D1视点视频的开头大块的开始位置为基点从该基点的位置到第一大块(D1[0])的开始位置的SPN为0。
第二个值a1指示从该基点位置到第二大块(D1[1])的开始位置的SPN为a1。
第三个值a2指示从该基点位置到第三大块(D1[2])的开始位置的SPN为a2。
第n+1个值an指示从该基点位置到最后一个大块,即第n+1个大块(D1[n])的开始位置的SPN为an。
D1[i]、D2[i]和B[i]按照图28的D中所示的顺序被循环排列在光盘202上。
如果从光盘202读取的数据自盘驱动器252被提供来,则分离单元281基于图27中的三个chunk_map()的描述,分离从所提供来的数据的开头起SPN大小等于a1的数据作为D1[0]。
另外,分离单元281分离从D1[0]的结束处的位置起SPN大小等于b1 的数据作为D2[0],并且分离从D2[0]的结束处的位置起SPN大小等于c1的数据作为B[0]。
分离单元281分离从B[0]的结束处的位置起SPN大小等于a2-a1的数据作为D1[1]。
分离单元281分离从D1[1]的结束处的位置起SPN大小等于b2-b1的数据作为D2[1],并且分离从D2[1]的结束处的位置起SPN大小等于c2-c1的数据作为B[1]。
要被分离的大块在执行B-D1播放时仅是D1[i]和B[i],而在执行B-D2播放时仅是D2[i]和B[i]。
因此,分离单元281利用chunk_map()中描述的每个大块的长度的信息执行了数据分离。
将给出chunk_map()的补充描述。
当type=0时,chunk_map()对于要由ref_to_B_clpi_file_name引用的clpi文件是可选的(不是必需的)。如果存在chunk_map(),则播放机必须忽略该chunk_map()。
另外,对于与本地存储设备254中的m2ts文件相对应的clpi文件,chunk_map()也是可选的(不是必需的)。如果存在chunk_map(),则播放机必须忽略该chunk_map()。
当type=1时,对应的基本视点视频TS、D1视点视频TS和D2视点视频TS这三个TS各自被划分成相同数目(n+1)个大块。即,对于图28中的D1[i]、D2[i]和B[i],具有相同索引i值的一对大块被划分为具有相同的播放时间。
类似地,当type=2时,对应的基本视点视频TS和D1视点视频TS这两个TS各自被划分成相同数目(n+1)个大块。即,对于交织的D1[i]和B[i],具有相同索引i值的一对大块被划分为具有相同的播放时间。
当type=3时,对应的基本视点视频TS和D2视点视频TS这两个TS各自被划分成相同数目(n+1)个大块。即,对于交织的D2[i]和B[i],具有相同索引i值的一对大块被划分为具有相同的播放时间。
[3D_PlayList的示例2]
图29示出了3D_PlayList的另一个示例。
图29中的PlayList文件“00000.mpls”中描述的3D_PlayList是管理光盘202的播放的PlayList,在光盘202中交织了基本视点视频和D2视点视频。即,type值为3。
除了对SubPath的描述仅是对引用D2视点视频的SubPath的描述和对interleaved_file_info()的描述这两点不同之外,图29中的3D_PlayList的描述和图22中的描述类似。
即,SubPath()的SubPath_type为“9”。SubPath_type为“9”表明其中的SubPath是播放D2视点视频的辅路径。
另外,ref_to_clpi_file_name为“00002”。
图29中的interleaved_file_info()的ref_to_D2-B_interleaved_file_name是“20000”。根据该描述,如果播放D2-B,则识别出引用图10中的ilvt文件“20000.ilvt”。
另外,ref_to_D2_clpi_file_name是“00002”。根据该描述,如果播放D2视点视频,则识别出引用图10中的clpi文件“00002.clpi”。
图30示出了与图29中的3D_PlayList一起使用的clpi文件的语法。
图30中的A示出了clpi文件“00001.clpi”的示例,而图30中的B示出了clpi文件“00002.clpi”的示例。在任一clpi文件中,包括了对EP_map和上述chunk_map()的描述。
图31示出了利用图29和图30中的数据执行的文件管理的概念。
如图31所示,物理层是光盘202的层,其中以交织的状态记录了基本视点视频和D2视点视频。
m2ts文件“00001.m2ts”由光盘202上排列的基本视点视频大块构成。
另外,m2ts文件“00002.m2ts”由光盘202上排列的D2视点视频大块构成。
文件“20000.ilvt”由光盘202上排列的D2视点视频大块和基本视点视频大块构成。
如果应用指定“00001.m2ts”并且指示读出数据以便执行2D播放,则根据文件系统的管理来读取基本视点视频大块。
如果应用指定“20000.ilvt”并且指示读出数据以便执行B-D2播放,则根据文件系统的管理来读取D2视点视频大块和基本视点视频大块。
[操作示例2]
现在,将参考图32描述根据图29中的3D_PlayList文件执行的播放处理。
在步骤S11中,控制器251根据type的值来确认基本视点视频和D2视点视频被交织。
在该情形中,在步骤S12中,控制器251前进到读取interleaved_file_info()。
如果已指示了B-D2播放,则在步骤S13中,控制器251指定在interleaved_file_info()中描述的“20000.ilvt”(ref_to_D2-B_interleaved_file_name),并且使得从光盘202读取基本视点视频大块和D2视点视频大块。
盘驱动器252读取的基本视点视频大块和D2视点视频大块被提供给解码器单元256的分离单元281。
在步骤S14中,分离单元281基于“00001.clpi”(ref_to_B_clpi_file_name)的chunk_map()和“00002.clpi”(ref_to_D2_clpi_file_name)的chunk_map(),将所提供来的数据分离成“00001.m2ts”m2ts文件数据和“00002.m2ts”m2ts文件数据。分离单元281将“00001.m2ts”m2ts文件数据输出到读缓冲器282,将“00002.m2ts”m2ts文件数据输出到读缓冲器285。
存储在读缓冲器282中的“00001.m2ts”m2ts文件数据经由PID过滤器283、ES缓冲器284和开关289被提供给解码器290。另一方面,存储在读缓冲器285中的“00002.m2ts”m2ts文件数据经由PID过滤器286、开关287、ES缓冲器288和开关289被提供给解码器290。
在步骤S15中,解码器290解码自开关289顺序提供来的分组。
[3D_PlayList的示例3]
图33示出了3D_PlayList的又一个示例。
图33中的PlayList文件“00000.mpls”中描述的3D_PlayList是管理光盘202上记录的基本视点视频和D2视点视频、以及记录在本地存储设备254上的D1视点视频的播放的PlayList。在光盘202中交织了基本视点视频和D2视点视频。
PlayItem()的type值为3,这指示了光盘202上的数据排列的类型。
SubPath()[1]的SubPath_type为“9”。SubPath_type为“9”表明这里的第一SubPath是播放D2视点视频的辅路径。
SubPath()[1]的ref_to_clpi_file_name为“00002”。根据该描述,如果播放D2视点视频,则识别出引用图10中的clpi文件“00002.clpi”。
SubPath()[2]的SubPath_type为“8”。SubPath_type为“8”表明这里的第二SubPath是播放D1视点视频的辅路径。
SubPath()[2]的ref_to_clpi_file_name为“00003”。根据该描述,如果播放D1视点视频,则识别出引用本地存储设备254中记录的clpi文件“00003.clpi”。
添加了在下载D1视点视频时与这里的第二SubPath相关的描述。
interleaved_file_info()的ref_to_D2-B_interleaved_file_name是“20000”。根据该描述,如果播放B-D2,则识别出引用图10中的ilvt文件“20000.ilvt”。
另外,ref_to_D2_clpi_file_name是“00002”。根据该描述,如果播放D2视点视频,则识别出引用图10中的clpi文件“00002.clpi”。
注意,在本地存储设备254上,D1视点视频未被交织,因此不需要与D1视点视频相关的ilvt文件。
图34示出了与图33中的3D_PlayList一起使用的clpi文件的语法。
图34中的A示出了clpi文件“00001.clpi”的示例,图34中的B示出了中的clpi文件“00002.clpi”的示例。在任一clpi文件中,包括了对EP_map和chunk_map()的描述。
图35示出了利用图33和图34中的数据执行的文件管理的概念。
如图35所示,物理层是光盘202和本地存储设备254的层,在光盘202中以交织的状态记录了基本视点视频和D2视点视频,并且在本地存储设备254中记录了第二SubPath所参考的D1视点视频文件。
在图35中的示例中,存储D1视点视频的m2ts文件的文件名是“00003.m2ts”。另外,与“00003.m2ts”相对应的clpi文件的文件名是“00003.clpi”。
m2ts文件“00001.m2ts”由光盘202上排列的基本视点视频大块构成。
另外,m2ts文件“00002.m2ts”由光盘202上排列的D2视点视频大块构成。
文件“20000.ilvt”由光盘202上排列的D2视点视频大块和基本视点视频大块构成。
如果应用指定“00001.m2ts”并且指示读出数据以便执行2D播放,则根据文件系统的管理来读取基本视点视频大块。
如果应用指定“00001.m2ts”并且指示读出数据以便执行B-D1播放,则根据文件系统的管理来读取基本视点视频大块。另外,D1视点视频m2ts文件是根据图33中的3D_PlayList的第二SubPath的描述而从本地存储设备254被读取的,指定“00003.m2ts”。
如果应用指定“20000.ilvt”并且指示读出数据以便执行B-D2播放,则根据文件系统的管理来读取D2视点视频大块和基本视点视频大块。
[操作示例3]
将参考图36的流程图描述根据图33中的3D_PlayList文件执行的播放处理。
在步骤S21中,控制器251根据type的值确认基本视点视频和D2视点视频被交织。
在该情形中,在步骤S22中,控制器251前进到读取interleaved_file_info()。
在步骤S23,控制器251判断是否已指示了B-D1播放。
如果执行B-D1播放,则采用记录在光盘202中的数据和记录在本地存储设备254中的数据。另一方面,如果执行B-D2播放,则使用记录在光盘202中的数据。
如果在步骤S23中判断出尚未指示B-D1播放,即,已指示了B-D2播放,则在步骤S24中,控制器251取出interleaved_file_info()中描述的、包括构成“20000.ilvt”(ref_to_D2-B_interleaved_file_name)的D2视点视频的Clip名X“00002”(排除了包括D2视点视频的m2ts文件名的扩展名部分)。
在步骤S25中,控制器251取出引用subPath_type=9(播放D2视点视频的辅路径)的Clip名Y“00002”。
在步骤S26中,控制器251识别出D2视点视频包括在“20000.ilvt”中,因为Y与X相同。当在这里Y不同于X时,包括D2视点视频的Clip在本地存储设备254中。
在步骤S27中,控制器251指定在interleaved_file_info()中描述的“20000.ilvt”(ref_to_D2-B_interleaved_file_name),并且使得通过UDF文件系统从光盘202读取基本视点视频大块和D2视点视频大块。
由盘驱动器252读取的基本视点视频大块和D2视点视频大块被提供给解码器单元256的分离单元281。
在步骤S28中,分离单元281基于“00001.clpi”(ref_to_B_clpi_file_name)的chunk_map()和“00002.clpi”(ref_to_D2_clpi_file_name)的chunk_map(),将所提供来的数据分离成“00001.m2ts”m2ts文件数据和“00002.m2ts”m2ts文件数据。分离单元281将“00001.m2ts”m2ts文件数据输出到读缓冲器282,将“00002.m2ts”m2ts文件数据输出到读缓冲器285。
存储在读缓冲器282中的“00001.m2ts”m2ts文件数据经由PID过滤器283、ES缓冲器284和开关289被提供给解码器290。另一方面,存储在读缓冲器285中的“00002.m2ts”m2ts文件数据经由PID过滤器286、开关287、ES缓冲器288和开关289被提供给解码器290。
在步骤S29中,解码器290解码自开关289顺序提供来的分组。
另一方面,如果在步骤S23中判断出已指示B-D1播放,则在步骤S30中,控制器251取出interleaved_file_info()中描述的、包括构成“20000.ilvt”(ref_to_D2-B_interleaved_file_name)的D2视点视频的Clip名X“00002”。
在步骤S31中,控制器251取出引用subPath_type=8(播放D1视点视频的辅路径)的Clip名Y“00003”。
在步骤S32中,控制器251识别出Y不同于“00001.clpi”(ref_to_B_clpi_file_name)的排除了扩展名的部分,并且Y也不同于X,因此D1视点视频Clip在本地存储设备254中。现在,在Y与“00001.clpi”的排除了扩展名的部分相同时,或者在Y与X相同时,D1视点视频被包括在“20000.ilvt”中。
在步骤S33中,控制器251使用“00001.clpi”(ref_to_B_clpi_file_name)的EP map,并且使盘驱动器252读取m2ts文件“00001.m2ts”。“00001.clpi”的EP_map包括作为m2ts文件“00001.m2ts”的解码开始位置的入口点的信息。
在步骤S34中,控制器251使用“00003.clpi”(由SubPath()[2]引用)的EP_map来从本地存储设备254读取m2ts文件“00003.m2ts”。“00003.clpi”的EP_map包括作为m2ts文件“00003.m2ts”的解码开始位置的入口点的信息。
所读取的基本视点视频大块和D1视点视频大块被提供给解码器256的分离单元281。
在存储到读缓冲器282中之后,自光盘202读取的m2ts文件“00001.m2ts”经由PID过滤器283、ES缓冲器284和开关289被提供给解码器290。
另外,在存储到读取缓冲器285中之后,自本地存储设备254读取的m2ts文件“00003.m2ts”经由PID过滤器286、开关287、ES缓冲器288和开关289被提供给解码器290。
在步骤S29中,解码器290解码自开关289顺序提供来的分组。
[利用chunk_map()来随机访问播放“10000.ilvt”的方法]
图37示出了参考图27描述的chunk_map()的概况内容。
当在每个clpi文件的chunk_map()中描述的SPN chunk_start(从基点位置起的SPN(长度))按照垂直方向上取值i排列时,则如图37所示。
图38示出了与chunk_map()一起在每个clpi文件中描述的EP_map()的语法。
在执行随机访问等时,引用EP_map()以便识别解码开始位置。
number_of_EP_entries指示EP(入口点)的编号。
在number_of_EP_entries之后描述每个EP。PTS_EP_start[i]指示EP的PTS,而SPN_EP_start[i]指示EP的SPN。因此,每个入口点的PTS和SPN被相关联,并且被登记到EP_map。
将参考图39的流程图描述播放设备201的处理。
现在将描述参考图22中的3D_PlayList来执行B-D1播放,并且执行随机访问的情形。
在步骤S41中,控制器251根据type的值来确认基本视点视频、D1视点视频和D2视点视频都被交织。
在该情形中,在步骤S42中,控制器251前进到读取interleaved_file_info()。
在步骤S43,控制器251判断interleaved_file_info()中描述的“10000.ilvt”(ref_to_D1-B_interleaved_file_name)是否是读取文件。
如果从“00000.mpls”的时间点x开始播放,则在步骤S44中,控制器251使用“00001.clpi”(ref_to_B_clpi_file_name)的EP_map来寻找值小于并且最接近x的PTS_EP_start[m]。
在步骤S45中,控制器251取出与PTS_EP_start[m]相对应的SPN_EP_start[m]。如参考图38所述,PTS_EP_start[i]和SPN_EP_start[i]被相关联,并被登记到EP_map中。
图40示出了由步骤S44和S45中的处理所指定的位置的示例。
如图40所示,如果从时间轴上的时间点x开始播放,则在步骤S44 中识别出值小于并且最接近x的PTS_EP_start[m]。另外,在步骤S45中识别出与PTS_EP_start[m]相对应的SPN_EP_start[m]。
在步骤S46中,控制器251使用“00001.clpi”的chunk_map,并且找出值小于并且最接近SPN_EP_start[m]的SPN_chunk_start[k]。图41中示出了由步骤S46中的步骤识别出的SPN_chunk_start[k]。
在步骤S47中,控制器251将“00001.clpi”的chunk_map()的SPN_chunk_start[k]和“00003.clpi”((ref_to_D1_clpi_file_name)的chunk_map()的SPN_chunk_start[k]之和确定为“10000.ilvt”的读取开始地址。
这里所确定的“10000.ilvt”的读取开始地址示出了“10000.ilvt”中的D1[k]大块的开始地址。
在步骤S48中,控制器251指定“10000.ilvt”(ref_to_D1-B_interleaved_file_name),并且使得通UDF文件系统从在步骤S47中所确定的地址起读取基本视点视频大块和D1视点视频大块。
已读取的基本视点视频大块和D1视点视频大块被提供给解码器单元256的分离单元281。
在步骤S49中,分离单元281基于“00001.clpi”(ref_to_B_clpi_file_name)的chunk_map()和“00003.clpi  ”(ref_to_D1_clpi_file_name)的chunk_map(),将所提供来的数据分离成“00001.m2ts”m2ts文件数据和“00003.m2ts”m2ts文件数据。分离单元281将“00001.m2ts”m2ts文件数据输出到读缓冲器282,将“00003.m2ts”m2ts文件数据输出到读缓冲器285。
存储在读缓冲器282中的“00001.m2ts”m2ts文件数据经由PID过滤器283、ES缓冲器284和开关289被提供给解码器290。存储在读取缓冲器285中的“00003.m2ts”m2ts文件数据经由PID过滤器286、开关287、ES缓冲器288和开关289被提供给解码器290。
在步骤S50中,解码器290解码自开关289顺序提供来的分组。
如上所述执行了ilvt文件的随机访问。
[关于EP_map]
现在将描述EP_map。
将描述基本视点视频的EP_map,但是类似地为D1/D2视点视频设置了EP_map。例如,如果在基本视点视频的某一图片中设置了入口点,则向D1/D2视点视频的对应图片中也设置入口点。
在按照编码顺序/解码顺序或者显示顺序排列每个流的图片时位于同一位置的基本视点视频图片和D1/D2视点视频图片是对应的图片。
图42示出了记录在光盘202上的AV流的结构。
包括基本视点视频流的TS由整数个对准的具有6144字节大小的单元(对准单元(Alighed Unit))配置而成。
对准单元由32个源分组构成。源分组具有192字节。一个源分组由4字节的传输分组额外头部(TP_extra header)和188字节的传输分组(Transport packt)构成。
基本视点视频的数据被分组化成MPEG2PES分组。PES分组是通过向PES分组的数据部分添加PES分组头部形成的。用于识别PES分组发送的基础流的类型的流ID被包括在PES分组头部中。
PES分组还被分组化成传输分组。即,PES分组被划分成传输分组的有效负载的大小,传输分组头部被添加到该有效负载,从而形成传输分组。传输分组头部包括作为存储在有效负载中的数据的标识信息的PID。
注意,向源分组提供了源分组号,源分组号例如以Clip AV流的开头为0来对于每个源分组每次递增1。另外,对准单元从源分组的第一个字节开始。
在给出了Clip的访问点的时间戳时,EP_map被使用以便搜索数据地址来开始读取Clip AV流文件内的数据。EP_map是从基础流和传输流提取的一列入口点。
EP_map具有用于搜索开始AV流内的解码的入口点的地址信息。EP_map内的一段EP数据由如下对组成:一个PTS和访问单元的AV流内的与该PTS相对应的一个地址。在AVC/H.264中,一幅图片的数据存储在一个访问单元中。
图43示出了Clip AV流的示例。
图43中的Clip AV流是由利用PID=x标识出的源分组构成的视频流(基本视点视频流)。对于每个源分组,该视频流由源分组内的传输分组的头部中包括的PID来区分。
在图43中,该视频流的源分组中的包括IDR(即时解码刷新)图片的开头字节的源分组被标以颜色。无色方框指示:包括不作为随机访问点的数据的源分组和包括其它流的数据的源分组。
IDR图片是I图片,并且在包括IDR图片的GOP中首先被解码。在解码IDR图片时,诸如参考图片缓冲器的状态、帧号和直到此时管理的POC(图片顺序计数)之类的与解码相关的所有信息都被重置。
例如,包括可由PID=x区分的视频流随机访问的IDR图片的开头字节的、具有源分组号X1的源分组被布置在Clip AV流的时间轴上的PTS=pts(x1)的位置。
类似地,包括可随机访问的IDR图片的开头字节的源分组是具有源分组号X2的源分组,并且被布置在PTS=pts(x2)的位置。
图44在概念上示出了与图43中的Clip AV流相对应的EP_map的示例。
如图44所示,EP_map由stream_PID、PTS_EP_start和SPN_EP_start配置而成。
stream_PID表示用于传送视频流的传输分组的PID。
PTS_EP_start表示从可随机访问的IDR图片开始的访问单元的PTS。
SPN_EP_start表示包括要由PTS_EP_start的值引用的访问单元的第一字节的源分组的地址。
视频流的PID存储在stream_PID中,并且作为表示PTS_EP_start和SPN_EP_start之间的对应关系的表信息的EP_map_for_one_stream_PID()被生成。
例如,PTS=pts(x1)和源分组号X1、PTS=pts(x2)和源分组号X2、…、以及PTS=pts(xk)和源分组号Xk以分别相对应的方式在PID=x的视频流的EP_map_for_one_stream_PID[0]中被描述。
也针对复用在同一Clip AV流中的每个视频流生成这种表。包括所生成的表的EP_map被存储到与该Clip AV流相对应的Clip信息文件中。
图45示出了由SPN_EP_start指示的源分组的数据结构的示例。
如上所述,源分组由向188字节的传输分组添加4字节的头部的形式配置而成。传输分组部分由头部部分(TP头部)和有效负载部分构成。SPN_EP_start表示包括从IDR图片起的访问单元的第一个字节的源分组的源分组号。
在AVC/H.264中,访问单元(即,图片)从AU定界符(访问单元定界符)开始。在AU定界符后,跟随有SPS和PPS。此后,存储了IDR图片的引导部分或者整个数据片段。
传输分组的TP头部中的payload_unit_start_indicator的值1表示新的PES分组从该传输分组的有效负载开始。访问单元从该源分组开始。
这种EP_map是针对基本视点视频流和从属视点视频流中的每个准备的。
[记录设备的配置示例]
图46的框图示出了软件装配处理单元301的配置示例。
视频编码器311具有与图3中的MVC编码器211类似的配置。视频编码器311通过根据H.264AVC/MVC对多段视频数据进行编码来生成基本视点视频流和从属视点视频流,并且将它们输出到缓冲器312。
音频编码器313对输入音频流进行编码,并将获得的数据输出到缓冲器314。要记录到盘中的音频流与基本视点视频流和从属视点视频流一起被输入到音频编码器313。
数据编码器315对除视频和音频之外的前述各种类型的数据(例如,PlayList文件等)进行编码,并将通过编码而获得的数据输出到缓冲器316。
例如,数据编码器315设置PlayList中的type(图18)来指示基本视点视频流数据和D1/D2视点视频流数据是否以区域为单位在交织的状态中被记载到光盘上。
另外,如果基本视点视频流数据和D1/D2视点视频流数据以交织状态被记录在光盘上,则数据编码器315将上述ilvt文件设置为P1ayList文件。ilvt文件作为虚拟文件(virtual file),虚拟文件用于虚拟地概括和管理基本视点视频流数据和D1/D2视点视频流数据。
此外,数据编码器315还为该P1ayList中的每个Clip的Clip信息文件设置文件名,并且在每个C1ip信息文件中设置EP_map和chunk_map。
复用单元317对每个缓冲器中存储的视频数据和音频数据以及除与同步信号一起的流之外的数据进行复用,并将其输出到纠错编码单元318。
纠错编码单元318将纠错码添加到由复用单元317复用后的数据。
调制单元319对自纠错编码单元318提供来的数据进行调制,并将其输出。调制单元319的输出成为要记录到光盘202上的、能在播放设备201中播放的软件。
向记录设备设置了具有这种配置的软件装配处理单元301。
图47示出了包括软件装配处理单元301的配置的示例。
图47中示出的配置的一部分也可以设置在记录设备内部。
软件装配处理单元301生成的记录信号在预母盘处理单元(premastering processing unit)331中经过母盘处理,并且要记录到光盘202中的格式的信号被生成。所生成的信号被提供给母盘记录单元333。
在记录母盘制作单元332中,准备了由玻璃等构成的母盘,在其上涂覆了由光刻胶(photo resist)构成的记录材料。从而制作了记录母盘。
在母盘记录单元333中,激光束响应于自预母盘处理单元331提供来的记录信号而被调制,并被照射到母盘的光刻胶上。从而母盘上的光刻胶响应于记录信号而被曝光。随后,该母盘被显影,并且使得在母盘上出现凹坑(pit)。
在金属母盘制作单元334中,对母盘进行电铸之类的处理,从而制作出玻璃板上的凹坑被转移到其的金属母盘。从该金属母盘进一步制作金属压模(stamper),并将其作为成型模具(molding die)。
在成型处理单元335中,诸如PMMA(丙烯酸)、PC(聚碳酸酯)之类的材料通过注入等被注入到成型模具中,从而执行了固化 (solidifying)。或者,在2P(紫外线固化树脂)等被涂覆到金属压模上后,将紫外线照射到其上,从而执行硬化。从而,金属压模上的凹坑可以被转移到由树脂制成的复制品上。
在膜形成处理单元336中,通过汽相沉积或者溅射在复制品上形成反射膜。或者,通过旋涂在复制品上形成反射膜。
在后处理处理单元337中,对该盘进行内外直径处理等,并且执行将两张盘粘合到一起之类的必要处理。此外,在其上粘贴了标签或者向其附加了轴心(hub)后,盘被插入到盘盒中。从而,完成了其中记录了可由播放设备201播放的数据的光盘202。
上述处理序列可利用硬件执行也可以利用软件执行。如果利用软件执行该处理序列,则包括该软件的程序被安装到专用硬件中内置的计算机、或通用个人计算机中。
要被安装的程序被记录到可移除记录介质上,并被提供。另外,也可以经由局域网、因特网或数字广播之类的有线或无线传输介质提供程序。
本发明的实施例不限于上述实施例,而是在不脱离本发明的实质的情况下可以作出各种类型的修改。
标号列表
201播放设备
202光盘
203显示设备
211MVC编码器
221H.264/AVC编码器
222H.264/AVC解码器
223Depth计算单元
224从属视点视频编码器
225复用器
251控制器
252盘驱动器
253存储器
254本地存储设备
255因特网接口
256解码单元
257操作输入单元。

Claims (8)

1.一种播放设备,包括:
读取装置,该读取装置从记录介质读取交织文件、读取第一信息文件、并且读取第二信息文件,所述交织文件是其中以预定数据量的大块为单位交织了第一复用流和第二复用流的文件,所述第一复用流包括通过利用预定编码方法对视频流进行编码而生成的基本流和扩充流中的所述基本流,而所述第二复用流包括与所述基本流相对应的所述扩充流,并且所述第一信息文件是所述第一复用流的信息并具有构成所述复用流的大块的数目和每个大块在所述第一复用流内的开始分组号,而所述第二信息文件是所述第二复用流的信息并具有构成所述第二复用流的大块的数目和每个大块在所述第二复用流内的开始分组号,所述大块是连续排列在所述记录介质上的源分组的集合;以及
分离装置,该分离装置利用所述第一信息文件和所述第二信息文件将所述交织文件分离成所述第一复用流和所述第二复用流。
2.根据权利要求1所述的播放设备,其中所述第一信息文件具有的所述大块的数目和所述第二信息文件具有的所述大块的数目具有相同的数目。
3.根据权利要求2所述的播放设备,其中
所述第一信息文件还具有关于构成所述第一复用流的源分组的总数的信息;并且
所述第二信息文件还具有关于构成所述第二复用流的源分组的总数的信息。
4.根据权利要求3所述的播放设备,其中
所述第一信息文件具有的所述大块的数目被表示为(n+1),构成所述第一复用流的大块表示为B[i](i=0至n),并且从所述第一复用流的开头起的第k大块表示为B[k],
构成所述第二复用流的大块表示为D[i](i=0至n),并且从所述第二复用流的开头起的第k大块表示为D[k],
B[k]的开始分组号表示为SPN_chunk_start_1[k],
D[k]的开始分组号表示为SPN_chunk_start_2[k],
构成所述第一复用流的源分组的总数表示为number_of_source_packets1,并且
构成所述第二复用流的源分组的总数表示为number_of_source_packets2,
所述分离装置
通过(SPN_chunk_start_1[k+1]-SPN_chunk_start_1[k])来计算构成B[k]的源分组的数目,其中k=0至(n-1),
通过(SPN_chunk_start_2[k+1]-SPN_chunk_start_2[k])来计算构成D[k]的源分组的数目,其中k=0至(n-1),
通过(number_of_source_packets1-SPN_chunk_start_1[n])来计算构成B[n]的源分组的数目,并且
通过(number_of_source_packets2-SPN_chunk_start_2[n])来计算构成D[n]的源分组的数目。
5.根据权利要求4所述的播放设备,对于B[i]和D[i],具有相同i值的一组大块具有相同的播放时间。
6.根据权利要求4所述的播放设备,还包括:
控制装置,该控制装置控制所述读取装置的读取,其中所述控制装置
读取EP_map,所述EP_map是所述第一复用流的信息并且是具有如下内容的信息:所述第一复用流内的入口点的数目、对每个入口点指示呈现时间戳PTS的PTS_EP_start[i]以及作为示出每个入口点的位置的源分组号的SPN_EP_start[i];
检测值小于并且最接近所指定的播放开始时间点的PTS_EP_start[m];
检测与该PTS_EP_start[m]相对应的SPN_EP_start[m];
检测值小于并且最接近SPN_EP_start[m]的SPN_chunk_start_1[k]及其k;并且
将SPN_chunk_start_1[k]和SPN_chunk_start_2[k]之和确定为所述交织文件的读取开始地址。
7.根据权利要求1所述的播放设备,其中所述基本流和所述扩充流分别是通过利用H.264/AVC对视频流进行编码而生成的基本视点视频流和从属视点视频流。
8.一种播放方法,包括以下步骤:
从记录介质读取交织文件,所述交织文件是其中以预定数据量的大块为单位交织了第一复用流和第二复用流的文件,所述第一复用流包括通过利用预定编码方法对视频流进行编码而生成的基本流和扩充流中的所述基本流,而所述第二复用流包括与所述基本流相对应的所述扩充流;
读取第一信息文件,所述第一信息文件是所述第一复用流的信息并具有构成所述复用流的大块的数目和每个大块在所述第一复用流内的开始分组号,所述大块是连续排列在所述记录介质上的源分组的集合;
读取第二信息文件,所述第二信息文件是所述第二复用流的信息并具有构成所述第二复用流的大块的数目和每个大块在所述第二复用流内的开始分组号;以及
利用所述第一信息文件和所述第二信息文件将所述交织文件分离成所述第一复用流和所述第二复用流。
CN201210114866.6A 2009-04-07 2010-04-02 信息处理设备、信息处理方法、播放设备、播放方法和程序 Expired - Fee Related CN102655014B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2009093159 2009-04-07
JP2009-093159 2009-04-07
JP2010-065109 2010-03-19
JP2010065109A JP4984183B2 (ja) 2009-04-07 2010-03-19 再生装置、再生方法、および記録方法
CN201080001711.0A CN102292999B (zh) 2009-04-07 2010-04-02 信息处理设备、信息处理方法、播放设备、播放方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201080001711.0A Division CN102292999B (zh) 2009-04-07 2010-04-02 信息处理设备、信息处理方法、播放设备、播放方法

Publications (2)

Publication Number Publication Date
CN102655014A CN102655014A (zh) 2012-09-05
CN102655014B true CN102655014B (zh) 2015-09-09

Family

ID=42936239

Family Applications (4)

Application Number Title Priority Date Filing Date
CN201210114866.6A Expired - Fee Related CN102655014B (zh) 2009-04-07 2010-04-02 信息处理设备、信息处理方法、播放设备、播放方法和程序
CN201080001711.0A Expired - Fee Related CN102292999B (zh) 2009-04-07 2010-04-02 信息处理设备、信息处理方法、播放设备、播放方法
CN201310213452.3A Expired - Fee Related CN103313071B (zh) 2009-04-07 2010-04-02 信息处理设备、信息处理方法、播放设备、播放方法和程序
CN201310213438.3A Expired - Fee Related CN103327354B (zh) 2009-04-07 2010-04-02 信息处理设备、信息处理方法、播放设备、播放方法

Family Applications After (3)

Application Number Title Priority Date Filing Date
CN201080001711.0A Expired - Fee Related CN102292999B (zh) 2009-04-07 2010-04-02 信息处理设备、信息处理方法、播放设备、播放方法
CN201310213452.3A Expired - Fee Related CN103313071B (zh) 2009-04-07 2010-04-02 信息处理设备、信息处理方法、播放设备、播放方法和程序
CN201310213438.3A Expired - Fee Related CN103327354B (zh) 2009-04-07 2010-04-02 信息处理设备、信息处理方法、播放设备、播放方法

Country Status (17)

Country Link
US (2) US8582953B2 (zh)
EP (1) EP2288172B1 (zh)
JP (1) JP4984183B2 (zh)
KR (1) KR20120014237A (zh)
CN (4) CN102655014B (zh)
AU (1) AU2010235565B2 (zh)
BR (1) BRPI1002810A2 (zh)
CA (1) CA2724975C (zh)
DK (1) DK2288172T3 (zh)
ES (1) ES2552391T3 (zh)
HK (1) HK1164000A1 (zh)
MX (1) MX2010013105A (zh)
MY (1) MY155528A (zh)
PL (1) PL2288172T3 (zh)
RU (1) RU2523196C2 (zh)
TW (1) TWI444037B (zh)
WO (1) WO2010116955A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4984184B2 (ja) 2009-04-08 2012-07-25 ソニー株式会社 再生装置および再生方法
JP5390017B2 (ja) * 2010-03-24 2014-01-15 パナソニック株式会社 映像処理装置
US8643699B2 (en) 2011-04-26 2014-02-04 Mediatek Inc. Method for processing video input by detecting if picture of one view is correctly paired with another picture of another view for specific presentation time and related processing apparatus thereof
US8813116B2 (en) * 2011-04-27 2014-08-19 Morega Systems Inc. Adaptive video server with virtual file system and methods for use therewith
US9693033B2 (en) 2011-11-11 2017-06-27 Saturn Licensing Llc Transmitting apparatus, transmitting method, receiving apparatus and receiving method for transmission and reception of image data for stereoscopic display using multiview configuration and container with predetermined format
CN104575125B (zh) * 2013-10-10 2017-06-30 北大方正集团有限公司 双音频复读方法和装置
CN103531210B (zh) * 2013-10-16 2017-01-18 广州番禺巨大汽车音响设备有限公司 一种基于音响实现蓝光碟数据读取输出的方法及音响系统
US9819947B2 (en) * 2014-01-02 2017-11-14 Vid Scale, Inc. Methods, apparatus and systems for scalable video coding with mixed interlace and progressive content
CN107465945B (zh) * 2017-09-12 2019-12-03 中广热点云科技有限公司 一种实现iptv播放增强的方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1750628A (zh) * 1997-08-29 2006-03-22 松下电器产业株式会社 光盘、光盘再生和记录装置及再生控制信息生成装置
WO2009040701A2 (en) * 2007-09-24 2009-04-02 Koninklijke Philips Electronics N.V. Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW436777B (en) * 1995-09-29 2001-05-28 Matsushita Electric Ind Co Ltd A method and an apparatus for reproducing bitstream having non-sequential system clock data seamlessly therebetween
EP0888018B1 (en) 1996-02-28 2006-06-07 Matsushita Electric Industrial Co., Ltd. Optical disk having plural streams of digital video data recorded thereon in interleaved manner, and apparatuses and methods for recording on, and reproducing from, the optical disk
WO1998025413A1 (en) 1996-12-04 1998-06-11 Matsushita Electric Industrial Co., Ltd. Optical disc for high resolution and three-dimensional image recording, optical disc reproducing device, and optical disc recording device
US6925250B1 (en) 1997-08-29 2005-08-02 Matsushita Electric Industrial Co., Ltd. Optical disc for recording high resolution and normal image, optical disc player, optical disc recorder, and playback control information generator
US6222837B1 (en) * 1997-09-26 2001-04-24 Lucent Technologies Inc. Internet service via ISDN
JPH11195287A (ja) * 1997-12-27 1999-07-21 Sony Corp フアイル管理装置及びフアイル管理方法
JP3948979B2 (ja) * 2002-02-18 2007-07-25 パイオニア株式会社 情報記録媒体、情報記録装置及び方法、情報再生装置及び方法、情報記録再生装置及び方法、記録又は再生制御用のコンピュータプログラム、並びに制御信号を含むデータ構造
KR100563685B1 (ko) * 2002-02-25 2006-03-28 엘지전자 주식회사 재기록 가능 기록매체의 재생리스트 관리방법
JP3770249B2 (ja) * 2002-07-04 2006-04-26 ソニー株式会社 多重化装置及び方法
JP4608953B2 (ja) * 2004-06-07 2011-01-12 ソニー株式会社 データ記録装置、方法およびプログラム、データ再生装置、方法およびプログラム、ならびに、記録媒体
CN101118772B (zh) * 2004-08-17 2010-04-14 Lg电子株式会社 配置组合文件结构的方法、以及再现数据的方法和装置
BRPI0510404A (pt) * 2004-12-01 2007-10-23 Matsushita Electric Ind Co Ltd meio de gravação, dispositivo de reprodução, programa, método de reprodução e circuito integrado
US20080056678A1 (en) * 2006-04-18 2008-03-06 Kim Kun S Apparatus for reproducing data, method thereof, apparatus for recording the same, method thereof and recording medium
RU2315439C1 (ru) * 2006-07-03 2008-01-20 Борис Иванович Волков Система объемной видеозаписи и воспроизведения
RU2334370C1 (ru) * 2007-03-23 2008-09-20 Борис Иванович Волков Система стереотелевидения
JP2008252740A (ja) 2007-03-30 2008-10-16 Sony Corp リモートコマンダおよびコマンド発生方法、再生装置および再生方法、プログラム、並びに、記録媒体
AU2009205250B2 (en) * 2008-01-17 2013-02-21 Panasonic Corporation Recording medium on which 3D video is recorded, recording medium for recording 3D video, and reproducing device and method for reproducing 3D video
KR101506217B1 (ko) * 2008-01-31 2015-03-26 삼성전자주식회사 스테레오스코픽 영상의 부분 데이터 구간 재생을 위한스테레오스코픽 영상 데이터스트림 생성 방법과 장치, 및스테레오스코픽 영상의 부분 데이터 구간 재생 방법과 장치
US20090202227A1 (en) * 2008-02-13 2009-08-13 Samsung Electronics Co., Ltd. Method and apparatus for recording data, method and apparatus for reproducing data, and recording medium for recording data
JP5351146B2 (ja) * 2008-05-01 2013-11-27 パナソニック株式会社 再生装置、光ディスク再生システム、プログラム、集積回路
EP2521363B1 (en) 2009-02-19 2014-05-14 Panasonic Corporation Playback device
JPWO2010098134A1 (ja) * 2009-02-27 2012-08-30 パナソニック株式会社 記録媒体、再生装置、及び集積回路

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1750628A (zh) * 1997-08-29 2006-03-22 松下电器产业株式会社 光盘、光盘再生和记录装置及再生控制信息生成装置
WO2009040701A2 (en) * 2007-09-24 2009-04-02 Koninklijke Philips Electronics N.V. Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal

Also Published As

Publication number Publication date
PL2288172T3 (pl) 2016-01-29
CN102292999A (zh) 2011-12-21
KR20120014237A (ko) 2012-02-16
CN103327354B (zh) 2015-12-23
CA2724975A1 (en) 2010-10-14
MY155528A (en) 2015-10-30
US20130287367A1 (en) 2013-10-31
RU2010149063A (ru) 2012-06-10
TWI444037B (zh) 2014-07-01
BRPI1002810A2 (pt) 2016-02-23
MX2010013105A (es) 2010-12-21
RU2523196C2 (ru) 2014-07-20
US20110116762A1 (en) 2011-05-19
AU2010235565B2 (en) 2015-08-13
EP2288172A4 (en) 2013-07-03
ES2552391T3 (es) 2015-11-27
CA2724975C (en) 2014-02-04
HK1164000A1 (zh) 2012-09-14
EP2288172B1 (en) 2015-10-14
JP4984183B2 (ja) 2012-07-25
CN102292999B (zh) 2014-05-28
DK2288172T3 (en) 2015-11-16
CN102655014A (zh) 2012-09-05
CN103327354A (zh) 2013-09-25
JP2010263612A (ja) 2010-11-18
WO2010116955A1 (ja) 2010-10-14
AU2010235565A1 (en) 2010-10-14
EP2288172A1 (en) 2011-02-23
CN103313071A (zh) 2013-09-18
TW201105114A (en) 2011-02-01
US9781402B2 (en) 2017-10-03
US8582953B2 (en) 2013-11-12
CN103313071B (zh) 2016-01-20

Similar Documents

Publication Publication Date Title
CN102655014B (zh) 信息处理设备、信息处理方法、播放设备、播放方法和程序
CN103079082B (zh) 记录方法
US8633966B2 (en) Information processing device, information processing method, program, and data structure
CN102047673B (zh) 记录设备、记录方法、回放设备、回放方法、记录介质和程序
CN102124747B (zh) 信息处理装置、信息处理方法、重放装置、重放方法
JP4984188B2 (ja) 再生装置、再生方法、および記録方法
JP4985895B2 (ja) 再生装置、再生方法、および記録方法
JP2010244629A (ja) 情報処理装置、情報処理方法、プログラム、および記録媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150909

Termination date: 20210402