CN102017640B - 再现装置、集成电路与再现方法 - Google Patents

再现装置、集成电路与再现方法 Download PDF

Info

Publication number
CN102017640B
CN102017640B CN2009801153571A CN200980115357A CN102017640B CN 102017640 B CN102017640 B CN 102017640B CN 2009801153571 A CN2009801153571 A CN 2009801153571A CN 200980115357 A CN200980115357 A CN 200980115357A CN 102017640 B CN102017640 B CN 102017640B
Authority
CN
China
Prior art keywords
image
information
main flow
stream
read
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2009801153571A
Other languages
English (en)
Other versions
CN102017640A (zh
Inventor
陈涛
柏木吉一郎
笹井寿郎
赵燚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN102017640A publication Critical patent/CN102017640A/zh
Application granted granted Critical
Publication of CN102017640B publication Critical patent/CN102017640B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/356Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359Switching between monoscopic and stereoscopic modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs

Abstract

本发明提供一种用于再现立体观察影像的光盘,能够在不能应对3D的再现装置中进行平面观察影像再现,在能应对3D的再现装置中进行立w体观察影像再现。一种包括AV数据记录区域和导航信息区域的光盘,AV数据记录区域是记录将多个TSPB和多个TSSB交织配置形成的TS的区域,TSPB构成表示平面观察图像的视频流,TSSB构成表示相对于平面观察图像的视差图像的视频流,在导航信息区域中记录有导航信息,导航信息包括基本位置信息、和只对具有立体观察用再现的再现能力的再现装置有效的扩展位置信息,基本位置信息表示表示记录了各个TSPB的区域,扩展位置信息表示记录了各个TSSB的区域。

Description

再现装置、集成电路与再现方法
技术领域
本发明涉及记录3D影像的信息记录介质,尤其涉及在信息记录介质中记录立体影像时的应用格式。
背景技术
对应3D的高清晰电视给消费者带来了优质的高清晰3D影像的收看体验,预计未来将通过封装介质(package media)或广播服务来分发高画质、高清晰的3D影像。
目前公知的能够在广播应用中适用的方法,为了实现3D影像的压缩,在进行能引发画质恶化的分辨率降低。
这是为了使3D影像流不超过根据编码标准而规定的最大比特率。因此,在广播或DVD应用中,为了采用在现有系统中的压缩而变更分辨率,以便能够利用右眼视点和左眼视点的图片的组来形成一个新的图片(picture)。
图1(a)、(b)表示为了压缩而使用现有系统,从而整合图像的现有方法。在这种方法中,已经明确被整合的图像只能保持原图像的一半。因此,在再现装置或机顶盒等设备中,为了用于各个视点,只能复原原图片的一半。当在全分辨率的显示器上显示一半分辨率的图像时,将导致画质下降,通常图像看起来比较模糊。并且,在图1(a)、(b)所示的任意一种方法中,在用户选择收看平面观察图像时,不能利用原始的高清晰图像。
例如,在将水平分辨率抑制为一半的情况下,左眼视点和右眼视点的图片分别成为新图片的左半部分和右半部分。在将垂直分辨率设为一半的情况下,左眼视点和右眼视点的图片分别成为新图片的顶场(top field)和底场(bottom field)。
现有技术文献
非专利文献
非专利文献1:System description:Blu-ray disc read-only format-Part3:Audio visual basic specifications,August 2006.
非专利文献2:ISO/IEC 14496-10:2005:Information technology-Codingof audio-visual objects-Part 10:Advanced Video Coding.
非专利文献3:ISO/IEC 13818-2:2000 Information technology-Genericcoding of moving pictures and associated audio information:Part 2:Video(MPEG-2 Video).
非专利文献4:SMPTE 421M,Proposed SMPTE Standard for Television:VC-1 Compressed Video Bitstream Format and Decoding Process.
发明内容
发明要解决的问题
无论如何,在这样的现有的方法中都不能保存原图片的分辨率,被感知为立体的影像只有原来的分辨率的一半。结果,不能从相同介质(例如光盘的包(package))中复原高质量高清晰的2D影像,在以往的再现2D影像用的普通显示器中只能观看低分辨率的影像。
发明内容
本发明的目的在于提供一种光盘,能够在现有的再现装置中再现平面观察影像,并且能够在可应对(能进行)3D的再现装置中再现立体观察影像。
用于解决问题的手段
本发明的光盘包括AV数据记录区域和导航信息区域,其特征在于,AV数据记录区域是记录了传输流的区域,该传输流将构成主流的多个数据块和构成辅流的多个数据块交织配置而成,主流是表示平面观察图像的视频流,辅流表示相对于平面观察图像的视差图像,是在再现装置进行立体观察用再现时与主流一起再现的流,在导航信息区域中记录有导航信息,导航信息包括基本位置信息、和只对具有立体观察用再现的再现能力的再现装置有效的扩展位置信息,基本位置信息表示在AV数据记录区域中记录了构成主流的各个数据块的区域,扩展位置信息表示记录了构成辅流的各个数据块的区域。
为了实现高质量、高清晰的3D影像的分发,需要有效压缩3D影像。构成3D影像的两个视点被编码成为通过采用视点之间的冗余性来提高编码效率。由于能够执行与现有装置具有兼容性的压缩,所以能够通过一个视点的影像的解码来进行通常的2D(即平面观察)显示。为了形成3D影像用的高效率且实用的编码方案,采用诸如MPEG-4 AVC视频标准那样的现有标准的基于运动补偿的块转换编码的架构。
发明效果
根据本发明的光盘,在以往的再现装置中能够根据基本位置信息读出主流,并再现平面观察图像,同时在具有立体观察图像的再现能力的再现装置中,能够根据基本位置信息以及扩展位置信息读出主流及辅流,并再现立体观察图像。
并且,能够获得实现立体观察图像的高效率的压缩,同时保持与高清晰2D影像相同的分辨率的效果。并且,在这种方法中,能够实现与诸如BD-ROM标准那样的现有的视频压缩标准的完全兼容。另外,通过实施本发明,能够实现立体电视用的数字广播服务或3D电影用的光盘。
这样,通过提供与通常的2D影像用设备的完全兼容性,能够在未来实现高质量的立体观察显示的平缓的普及。
附图说明
图1(a)是示意地表示降低垂直分辨率的方法的图,图1(b)是示意地表示降低水平分辨率的方法的图。
图2是表示两个视点的图片序列的一例的图。
图3(a)是表示图像间的参照关系的一例的图,图3(b)是利用箭头表示编码顺序的图。
图4(a)是包括两个视点的图片的比特流的结构的一个示例,图4(b)是包括两个视点的图片的比特流的结构的另一个示例。
图5是表示系统的概况的图。
图6是表示本发明的全高清3D-BD系统的图。
图7是示意地表示全高清3D-BD系统中的3D视频流的复用的图。
图8(a)是表示图像间的参照关系的变形例的图,图8(b)是利用箭头表示图像参照结构的变形例中的编码顺序的图。
图9(a)是表示图像间的参照关系的另一个变形例的图,图9(b)是利用箭头表示图像参照结构的另一个变形例中的编码顺序的图。
图10是表示第2实施方式的家庭影院系统的图。
图11是表示本发明的BD-ROM的内部结构的图。
图12是以文件系统为前提的光盘的应用格式的图。
图13是表示构成基本视角、增强视角的各个源包经过什么过程被写入到各个记录层中的图。
图14是表示文件盘区如何被写入到记录层中的图。
图15是将TS包的包ID可取的多个数值范围、与具有各个数值范围的包ID的TS包的PES流类别相对应地表示的图。
图16是表示文件盘区的交织配置的图。
图17是表示规定SEXTNT的大小的条件的图。
图18是表示立体观察用的基本视角流、增强视角流的内部结构的一例的图。
图19是表示Clip信息文件的一例的图。
图20(a)是表示表项映射表的内部结构的图,图20(b)是表示利用与PID=1011的TS包相对应的表项映射内的多个表项映射来指定哪个源包的图。
图21是表示表项映射的表项点的登记的图。
图22是表示如何设定与基本视角、增强视角分别对应的表项映射的图。
图23是表示播放列表信息的数据结构的图。
图24是详细示出子路径信息表的内部结构的图。
图25是表示对基本视角、增强视角定义哪种再现区间的图。
图26是表示播放列表信息中的盘区数据的内部结构的图。
图27是表示视频流号码表的内部结构的图。
图28是表示再现装置102的结构的一例的图。
图29是表示播放列表信息的再现步骤的流程图。
图30是表示流选择过程的处理步骤的流程图。
标号说明
10驱动器;11读缓冲器;12读缓冲器;13系统目标解码器;14执行部;15网络接口;16虚拟包控制部;17状态管理部;18用户事件处理部;19再现引擎;20再现控制引擎;21收发部;22堆内存;23字节码解释器;101BD-ROM;102再现装置;103电视机;104交替序列型立体眼镜;105本地存储器。
具体实施方式
下面,说明本发明的记录介质的实施方式。
(第1实施方式)
在利用只能显示2D的显示器来再现高清晰的原始分辨率的2D影像的再现装置或图像接收器中,不需适用向上变换(up convert)等用于对图像进行解码的任何后加工,即可再现3D视频节目,这是很大的优点。设计能够应对这种向下兼容性问题的系统比较重要。如果能够适用这种向下兼容性,则能够将全分辨率(full resolution)的3D电影存储为影像比特流的信号,而且针对高清晰2D电影,持有只能显示2D的显示器的消费者也能够利用。这与分别形成3D和2D的包的情况相比,能够大幅节约费用。此外,消费者不再发愁是购买全分辨率的2D包、还是一半分辨率的3D包、还是2D包和3D包都购买。本发明披露了通过在压缩中保持高清晰的图像的原来分辨率来达到该目的的新方法。不需变更原来的图像,即可对各个视点的所有高清晰图像进行编码并且最好地保存画质。
在下面的本实施方式的说明中,能够替换左视点和右视点地进行压缩。即,可以把任意视点作为仅能通过本流内的参照进行解码的流加以编码。此外,能够根据系统的设计来变更子(sub)GOP的大小(即,成为两个锚定图像的I图片和P图片之间的B图片的数量)。作为普通的设定采用以下示例。
图2是表示构成立体观察影像的两个视点的图片序列的一例的图。
在本发明中,例如通过使各个视点中的各个图片包含于被编码后的比特流中,将全部排列输入3D影像压缩中。这与现有的方法不同,能够最好地保存图像的本来的分辨率。帧级别的交织与在解码器侧输出给显示器时相同地被输入到编码器中,所以需要保存影像的源数据所需的大小为最小的存储器/缓冲器。此外,比特流中的帧级别的交织在采用视点间的参照时,需要保存被编码后的图片数据所需的大小为最小的存储器。
图3(a)是表示图像间的参照关系的一例的图。左眼视点的图像串完全按照AVC标准被编码,能够在现有的再现装置或图像接收器中进行解码。右眼视点的图像采用高效率的预测被编码。更具体地讲,通过视点间预测,右眼视点的图像的编码效率增加,结果,能够抑制比特率。在适用AVC标准(非专利文献2)的技术的情况下,左眼视点的图像串中的B图片被定义为能够在右眼视点的B图片的编码中被用作参照对象的参照B图片(Br图片)。另外,在采用不能使用Br图片的其他视频编码技术(非专利文献3、4)的情况下,能够使用参照图像(例如P图片)来取代Br图片。在下面的所有示例中,在采用除AVC标准之外的编码技术的情况下,能够按照上面所述把取代Br图片的其他参照图像用作视点间预测的参照对象。
图3(b)是表示编码顺序的一例的图。该图所示的右眼视点图像的比特流按照左眼视点图像的比特流和图片级别或者帧级别被交替进行编码。
左眼视点的图像串被编码,并被重组成为能够按照现有的BD-ROM标准及MPEG-4 AVC标准(非专利文献1、2)在流内进行解码的比特流。右眼视点的图像串通过进行编码成为扩展比特流,并按照图片级别被交织到左眼视点的比特流。
例如,包括右眼视点图像比特流的NAL单元采用nal#unit#type的未定义值、或者所保留(reserved)的值(例如,0,24-31,14-18,20-24)(非专利文献2)。
通常,利用本发明的技术生成的比特流通过使表示后续的包的源的几个标志或参数位于包头(header)(例如图片级别或切片(slice)级别的包头)中,能够适用于现有的视频编码标准(非专利文献2、3、4)。在包头表示内容是第2视点的内容的情况下,在现有的再现装置或图像接收器中,后续的包被忽视。图4(a)是表示包括两个视点的图片的比特流的结构的一个示例的图,(b)是表示包括两个视点的图片的比特流的结构的另一个示例的图。
在交织结构中,总是能使用来自相同视点的连续的图片的标志或参数。
作为示例,在包括非专利文献2记述的以往的BD播放器在内的只能再现2D影像的BD播放器(2D-BD播放器)中,解码器不能对hal#unit#type未定义、或者作为保留值的全部NAL单元的内容进行解码。换言之,2D-BD播放器只对左眼视点图像的比特流进行解码,并再现左眼视点图像,以便收看平面观察显示器中的高清晰2D动态图像。
在广播服务或封装介质等的应用中,假设使用这些应用特有的nal#unit#type值的全部NAL单元的内容是传输了右眼视点图像的比特流的内容,并定义上述的nal#unit#type的未定义(或者保留)的值。在适应3D的再现装置或机顶盒中,解码器识别这些应用特有的nal#unit#type值,并对右眼视点图像的比特流进行解码。然后,适应3D的再现装置再现适应3D的显示器用的高清晰的立体观察影像。
在这种应用中,适应3D的再现装置或机顶盒也能够对两个视点的图像进行完全解码,收看者能够选择收看原始分辨率(例如1920×1080)的左眼视点影像、原始分辨率的右眼视点影像、或者原始分辨率的立体观察影像中的任意一个影像。
图5是表示采用了本发明的应用的系统的概况的图。这种方法能够良好地解决向下兼容性的问题,并在立体观察影像的压缩中提高编码效率。另外,能够在一个包或节目中包含最高质量的2D及3D内容。这是为了保障消费者能够在以后采用扩展功能的封装介质的再现中使用以往持有的设备。如上所述,在本发明的方法中,通过消除另外生成3D电影的高质量的2D包的必要性,能够大幅降低生产成本。
另外,在采用了本发明的再现系统中,图片的大小不限于1920×1080,视频帧速率也不限于按每个视点为24fps(帧/秒)。并且,图像接收器不限于BD播放器,本发明也能够适用于其他的再现设备。
图6是表示本发明的全高清(full HD)3D-BD系统(步骤-1)的图。根据适当设计的图片参照结构,BD-ROM标准中的以往的所有视频编解码器都能够采用本发明的3D影像压缩用的方法。并且,3D视频基本流在考虑了在比特流中倍增的帧的数量的基础上,经过复用过程,该复用过程生成作为创作过程的输入的传输流。本发明的3D-BD盘能够在以往的BD播放器上进行再现,该以往的BD播放器具有只将主图片作为对以往的2D播放器的输入并按照全高清来进行解码的解码器。如果能够利用3D-BD播放器,则能够选择是按照能够在可应对3D监视器上显示的全高清来对两个视点的动态图像串进行解码、还是在2D监视器中显示任意一个视点。这就是作为“步骤-1(作为后面叙述的先进设计的基础而发挥作用的系统)”而示出的全高清3D-BD应用的基本原理。
在步骤-1中,3D流按照右视点、左视点的图片/帧的级别进行交织。在复用过程中交织后的图案被保持。但是,在光盘中的I/O中,在跳跃读入动作中,通常在开始新的读入动作之前需要最小限度的等待时间。每1帧的再现持续时间通常远小于前面叙述的最短等待时间。为了实现在BD-ROM规格书(非专利文献1)中规定的最大40Mbps的视频流,帧级别的比特流的交织不能具有跳跃读入下的时间富余。换言之,以往的BD播放器必须读入包括在解码之前被废弃的辅视点影像在内的流的全部字节。这是为了可靠地限制主视点影像用的最大输入速率。即,这意味着主视点影像必须以远低于40Mbps的最大输入速率进行编码。在这种情况下,与2D-BD应用相比,只好舍弃画质。
在本发明中,为了克服这种问题,对3D视频流进行再编辑并分类,以便构成更大的数据块。关于该再编辑的具体情况,将参照示意地表示全高清3D-BD系统中的3D视频流的复用的图7进行说明。在图7所示的复用过程中,把复用了各个视点的帧/图片的比特流分别分类为传输流块——即主视点用的TSPB、和辅视点用的TSSB。在此,各个传输流块包括许多再现持续时间超过跳跃读入所需要的最短等待时间的帧。TSPB和TSSB在被实施交织后,与表示各个传输流块的位置的导航信息一起被记录在盘中。在以往的BD播放器中,利用导航信息进行引导,以便只读取TSPB,然后进行解复用以便以最大40Mbps的输入速率输出主视频流。
结果,能够再现在以往的2D-BD标题(title)中能够看到的最高画质的全高清的2D影像。
随着光盘技术的发展,盘读出速度得到大大改进。因此,也能够利用视频流来分配较高的最大输入速率。因此,适应3D再现的BD播放器为了能够以尽可能高的高画质进行分发,能够读出TSPB和TSSB分别以40Mbps的最大输入速率被编码后的TSPB和TSSB两者。在图7所示的解复用过程中,将按照图片/帧级别进行交织的流复原,以便在解码器中使用。此时,能够执行可应对2D或者3D监视器中任意一个监视器下的显示。当然,在可应对3DBD播放器中,也能够选择性地再现2D影像输出用的左视点或者右视点。
如上所述,本发明能够提供使用现有的视频编码标准对立体观察影像的序列进行编码的新的架构。这种技术能够在压缩中保持原始分辨率的3D视频。此外,本发明具有提供与现有的2D视频压缩用系统之间的所希望的兼容性的效果。在3D电视用的广播服务或3D电影用的封装介质中,本发明的技术能够实现原始高分辨率的3D视频或2D视频的有效的再构建。在本发明中,最高质量的3D视频及2D视频双方能够在一个介质中使用,能够大幅降低生产成本,另外与消费者自己家中的AV系统环境能否适应3D无关,能够向消费者提供获取可应对3D内容的简单方法。并且,无论在哪种现有的视频编码标准中,都能够按照适当设计的图像参照结构来利用本发明的技术。
另外,适用于本发明的图像参照结构具有各种变形例。图8(a)是表示图像间的参照结构的变形例的图,(b)是利用箭头表示图像参照结构的变形例中的编码顺序的图。图9(a)是表示图像间的参照结构的另一个变形例的图,(b)是利用箭头表示图像参照结构的另一个变形例中的编码顺序的图。尤其是图9所示的结构能够在现有的BD播放器中按照全高清分辨率来再现主视点(例如左眼视点)的图像,而不需要任何变更。这些图像参照结构的所有变形例都能够适用于例如MPEG-4AVC(非专利文献2)那样的视频编码标准,而且不需要进行任何改进。
(第2实施方式)
图10(a)表示能够实现立体观察的家庭影院系统。在该图所示的家庭影院系统中具有作为电视机103的附属品的交替序列(alternate-sequencing)型立体眼镜104。关于实现立体观察的方法有采用全息技术的方法和采用视差图像的方式。
首先,第一种全息技术的特征在于,能够与人识别普通物体时完全相同地立体地再现物体。但是,虽然采用全息技术的动态图像生成的技术理论已经确定,但为了实现该技术理论,需要伴随有实时生成全息用动态图像的庞大运算量的计算机、以及具有在1mm内引出数千条线的分辨率的显示装置。因此,采用全息技术的家庭影院系统利用现有技术很难实现,几乎没有作为商业用途而得到实际应用的示例。
第二种采用视差图像的方式的优点在于,至多只需准备右眼用和左眼用的两个视点影像,即可实现立体观察。关于这种采用视差图像的方式,从如何使对应的眼睛只观看与左右眼睛分别对应的画面的角度出发,以序列分离方式为代表的几种技术已经得到实际应用。
为了实现这种立体观察,在包括再现装置、电视机的家庭影院系统中具有交替序列型立体眼镜。交替序列型立体眼镜104具有液晶闸门,以使用户收看基于序列分离方式的视差图像。视差图像是指由映入右眼的影像和映入左眼的影像构成的一组影像,只使与各个眼睛对应的图片映入用户的眼睛来进行立体观察。
序列分离方式是这样一种方法,在时间轴方向上交替地显示左眼用影像和右眼用影像,通过眼睛的残像反应使左右的场景在大脑内重合,并识别为立体影像。
图10(b)表示左眼用影像的显示状态。当在显示器上显示有左眼用影像的瞬间,前面叙述的交替序列型立体眼镜104使与左眼对应的液晶闸门透射,使与右眼对应的液晶闸门遮挡光。图10(c)表示右眼用影像的显示状态。当在显示器上显示有右眼用影像的瞬间,与图10(b)所示的状态相反,使与右眼对应的液晶闸门透射,使与左眼对应的液晶闸门遮挡光。
在这种方式中,为了在时间轴方向上交替地显示左右的影像,与例如如果是通常的二维电影则在1秒钟内显示24个影像相反地,将左右的影像合起来需要在1秒钟内显示48个影像。因此,这种方式比较适合于一个画面的改写比较快的显示器,但只要是能够在1秒钟内改写预定次数的显示器,就不受限定。
另外,作为其他方法,与前面叙述的交替序列型立体眼镜104是在时间轴方向上交替地输出左右的图片的方式相对,还有下述方式,即:在一个画面中沿纵向同时交替地排列左眼用图片和右眼用图片,在显示器表面上通过被称为双凸透镜(lenticular)的鱼糕状(半圆柱状)透镜,使构成左眼用图片的像素只能成像于左眼,使构成右眼用图片的像素只能成像于右眼,由此使左右眼睛观看具有视差的图片,并实现立体观察。另外,不限于双凸透镜,也可以使用具有相同功能的器件例如液晶元件,并且对左眼用像素设置纵偏振光的滤光器,对右眼用像素设置横偏振光的滤光器,收看者使用设置了左眼用的纵偏振光、右眼用的横偏振光的滤光器的偏光眼镜来观看显示器,由此能够实现立体观察。另外,偏光方式除了纵/横偏振光之外,还有左旋转偏振光、右旋转偏振光的方式,在旋转偏振光方式中,能够与收看者的头的倾斜无关地将右眼用、左眼用的影像分离,因此通过使用设置了与其对应的滤光器的偏光眼镜,能够实现更稳定的立体观察。
这种利用视差图像的立体观察已经在游乐园的游乐设施等中普遍采用,由于在技术上已经完成,可以说在家庭中的实际应用也已为期不远了。另外,关于利用视差图像的立体观察的方法,除此之外,还提出了二色分离方式等各种技术,在本实施方式中,把序列分离方式或者偏光眼镜方式用作示例进行说明,但只要利用视差图像,就不限于这两种方式。
在本实施方式中,说明将在立体观察中使用的视差图像存储在信息记录介质中的方法。在此,把存储了左眼用画面的影像称为“左眼影像”,把存储了右眼用画面的影像称为“右眼影像”,把以上两种影像称为“立体观察影像”。
视差图像方式是分别准备映入右眼的影像和映入左眼的影像,使各个眼睛只映入所对应的图片来进行立体观察的方法。
图11是表示本发明的BD-ROM的内部结构的图。
第1段表示被多层化的光盘,第2段是将位于各个记录层上的螺旋轨道沿水平方向延伸描绘得到的图。这些记录层中的螺旋轨道被处理为一个连续的记录区域。该记录区域由位于最内周的导入(lead-in)区域、位于最外周的导出(lead-out)、以及位于最内周和最外周之间的第1记录层的记录区域、第2记录层的记录区域和第3记录层的记录区域构成。这些第1记录层的记录区域、第2记录层的记录区域和第3记录层的记录区域构成一个连续的逻辑地址空间。逻辑地址空间是指利用扇区连续的逻辑块号码指定的地址空间。该逻辑地址空间中接近内周侧的区域具有把逻辑地址空间作为文件系统空间进行处理的文件系统管理区域。
第4段表示文件系统管理区域中的区域分配。在文件系统管理区域中的内周侧具有非AV数据记录区域。紧挨着非AV数据记录区域之后是AV数据记录区域。第5段表示这些非AV数据记录区域及AV数据记录区域的记录内容。在AV数据记录区域中具有构成AV文件的盘区(extent)。在非AV数据记录区域中具有构成除AV文件之外的文件的盘区。
图12是表示以文件系统为前提的光盘的应用格式的图。
BDMV目录是记录了在BD-ROM中要处理的AV内容(content)及管理信息等数据的目录。在BDMV目录的下面有被称为“PLAYLIST目录”、“CLIPINF目录”、“STREAM目录”、“BDJO目录”、“JAR目录”的5个子目录,在BDMV目录中配置有index.bdmv、MovieObject.bdmv这两种文件。
index.bdmv(文件名固定)是与BD-ROM整体相关的管理信息,在将盘插入再现装置中后,index.bdmv被最先读出,由此在再现装置中唯一地识别盘。此外,在index.bdmv中包括表示使能够在BD-ROM中再现的多个标题、和规定各个标题的BD-J对象相对应的表。
MovieObject.bdmv(文件名固定)包括脚本程序,该脚本程序记述了在以HDMV模式来再现各个标题时用于动态地改变再现进程的脚本。“HDMV模式”是在类似DVD的AV设备特有的再现环境下的再现模式。
在JAR目录中具有被赋予了扩展名jar的文件(xxxxx.jar[“xxxxx”是可变的,扩展名“jar”是固定的])。
在BDJO目录中具有被赋予了扩展名bdjo的文件(xxxxx.bdjo[“xxxxx”是可变的,扩展名“bdjo”是固定的])。被赋予了扩展名bdjo的文件是存储了BD-J对象的文件,该BD-J对象表示以Java(注册商标)虚拟机为主体的再现模式即“BD-J模式”下的动态脚本。
在PLAYLIST目录中具有被赋予了扩展名mpls的文件(xxxxx.mpls[“xxxxx”是可变的,扩展名“mpls”是固定的])。
在CLIPINF目录中具有被赋予了扩展名clpi的文件(xxxxx.clpi[“xxxxx”是可变的,扩展名“clip”是固定的])。
构成位于以上目录中的文件的盘区被记录在非AV数据记录区域中。
STREAM目录是存储所谓成为数字流主体的文件的目录,具有应在AV流记录区域中记录盘区的文件、即图示的xxxxx.m2ts([“xxxxx”是可变的,扩展名“m2ts”是固定的])。
下面,说明如何将构成基本视角、增强视角的各个源包写入到各个记录层中。图13表示构成基本视角、增强视角的各个源包经过什么过程被写入到各个记录层中。该图中的第1段表示构成基本视角、增强视角的TS包。
构成AVClip(AV片段)的188字节的TS包按照第2段所示被附加了4字节的TS#extra#header(图中的阴影部分),成为192字节长度的Source(源)包。该TS#extra#header包括表示该TS包的解码器输入时刻信息的Arrival#Time#Stamp。
构成AVClip的源包在第3段中构成一个以上的“ATC#Sequence”。“ATC#Sequence”是构成ATS的时间轴的源包的排列,表示在该Arrival#Time#Stamp所参照的Arrival#Time#Clock不存在不连续点(no arrivaltime-base discontinuity)。换言之,把在该Arrival#Time#Stamp所参照的Arrival#Time#Clock具有连续性的源包串称为“ATC#Sequence”。ATS按照下面所述被附加在TS包的开头,表示向解码器的传输时刻。
这种ATC#Sequence成为AVClip,并以xxxxx.m2ts的文件名被记录在记录层中。
这种AVClip与通常的计算机文件相同地被划分为一个以上的文件盘区,并记录在各个记录层上的区域中。第3段表示AVClip,第4段示意地表示AVClip被如何记录在各个记录层中。在该第4段中构成文件的各个文件盘区具有预先设定的Sextent以上的数据长度。
构成文件盘区的源包按照图14所示每32个被分为一组,并被写入连续的3个扇区中。由32个源包构成的组是6144字节(=32×192),这与3个扇区大小6144字节(=2048×3)一致。把在3个扇区中收容的32个源包称为“Aligned Unit”(排列单元),向BD-ROM中的写入是以Aligned Unit单位进行的。以上是向各个记录层写入AVClip的程序。
图15是将TS包的包ID可取的多个数值范围、与具有各个数值范围的包ID的TS包的PES流类别相对应地表示的图。
具有0x0100的包ID的TS包构成Program#map,具有0x1001的包ID的TS包构成PCR。
具有0x1011的包ID的TS包构成基本视角流(base view stream),0x1012的TS包构成增强视角(enhance view)的视频流。
具有0x1100~0x111F的PID的TS包构成主音频流。
构成基本视角、增强视角的TS包串按照每个文件盘区被交织配置。图16是表示文件盘区的交织配置的图。该图中的交织配置是按照基本视角、增强视角、基本视角、增强视角…的规律来反复记录构成基本视角、增强视角的盘区。
第1段表示构成AV文件的盘区。第3段表示属于各个盘区内的源包串,第4段表示记录层中的扇区串。
可知盘区EXT#L[i]、EXT#L[i+1]具有SEXT#L的数据长度、而且是由PID=1011的源包构成。并且,可知盘区EXT#R[i]、EXT#R[i+1]具有SEXT#R的数据长度、而且是由PID=1012的源包构成。
参照图17说明各个文件盘区的数据长度即SEXT#L、SEXT#R。在从本发明的BD-ROM读出AV流时,在不具有立体观察用再现能力的现有的再现装置中,只能读出基本视角的文件盘区即TSPB、增强视角的文件盘区即TSSB中的TSPB。因此,在现有的再现装置中,如图17中的下段所示,在再现过程中产生用于跳过与TSPB交织配置的TSSB的查找(seek)时间。因此,SEXT#L被设定为使保存在产生查找之前读出的TSPB的缓冲器比在该查找时间中不会产生下溢的数据大小更大的值。
图18是表示立体观察用的基本视角流、增强视角流的内部结构的一例的图。
该图的第2段表示基本视角流的内部结构。在该流中包括图片数据I1、P2、Br3、Br4、P5、Br6、Br7、P8这些图片数据。这些图片数据被根据DTS进行解码。第1段表示左眼图像。将这样被解码后的图片数据I1、P2、Br3、Bt4、P5、Br6、Bt7、P8,按照I1、Br3、Bt4、P2、Bt6、Br7、P5的顺序,根据PTS进行再现,由此再现左眼图像。
第4段表示增强视角流的内部结构。该辅视频流包括P1、P2、B3、B4、P5、B6、B7、P8这些图片数据。这些图片数据被根据DTS进行解码。第3段表示右眼图像。将这样被解码后的图片数据P1、P2、B3、B4、P5、B6、B7、P8,按照P1、B3、B4、P2、B6、B7、P5的顺序,根据PTS进行再现,由此再现右眼图像。
第5段表示如何改变交替序列型眼镜104的状态。根据该第5段所示得知,在收看左眼图像时关闭右眼的闸门,在收看右眼图像时关闭左眼的闸门。
这些基本视角视频流、增强视角视频流,在利用了时间方向的冗余性的图片间预测编码之外,还通过利用了视点间的冗余性的图片间预测编码,被实施压缩。右眼收看用视频流的图片是参照平面观察/左眼收看用视频流的相同显示时刻的图片被压缩的。
例如,右眼收看用视频流的开头P图片参照平面观察/左眼收看用视频流的I图片,右眼收看用视频流的B图片参照平面观察/左眼收看用视频流的Br图片,右眼收看用视频流的第二个P图片参照平面观察/左眼收看用视频流的P图片。
<Clip信息文件>
图19是表示Clip信息文件的一例的图。Clip信息文件如该图所示是AVClip的管理信息,并与AVClip一对一地对应,Clip信息文件由流属性信息和表项映射构成。
流属性信息如该图所示按照每个PID来登记有关AVClip中包含的各个流的属性信息。属性信息针对每个基本视角视频流、增强视角视频流具有不同的信息。
引出线用于详细表示内部结构。如引出线所示,在诸如由PID=0x1011的TS包构成的基本视角的流属性信息、由PID=0x1012的TS包构成的增强视角的流属性信息的这些流属性信息中,示出了由该图所示的多种TS包构成的PES流具有什么样的属性。
盘区表包括extent#start#point,利用6KB单位来表示文件盘区的开始地址。这是因为文件盘区是按照6KB进行排列的,能够利用24比特指定到96GB。把距文件开头的相对地址即盘区开始点存储在Clip管理信息中。
下面,说明表项映射表的内部结构。
表项映射是表示使用某个包ID来确定的STC时间轴中任意源包的源包号码与STC时间轴中的PTS之间的对应关系的表。
STC时间轴是被称为“STC Sequence”的、表示解码时刻、显示时刻的MPEG2-TS的时间轴,指不存在AV流的系统基准时刻即STC(SystemTime Clock)的不连续点(system time-base discontinuity)的区间。STC的不连续点是用于传输解码器为了获得STC而参照的PCR(Program ClockReference:节目时钟参考)的PCR包的不连续信息(discontinuity#indicator)为ON的点。
图20(a)是表示表项映射表的内部结构的图。引出线用于详细表示表项映射表的内部结构。
如引出线所示,在表项映射表中,针对如有关由PID=0x1011的TS包构成的基本视角流的表项映射、有关由PID=0x1012的TS包构成的增强视角流的表项映射这样的该图所示的由多种TS包构成的各个PES流,具有表项映射(entry map)。在表项映射中,把成为一对的PTS和SPN的信息称为“表项点”(entry point)。并且,把开头设为0,把按每个表项点而递增的值称为表项点ID(以下称为EP_ID)。通过利用该表项映射,再现设备能够确定与视频流的时间轴上的任意地点对应的源包位置。例如,在进行快进/后退的特殊再现时,通过确定并选择登记在表项映射中的I图片来进行再现,即可高效地进行处理,而不需要分析AVClip。并且,表项映射是针对在AVClip中复用的各个视频流而生成的,利用PID进行管理。
引出线用于详细表示PID=1011的表项映射的内部结构。由与EP#ID=0对应的表项点、与EP#ID=1对应的表项点、与EP#ID=2对应的表项点、以及与EP#ID=3对应的表项点构成。与EP#ID=0对应的表项点表示SPN=3与PTS=80000的对应关系。与EP#ID=1对应的表项点表示SPN=1500与PTS=270000的对应关系。
与EP#ID=2对应的表项点表示SPN=3200与PTS=360000的对应关系。与EP#ID=3对应的表项点表示SPN=4800与PTS=450000的对应关系。
图20(b)表示根据与图20(a)所示的PID=1011的TS包对应的表项映射内的多个表项映射来指定哪个源包。与EP#ID=0对应的表项映射用于指定SPN=3,并使该源包号码与PTS=80000相对应。与EP#ID=0对应的表项映射用于指定SPN=1500,并使该源包号码与PTS=270000相对应。
与EP#ID=2对应的表项映射用于指定SPN=3200的源包,并使该源包号码与PTS=360000相对应。与EP#ID=3对应的表项映射用于指定SPN=4800的源包,并使该源包号码与PTS=450000相对应。
图21是表示基于表项映射的表项点的登记的图。第1段表示利用STC序列规定的时间轴。第2段表示Clip信息中的表项映射及盘区点映射。第3段表示构成STC序列的源包串。在表项映射指定ATC序列中=n1的源包的情况下,对该表项映射的PTS设定为STC序列中的PTS=t1。这样,能够利用PTS=t1的时刻,使再现装置执行从ATC序列中=n1开始的随机访问。并且,在表项映射指定ATC序列中=n1的源包的情况下,对该表项映射的PTS设定为STC序列中的PTS=t21。这样,能够利用PTS=t21的时刻,使再现装置执行从ATC序列中=n21开始的随机访问。
图22是表示如何设定与基本视角、增强视角分别对应的表项映射的图。该图中的对应关系是对表项映射中的各个表项映射的源包号码记述STC序列中的源包号码,对表项映射中的各个表项映射的PTS记述STC序列中的PTS。图22表示如何根据表项映射来获取时间轴的源包与时间轴的对应关系。
第4段及第5段是被交织记录的基本视角、增强视角的盘区,与图21所示的情况相同。第3段是与1011、1012各个PID对应的表项映射。与1011对应的表项映射包括指示n1的表项映射、指示n8的表项映射。这些表项映射表示与STC时间轴中的t1、t2的对应关系。与1012对应的表项映射包括指示n11的表项映射、指示n18的表项映射。这些表项映射表示与STC时间轴中的t1、t2的对应关系。
如上所述,应该在时间轴中的相同再现时刻再现的基本视角、增强视角的盘区,被记录在AV数据记录区域中的分散的位置,通过利用与各个位置对应的表项映射,能够使用PTS唯一地访问成为基本视角的盘区、增强视角的盘区的开头的源包。
在此,不能适应立体观察再现的现有的再现装置通过参照1011的表项映射,访问AV数据内的成为TSPB的盘区。另一方面,能够适应立体观察再现的再现装置通过参照1011的表项映射以及1012的表项映射,访问AV数据内的TSPB、TSSB双方的盘区。这样,1011的表项映射作为本发明的导航信息中的基本位置信息发挥作用,1012的表项映射作为本发明的导航信息中的扩展位置信息发挥作用。
<播放列表信息>
图23是表示PlayList(播放列表)信息的数据结构的图,在该图中,如引出线所示,PlayList信息包括定义MainPath的MainPath信息(MainPath())、定义Subpath的子路径信息表、和Extention#Data。
首先说明MainPath(主路径)。MainPath是对作为主影像的视频流或音频流进行定义的再现路径。
MainPath按照箭头所示利用多个PlayItem(播放项目)信息#1……#N进行定义。PlayItem信息用于定义构成MainPath的一个逻辑再现区间。PlayItem信息的结构利用引出线进行详细表示。如该引出线所示,PlayItem信息由以下部分构成:“Clip_Information_file_name”,表示再现区间的IN点及Out点所属的AVClip的再现区间信息的文件名;“Clip_codec_identifier”,表示AVClip的编码方式;“is_multi_angle”,表示PlayItem是否构成多角度;“connection_condition”,表示该PlayItem(当前PlayItem)与其前一个PlayItem(previousPlayItem)之间的连接状态;“ref_to_STC_id[0]”,表示该PlayItem作为对象的唯一STC_Sequence;时间信息“In_time”,表示再现区间的开始点;时间信息“Out_time”,表示再现区间的结束点;“UO_mask_table”,表示在该PlayItem中应该屏蔽的用户操作是哪个;“STN_table(2D)”;“BaseView#indicator”;“Multi#clip#entries”。其中,构成再现路径的是表示再现区间的开始点的时间信息“In_time”与表示再现区间的结束点的时间信息“Out_time”所构成的组,再现路径信息由该“In_time”与“Out_time”的组构成。
“BaseView#indicator”在其值为0时表示BaseView是左视角,在其值为1时表示BaseView是右视角。
“STN_table(2D)”是由现有的BD-ROM再现装置读出的STN表,包括表示构成视频流的TS包的PID的视频流号码表。通常,STN表是对包ID及流属性的组分配流号码的表。STN#table中的包ID及流属性的组的顺序表示对应的流的优先顺序。
图24是详细表示子路径信息表的内部结构的图。该表包括多个子路径信息。这些子路径信息是从一个类结构体派生出来的多个实例,其内部结构都相同。引出线用于详细表示Subpath(子路径)信息的共同的内部结构。如该图中的箭头所示,各个Subpath信息包括表示子路径的类型的Subpath_type、和一个以上的SubPlayItem信息(…SubPlayItem()…)。SubPlayItem信息如该图中的箭头所示包括“Clip_information_file_name”、“Clip_codec_identifier”、“ref_to_STC_id[0]”、“SubPlayItem_In_time”、“SubPlayItem_Out_time”、“sync_PlayItem_id”、“sync_start_PTS_of_PlayItem”。下面,说明SubPlayItem的内部结构。
“Clip_information_file_name”是通过记述Clip信息的文件名来唯一指定与SubPlayItem对应的SubClip的信息。
“Clip_codec_identifier”表示AVClip的编码方式。
“ref_to_STC_id[0]”唯一表示该SubPlayItem作为对象STC_Sequence。
“SubPlayItem_In_time”是表示SubClip的再现时间轴上的SubPlayItem的开始点的信息。
“SubPlayItem_Out_time”是表示SubClip的再现时间轴上的SubPlayItem的结束点的信息。
“sync_PlayItem_id”是唯一指定构成MainPath的PlayItem中应该与该SubPlayItem同步的PlayItem的信息。SubPlayItem_In_time处于利用该sync_PlayItem_id指定的Play Item的再现时间轴上。
“sync_start_PTS_of_PlayItem”以45KHz的时间精度,表示利用SubPlayItem_In_time指定的SubPlayItem的开始点位于利用sync_PlayItem_id指定的Play Item的再现时间轴上的何处。在某个SubPlayItem定义辅视频流上的再现区间、该SubPlayItem的sync_start_PTS_of_PlayItem表示PlayItem时间轴上的一个时刻的情况下,该SubPlayItem实现“同步画中画”。
并且,也能够对该Sync_Start_PTS_of_PlayItem设定不定值(0xFFF)。该不定值表示在利用Sync_PlayItem_Id指定的PlayItem的时间轴上,将由用户进行了锁定操作的时刻,设定为与利用Sync_PlayItem_Id指定的PlayItem的同步时刻。在sync_start_PTS_of_PlayItem被设定不定值,而且SubPlayItem期望再现辅视频流的情况下,该SubPlayItem实现“非同步画中画”。
图中的引出线用于详细表示SubPlayItem信息的结构。
SubPlayItem用于定义从主路径分离的一个以上的基本流再现路径,并表述如何使该路径与主路径同步的类型。如果在SubPlayItem中使用的是The Primary audio/PG/IG/Secondary audio/Secondary video的子路径,则这些SubPlayItem与正在使用PlayList中的PlayItem的主路径同步。由该基本流再现用的子路径使用的基本流被复用至从由MainPath侧的PlayItem使用的MainClip分离的Clip即SubClip。
图25是表示对左视角、右视角定义什么样的再现区间的图。该图是以图22为基础制作的,在成为其基础的附图的第1段的时间轴上描绘PlayItem的In#Time及Out#Time。在第2段的时间轴上描绘SubPlayItem的In#Time及Out#Time。第4段及第5段与图22中的第4段、第5段相同。左视角、右视角的I图片处于时间轴上的相同的时刻。
左视角和右视角借助播放项目信息、SubPlayItem信息相对应。
对盘区数据进行说明。图26是表示播放列表信息中的盘区数据的内部结构的图。引出线用于详细表示盘区数据的内部结构。如该引出线所示,盘区数据由与各个播放项目信息#1~#N分别对应的STN#table#extention构成。
STN#table#extention是由可应对立体观察再现的BD-ROM再现装置读出的STN表,如利用引出线详细表示的那样,包括表示立体观察再现时的流号码和PID、流属性的分配的视频流号码表。
图27是表示视频流号码表的内部结构的图。由N个enhanced#view#is#available标志与depth#is#available标志的组e1、以及N个streamentry与stream#attribute的组f1构成。这些组与1~N的流号码相对应,enhanced#view#is#available标志与depth#is#available标志的组、以及stream#entry与stream#attribute的组,能够使用1~N的流号码来唯一确定。
Stream#entry包括表示针对构成基本视角视频流的PES包的PID的参照值、以及针对构成增强视角视频流的PES包的PID的参照值的“ref#to#stream#PID#of#main#Clip”、“video#format”、“frame#rate”。
这些表中的stream#entry的顺序表示在再现装置选择流时的流选择的优先顺序。即,再现装置优先选择表中表项顺序较高的位置的流。
在enhanced#view#is#available标志为ON(开启)、并被设定为增强视角的情况下,在ref#to#stream#of#MainClip中记述有1101的包ID和1012的包ID。在depth#is#available标志为ON、并被设定为深度视角的情况下,在ref#to#stream#of#MainClip中记述有1101的包ID和1013的包ID。
由于在用于确定基本视角视频流的流号码中记述有1011的包ID,在用于确定增强视角视频流的流号码中记述有1012的包ID,所以当在可应对立体观察再现的BD-ROM再现装置中相应的流号码被存储在流号码寄存器中的情况下,具有1011的包ID的TS包和具有1012的包ID的TS包被供给解码器。这样,能够使解码器分开地对基本视角流和增强视角流进行解码。
如上所述,通过由不能应对立体观察再现的BD-ROM再现装置和可应对立体观察再现的BD-ROM再现装置读出不同的STN_table,能够按照再现装置的类型,根据不同的STN_table将PID识别为流号码。这样,MainPath信息的“STN_table(2D)”作为本发明的导航信息中的基本位置信息的一部分发挥作用,盘区数据的“STN#table#extention”作为本发明的导航信息中的扩展位置信息的一部分发挥作用。
以上是关于本实施方式的BD-ROM101的说明。
<再现装置102>
下面,说明使用本实施方式的BD-ROM101进行立体观察用再现的再现装置102。
图28是表示再现装置102的结构的一例的图。再现装置102由BD-ROM驱动器10、读缓冲器11、读缓冲器12、系统目标解码器13、BD-J执行部14、网络接口15、虚拟包控制部16、状态管理部17、用户事件处理部18、再现引擎19、再现控制引擎20、HDMI收发部21、堆内存22、字节码解释器23和PSR组24构成。下面说明这些构成要素。
<BD-ROM驱动器10>
BD-ROM驱动器10从BD-ROM盘读出数据,将数据存储在读缓冲器11中。
<读缓冲器11>
读缓冲器11是利用临时存储使用BD-ROM驱动器读取的数据的存储器等构成的缓冲器。
<读缓冲器12>
读缓冲器12是利用临时存储从本地存储器读取的数据的存储器等构成的缓冲器。
<系统目标解码器13>
系统目标解码器13对被读取到读缓冲器11中的源包及被读取到读缓冲器12中的源包进行解复用处理,并进行对各个流进行解码并再现的处理。并且,系统目标解码器13进行对由BD-J执行部14显示在菜单等中的JPEG、PNG等图形数据进行解码并再现的处理。
<BD-J执行部14>
BD-J执行部14是执行从虚拟包控制部16传输的BD-J应用的程序处理引擎,按照BD-J应用的程序来进行动作,并进行下述的控制。(1)对虚拟包控制部16进行播放列表再现。(2)从因特网等的WWW服务器向本地存储器中存储更新工具包(update kit)。(3)将BD-ROM和更新工具包相结合,命令构建虚拟包。(4)对播放器变量设定值。(5)向系统目标解码器传输菜单或游戏的图形用的PNG/JPEG,并显示在画面上。这些动作能够根据程序的生成来自由进行,关于如何控制将由基于创作(authoring)工序的BD-J应用的编程工序来决定。
<网络接口15>
网络接口15用于实现再现装置的通信功能,如果从BD-J应用进行了URL指定,则建立与该URL的web站点的TCP连接、FTP连接等。通过建立这种连接,使Java(TM)应用从web站点进行下载。
<虚拟包控制部16>
虚拟包控制部16具有控制BD-ROM驱动器10、本地存储器105,来构建虚拟包并控制播放器的再现的功能。虚拟包(virtual package)是指假想的BD-ROM包,是以记录在BD-ROM盘中的内容、存储在本地存储器105中的差分数据和存储在本地存储器105中的合并管理信息为基础,并在存储器中与BD-ROM中的内容相结合而形成的。所构建的虚拟包具有与BD-ROM的数据结构相同的形式。构建虚拟包的定时有插入盘的时刻、BD-J执行部14执行虚拟包构建命令的时刻等。虚拟包控制部16在构建虚拟包后,根据BD-J执行部的再现命令或由用户事件处理部通知,经由播放列表信息来控制AVClip的再现处理。并且,虚拟包控制部16进行播放器变量的设定及参照,并进行再现动作。
<状态管理部17>
状态管理部17管理位于BD-ROM或者本地存储器中的各个AVClip是Missing状态、Enable状态、Disable状态中的哪种状态,并进行是否停止播放列表的再现的控制。
Missing(缺失)状态是指由播放项目信息、子播放项目信息所参照的AVClip不在BD-ROM或者本地存储器中的状态。
Enable(启动)状态是指能够利用虚拟包控制部16进行再现的状态,利用BD-J应用的API进行控制。在执行被设定为Enable状态的API的情况下,AVClip属于只读属性,能够利用虚拟包控制部16再现AVClip。
Disable(禁止)状态是指与Enable状态相反的状态,虚拟包控制部16不能进行相应AVClip的再现。在一次也没有利用BD-J应用将AVClip设定为Enable状态的情况下,该AVClip是Disable状态。如果BD-J应用期望对Enable状态的AVClip进行删除和覆盖等,则使用一次API转移到Disable状态并执行。
其中,把处于Missing状态的AVClip、处于Disable状态的AVClip一并称为UnavailableClip。
关于是否停止播放列表的再现的控制,在当前子播放项目信息变化的情况下,判定由当前子播放项目信息所参照的AVClip是否是UnavailableClip,如果是UnavailableClip,则将DataStareved事件通知JMF播放器实例和再现控制引擎,使JMF播放器实例和再现控制引擎从再现状态进入停止状态。
<用户事件处理部18>
用户事件处理部18响应用户通过遥控器进行的操作,委托BD-J执行部14和虚拟包控制部16进行处理。例如,在利用遥控器按下按钮的情况下,委托BD-J执行部14执行该按钮中包含的命令。例如,在利用遥控器按下了快进/后退按钮的情况下,命令虚拟包控制部16针对当前正在再现的播放列表的AVClip执行快进/后退处理。
<再现引擎19>
再现引擎19执行AV再现功能。再现装置的AV再现功能是指从DVD播放器、CD播放器沿袭下来的传统功能组,包括再现开始(Play)、再现停止(Stop)、暂停(Pause On)、暂停解除(Pause Off)、Still功能解除(StillOff)、带速度指定的快进(Forward Play(speed))、带速度指定的后退(Backward Play(speed))、声音切换(Audio Change)、辅视频切换(SubtitleChange)、角度切换(Angle Change)的功能。为了实现AV再现功能,再现引擎19控制系统目标解码器,使进行AVClip中对应所期望时刻的部分的解码。
<再现控制引擎20>
再现控制引擎20执行针对播放列表的再现控制功能。针对播放列表的再现控制功能是指按照当前播放列表信息及Clip信息,执行由再现引擎19所进行的AV再现功能中的再现开始或再现停止。
在此,再现装置102能够应对立体观察用再现,由再现控制引擎20使用当前播放列表信息中包含的STN表中的、盘区数据中包含的“STN#table#extention”,而非各个PlayItem信息中包含的“STN_table(2D)”,执行针对播放列表的再现控制功能。
<HDMI收发部21>
HDMI收发部21从通过HDMI(High Definition Multimedia Interface:高清晰度多媒体接口)连接的其他设备,接收与该设备相关的信息,并且,将由系统目标解码器进行解码得到的数字非压缩的视频、与LPCM及被压缩后的音频数据一起发送给通过HDMI而连接的其他设备。
由HDMI收发部21接收的与其他设备相关的信息,例如有从与再现装置102连接的电视机103接收的信息。再现装置102能够利用从该电视机103接收的设备信息,识别电视机103是应对3D的还是应对2D的。
<堆内存22>
堆内存22是为了BD-J执行部14而确保的堆栈存储器,存储有利用BD-J应用生成的JMF播放器实例、和通过对BD-J应用进行类装载(classload)而生成的字节码。这些都形成线程的形式,并以先入先出方式提供给字节码解释器23执行。
<字节码解释器23>
字节码解释器23把存储在堆内存22中的字节码转换为CPU能够执行的本地代码(native code),并使CPU执行。
<PSR组24>
PSR组24是存储了播放器变量的播放器设定寄存器、播放器状态寄存器。播放器变量有表示播放器的状态的系统参数(SPRM)和能够作为普通用途使用的通用参数(GPRM)。
图6是系统参数(SPRM)的一览。
SPRM(0):语言代码
SPRM(1):主音频流号码
SPRM(2):字幕流号码
SPRM(3):角度号码
SPRM(4):标题号码
SPRM(5):章节号码
SPRM(6):程序号码
SPRM(7):单元号码
SPRM(8):选择键号码
SPRM(9):导航定时器
SPRM(10):再现时刻信息
SPRM(11):卡拉OK用混合模式
SPRM(12):父母限制用国家信息
SPRM(13):父母限制级别
SPRM(14):播放器设定值(视频)
SPRM(15):播放器设定值(音频)
SPRM(16):音频流用语言代码
SPRM(17):音频流用语言代码(扩展)
SPRM(18):字幕流用语言代码
SPRM(19):字幕流用语言代码(扩展)
SPRM(20):播放器区域代码
SPRM(21):辅视频流号码
SPRM(22):辅音频流号码
SPRM(23):再现状态
SPRM(24):备用
SPRM(25):备用
SPRM(26):备用
SPRM(27):备用
SPRM(28):备用
SPRM(29):备用
SPRM(30):备用
SPRM(31):备用
SPRM(10)在每当显示属于AVClip的各个图片数据时被更新。即,如果使再现装置显示新的图片数据,则SPRM(10)被更新为表示该新的图片数据的显示时刻(PTS)的值。如果参照该SPRM(10),则能够得知当前的再现时刻。
SPRM(16)的音频流用语言代码及SPRM(18)的字幕流用语言代码是能够通过播放器的OSD等进行设定的项目,表示播放器的默认的语言代码。例如,如果SPRM(16)的音频流用语言代码是“英语”,则能够在再现播放列表的基础上,从播放项目的流选择表中寻找具有相同语言代码的流表项,把选择并再现该音频流的功能输入到BD-ROM盘中的BD-J应用中。这些SPRM被存储在分别具有32比特的语句长度的寄存器中。用于确定SPRM的带括号的数值基本上是指对应的寄存器的寄存器号码(其中,SPRM(21)、SPRM(22)不是指对应的寄存器的寄存器号码)。
以上是再现装置102的内部结构。
下面详细说明播放列表的再现。
图29是表示播放列表信息的再现步骤的流程图。
在步骤1,将当前PlayItem号码初始化为“1”,并进入步骤2~12的循环。该循环用于反复进行对当前PlayItem执行步骤2~步骤10的处理并将当前PlayItem号码递增的处理(步骤11),直到当前PlayItem号码成为最后一个(步骤12:是)。步骤2~步骤10如下所述。
在步骤2,使用与基本视角的包ID对应的表项映射,把当前PlayItem.In#Time及当前PlayItem.Out#Time转换为Start#SPN[i]和End#SPN[i]。
执行流选择过程并确定号码(步骤3),将所选择的流号码写入到PSR中(步骤4),确定与当前流号码对应的SubPlayItem(步骤5)。把使用与增强视角的包ID对应的表项映射[j]而确定的SubPlayItemIn#Time及SubPlayItemOut#Time转换为Start#SPN[j]和End#SPN[j](步骤6)。
确定属于从Start#SPN[i]到End#SPN[i]中读出包ID[i]的TS包[i]用的读出范围[i]的盘区(步骤7),并确定属于从Start#SPN[j]到End#SPN[j]中读出包ID[j]的TS包[j]用的读出范围[j]的盘区(步骤8)。并且,在步骤9,将属于读出范围[i]、[j]的盘区按照地址的升序进行排序,在步骤10,使用所排序的地址,指示驱动器连续读出属于读出范围[i]、[j]的盘区。
图30是表示流选择过程的处理步骤的流程图。步骤21是判定步骤,用于根据从所连接的电视机103获取的设备信息来判定电视机103的显示方式是否是2D,如果判定结果为是,则将当前播放项目信息内的2D用STN#table设定为当前STN#table(步骤22)。如果判定结果为否,则将播放列表信息的盘区数据中所存在的STN#table中、与当前播放项目信息对应的STN#table设定为当前STN#table(步骤23)。通过选择该STN#table,利用再现装置102能够输出适合于所连接的电视机103的显示方式的影像数据。
在设定当前STN#table后,执行步骤24~步骤34的处理。步骤24~步骤34用于对基本视角视频流、交互图形流、增强视角视频流、主音频流、辅音频流分别反复进行步骤26~步骤33的处理。步骤26用于判定当前STN#table中与流x对应的STN#table表项数是否为0,步骤27是判定步骤,用于判定当前STN#table中与流x对应的流表项数是否为在流号码寄存器中存储的流号码以上。
如果步骤26、步骤27任意一个步骤为是,则保持在流号码寄存器中存储的流号码(步骤33)。
如果步骤26、步骤27都为否,则判定在当前STN#table中登记的PES流满足多个条件中的哪个条件(步骤28),并判定是否存在多个被判定为满足的条件的组合为相同的PES流(步骤29)。
在满足条件的PES流只有一个的情况下,选择满足条件的一个PES流(步骤30)。
在存在多个满足条件的PES流的情况下,选择被判定为满足相同条件的PES流中、在当前STN#table中的优先顺序为最高的PES流(步骤31)。
然后,将所选择的PES流的号码写入到流号码寄存器中。
以上是播放列表信息的再现步骤的详细情况。
另外,也可以对上述的流选择过程进行改进并实施,以便将步骤21的判定变更为基于用户选择的判定。在这种改进中,在步骤21,通过用户事件处理部18受理用于进行2D/3D的哪种影像再现的选择输入,在用户选择了2D再现的情况下,把当前播放项目信息内的2D用STN#table设定为当前STN#table(步骤22)。在用户选择了3D再现的情况下,把播放项目信息的盘区数据中所存在的STN#table中、与当前播放项目信息对应的STN#table设定为当前STN#table(步骤23)。通过进行这种改进,能够实现适合用户的喜好的影像再现。
根据以上所述的本实施方式,在不能应对立体观察用再现的现有的再现装置中,能够从光盘读出基本视角流并进行2D影像的再现,在能够应对立体观察用再现的再现装置中,能够从光盘读出基本视角流以及增强视角流,并再现立体观察图像。通过实现这种向下兼容性,能够缓解与立体观察显示的普及相关的各种问题。
(其他变形例)
以上根据上述实施方式说明了本发明,但本发明当然不限于上述实施方式。诸如以下所述的情况也包含于本发明中。
(1)本发明也可以是按照在各个实施方式中说明的数据结构向光盘中记录数据的记录方法、再现上述光盘的再现方法。并且,本发明也可以是包括使计算机按照所述记录方法进行动作的程序代码的计算机程序,还可以是由所述计算机程序构成的数字信号。
另外,本发明也可以构成为将所述计算机程序或者所述数字信号记录在计算机可以读取的记录介质中,所述记录介质例如是软盘、硬盘、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray Disc:蓝光光盘)、半导体存储器等。
另外,本发明也可以构成为经由电通信线路、无线或有线通信线路、以因特网为代表的网络等,传输所述计算机程序或者所述数字信号。
另外,本发明也可以构成为将所述计算机程序或者所述数字信号记录在所述记录介质中并进行移送,或者经由所述网络等移送所述计算机程序或所述数字信号,从而能够利用独立的其他计算机系统来实施。
(2)本发明也可以构成为将图28所示的构成要素中除了BD-ROM驱动器之外的构成要素通过集成处理安装成为控制再现装置102的LSI。这些构成要素可以分别地形成为单片,也可以形成为包含一部分或全部的单片。
在此,LSI根据集成度的不同,可以称为IC、系统LSI、超级(super)LSI、特级(ultra)LSI。
并且,集成电路化的方法不限于LSI,也可以利用专用电路或通用处理器实现。也可以采用在制作LSI后能够编程的FPGA(Field ProgrammableGate Array:现场可编程门阵列)、能够再构成LSI内部的电路单元的连接和设定的可重构处理器。
另外,如果伴随半导体技术的发展或利用派生的其他技术替换LSI的集成电路化的技术问世,当然也可以使用该技术进行功能单元及部件的集成化。这样的技术中存在适用生物技术等的可能性。
(3)在实施方式2中,关于BD-ROM标准只抽取与本发明相关联的部分,而且只使用代表性的目录、文件进行了说明,而本发明当然也能够将按照BD-ROM标准规定的其他文件记录在BD-ROM中。
(4)在上述实施方式中,把依据于BD-ROM标准的BD-ROM用作了示例,而本发明的特征不依赖于BD-ROM的物理特性,本发明也能够适用于其他记录介质。
(5)本发明也可以分别组合上述实施方式和上述变形例来实施。
产业上的可利用性
本发明的光盘能够在不能应对立体观察用再现的再现装置中进行2D影像的再现,同时能够在应对立体观察用再现的再现装置中进行3D影像的再现。因此,本发明的光盘在电影产业及民用设备产业中具有很高的可应用性。

Claims (6)

1.一种再现装置,具有立体观察用再现的再现能力,再现在光盘中记录的视频流,并将所再现的图像输出给显示装置,其特征在于,
所述再现装置具有:
判定单元,判定输出目的地的显示装置是否能够进行立体观察影像的显示;
读出单元,从光盘读出视频流;
再现单元,再现从光盘读出的视频流;以及
控制单元,
光盘包括AV数据记录区域和导航信息区域,
在AV数据记录区域中记录有传输流,该传输流是将构成主流的多个数据块和构成辅流的多个数据块交织配置而成的,
主流是表示平面观察图像的视频流,
辅流是表示相对于平面观察图像的视差图像的视频流,
在导航信息区域中记录有导航信息,导航信息包括基本位置信息、和只对具有立体观察用再现的再现能力的装置有效的扩展位置信息,
基本位置信息表示在AV数据记录区域中记录了构成主流的各个数据块的区域,
扩展位置信息表示记录了构成辅流的各个数据块的区域,
构成主流的数据块的数据大小以及构成辅流的数据块的数据大小,是根据下述两个规定的条件而规定的,第一个规定的条件是在参照导航信息中的基本位置信息来读出传输流的装置中,能够从光盘读出主流并进行解码而且连续再现,第二个规定的条件是在参照导航信息中的基本位置信息和扩展位置信息双方来读出传输流的装置中,能够从光盘读出主流和辅流双方并进行解码而且连续再现,
在输出目的地的显示装置能够进行立体观察影像的显示的情况下,所述控制单元参照导航信息中的基本位置信息和扩展位置信息双方,使读出单元进行主流和辅流双方的读出,
在输出目的地的显示装置不能进行立体观察影像的显示的情况下,所述控制单元参照导航信息中的基本位置信息,使读出单元只进行主流的读出。
2.根据权利要求1所述的再现装置,其特征在于,
基本位置信息包括根据作为主流的构成单位的包所附带的识别符来确定记录了构成主流的各个数据块的区域的信息,
扩展位置信息包括根据作为辅流的构成单位的包所附带的识别符来确定记录了构成辅流的各个数据块的区域的信息。
3.根据权利要求2所述的再现装置,其特征在于,
根据识别符来确定记录了构成主流的各个数据块的区域的信息,是主流的表项映射,
根据识别符来确定记录了构成辅流的各个数据块的区域的信息,是辅流的表项映射。
4.根据权利要求1所述的再现装置,其特征在于,
构成主流的数据块包括不使用视点间的图像参照即可进行解码的、平面观察图像的编码帧,
构成辅流的数据块包括能够使用视点间的图像参照来进行解码的、视差图像的编码帧,
与对平面观察图像的编码帧进行参照的视差图像的编码帧相比,所述再现单元先对该平面观察图像的编码帧进行解码。
5.一种控制再现装置的集成电路,该再现装置具有立体观察用再现的再现能力,再现在光盘中记录的视频流,并将所再现的图像输出给显示装置,其特征在于,
所述集成电路具有:
判定单元,判定输出目的地的显示装置是否能够进行立体观察影像的显示;
读出控制单元,使再现装置的读出单元从光盘读出视频流;以及
再现单元,再现从光盘读出的视频流,
光盘包括AV数据记录区域和导航信息区域,
在AV数据记录区域中,交织地配置并记录有构成主流的多个数据块和构成辅流的多个数据块,
主流是表示平面观察图像的视频流,
辅流是表示相对于平面观察图像的视差图像的视频流,
在导航信息区域中记录有导航信息,导航信息包括基本位置信息、和只对具有立体观察用再现的再现能力的装置有效的扩展位置信息,
基本位置信息表示在AV数据记录区域中记录了构成主流的各个数据块的区域,
扩展位置信息表示记录了构成辅流的各个数据块的区域,
构成主流的数据块的数据大小以及构成辅流的数据块的数据大小,是根据下述两个规定的条件而规定的,第一个规定的条件是在参照导航信息中的基本位置信息来读出传输流的装置中,能够从光盘读出主流并进行解码而且连续再现,第二个规定的条件是在参照导航信息中的基本位置信息和扩展位置信息双方来读出传输流的装置中,能够从光盘读出主流和辅流双方并进行解码而且连续再现,
在输出目的地的显示装置能够进行立体观察影像的显示的情况下,所述读出控制单元参照导航信息中的基本位置信息和扩展位置信息双方,使再现装置的读出单元进行主流和辅流双方的读出,
在输出目的地的显示装置不能进行立体观察影像的显示的情况下,所述读出控制单元参照导航信息中的基本位置信息,使再现装置的读出单元只进行主流的读出。
6.一种再现方法,用于在具有立体观察用再现的再现能力的再现装置中再现在光盘中记录的视频流,并将所再现的图像输出给显示装置,其特征在于,
该再现方法包括:
判定步骤,判定输出目的地的显示装置是否能够进行立体观察影像的显示;
读出步骤,从光盘读出视频流;以及
再现步骤,再现从光盘读出的视频流,
光盘包括AV数据记录区域和导航信息区域,
在AV数据记录区域中,交织地配置并记录有构成主流的多个数据块和构成辅流的多个数据块,
主流是表示平面观察图像的视频流,
辅流是表示相对于平面观察图像的视差图像的视频流,
在导航信息区域中记录有导航信息,导航信息包括基本位置信息、和只对具有立体观察用再现的再现能力的装置有效的扩展位置信息,
基本位置信息表示在AV数据记录区域中记录了构成主流的各个数据块的区域,
扩展位置信息表示记录了构成辅流的各个数据块的区域,
构成主流的数据块的数据大小以及构成辅流的数据块的数据大小,是根据下述两个规定的条件而规定的,第一个规定的条件是在参照导航信息中的基本位置信息来读出传输流的装置中,能够从光盘读出主流并进行解码而且连续再现,第二个规定的条件是在参照导航信息中的基本位置信息和扩展位置信息双方来读出传输流的装置中,能够从光盘读出主流和辅流双方并进行解码而且连续再现,
在输出目的地的显示装置能够进行立体观察影像的显示的情况下,在所述读出步骤中参照导航信息中的基本位置信息和扩展位置信息双方,读出主流和辅流双方,
在输出目的地的显示装置不能进行立体观察影像的显示的情况下,在所述读出步骤中参照导航信息中的基本位置信息,只读出主流。
CN2009801153571A 2008-05-01 2009-05-01 再现装置、集成电路与再现方法 Active CN102017640B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US4970708P 2008-05-01 2008-05-01
US61/049,707 2008-05-01
PCT/JP2009/001986 WO2009133714A1 (ja) 2008-05-01 2009-05-01 立体視映像を再生するための光ディスク

Publications (2)

Publication Number Publication Date
CN102017640A CN102017640A (zh) 2011-04-13
CN102017640B true CN102017640B (zh) 2012-11-28

Family

ID=41254938

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009801153571A Active CN102017640B (zh) 2008-05-01 2009-05-01 再现装置、集成电路与再现方法

Country Status (4)

Country Link
US (1) US8565576B2 (zh)
JP (1) JP5351146B2 (zh)
CN (1) CN102017640B (zh)
WO (1) WO2009133714A1 (zh)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101506217B1 (ko) * 2008-01-31 2015-03-26 삼성전자주식회사 스테레오스코픽 영상의 부분 데이터 구간 재생을 위한스테레오스코픽 영상 데이터스트림 생성 방법과 장치, 및스테레오스코픽 영상의 부분 데이터 구간 재생 방법과 장치
US20090288076A1 (en) * 2008-05-16 2009-11-19 Mark Rogers Johnson Managing Updates In A Virtual File System
KR20100040563A (ko) * 2008-10-10 2010-04-20 삼성전자주식회사 방송 표시장치 및 그의 2차원 영상 표시 방법
US20100135640A1 (en) * 2008-12-03 2010-06-03 Dell Products L.P. System and Method for Storing and Displaying 3-D Video Content
US8289998B2 (en) * 2009-02-13 2012-10-16 Samsung Electronics Co., Ltd. Method and apparatus for generating three (3)-dimensional image data stream, and method and apparatus for receiving three (3)-dimensional image data stream
JP2010212948A (ja) 2009-03-10 2010-09-24 Sony Corp 再生装置、再生方法、記録装置、記録方法、プログラム、及び、データ構造
JP4947389B2 (ja) 2009-04-03 2012-06-06 ソニー株式会社 画像信号復号装置、画像信号復号方法、および画像信号符号化方法
JP4984195B2 (ja) * 2009-04-07 2012-07-25 ソニー株式会社 再生装置、再生方法、および記録方法
JP4984183B2 (ja) * 2009-04-07 2012-07-25 ソニー株式会社 再生装置、再生方法、および記録方法
JP4962525B2 (ja) * 2009-04-08 2012-06-27 ソニー株式会社 再生装置、再生方法、およびプログラム
JP4984187B2 (ja) * 2009-06-22 2012-07-25 ソニー株式会社 記録方法
JP4984181B2 (ja) 2009-06-22 2012-07-25 ソニー株式会社 再生装置および再生方法
US9131203B2 (en) * 2009-09-30 2015-09-08 Sharp Kabushiki Kaisha Information recording medium, reproduction method and recording method using information recording medium, information recording/reproduction device, and 3D conversion unit and information recording device
KR20110055196A (ko) * 2009-11-19 2011-05-25 삼성전자주식회사 디스플레이장치 및 그 영상신호처리방법
US9077966B2 (en) * 2010-02-15 2015-07-07 Thomson Licensing Apparatus and method for processing video content
JP2011223247A (ja) * 2010-04-08 2011-11-04 Sony Corp 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP5577805B2 (ja) * 2010-04-08 2014-08-27 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP5601006B2 (ja) * 2010-04-08 2014-10-08 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP2011223248A (ja) * 2010-04-08 2011-11-04 Sony Corp 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP5494152B2 (ja) * 2010-04-08 2014-05-14 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
KR20110115087A (ko) * 2010-04-14 2011-10-20 삼성전자주식회사 3차원 영상 데이터를 부호화하는 방법 및 장치와 복호화 방법 및 장치
KR20110139497A (ko) * 2010-06-23 2011-12-29 삼성전자주식회사 디스플레이 장치 및 그 디스플레이 방법
US8737811B2 (en) * 2010-08-06 2014-05-27 Panasonic Corporation Playback device, integrated circuit, playback method, and program
KR20120083820A (ko) * 2011-01-18 2012-07-26 삼성전자주식회사 컨텐츠 전송 시스템에서 컨텐츠 전송 방법 및 장치
TWI449407B (zh) * 2011-01-28 2014-08-11 Realtek Semiconductor Corp 顯示器、影像處理裝置以及影像處理方法
WO2012170984A1 (en) 2011-06-09 2012-12-13 Cstereo3D, Llc Device and method for rendering and delivering 3-d content
US9106894B1 (en) * 2012-02-07 2015-08-11 Google Inc. Detection of 3-D videos
WO2013142990A1 (en) * 2012-03-29 2013-10-03 Tandemlaunch Technologies Inc. System and method for providing light efficient stereo projection
KR20140099146A (ko) * 2013-02-01 2014-08-11 한국전자통신연구원 다중 영상 기반 방송 서비스를 위한 다중 영상의 기준 pcr 결정 방법 및 그 장치
US9912929B2 (en) * 2013-03-21 2018-03-06 Mediatek Inc. Video frame processing method
US20160277751A1 (en) * 2015-03-19 2016-09-22 Patrick J. Sweeney Packaging/mux and unpackaging/demux of geometric data together with video data
US20160307603A1 (en) * 2015-04-15 2016-10-20 Sony Corporation Information processing device, information recording medium, information processing method, and program
JP6973371B2 (ja) * 2016-02-26 2021-11-24 ソニーグループ株式会社 情報処理装置、表示装置、情報記録媒体、および情報処理方法、並びにプログラム
JP7155727B2 (ja) * 2018-08-07 2022-10-19 富士通株式会社 情報処理装置、情報処理装置の制御方法及び情報処理装置の制御プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1074541A (zh) * 1991-11-04 1993-07-21 李胜 记录和再现立体像
CN1197574A (zh) * 1995-09-29 1998-10-28 松下电器产业株式会社 具有非连续系统时间信息的位流的无断层重放方法和装置
CN1680891A (zh) * 2004-04-07 2005-10-12 松下电器产业株式会社 信息处理装置及信息记录介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6484266B2 (en) * 1995-09-29 2002-11-19 Matsushita Electric Industrial Co., Ltd. Method and an apparatus for reproducing bitstream having non-sequential system clock data seamlessly therebetween
EP0888018B1 (en) * 1996-02-28 2006-06-07 Matsushita Electric Industrial Co., Ltd. Optical disk having plural streams of digital video data recorded thereon in interleaved manner, and apparatuses and methods for recording on, and reproducing from, the optical disk
EP2259585B1 (en) * 1996-12-04 2013-10-16 Panasonic Corporation Optical disk for high resolution and three dimensional video recording, optical disk reproduction apparatus, and optical disk recording apparatus
WO1999012348A1 (en) * 1997-08-29 1999-03-11 Matsushita Electric Industrial Co., Ltd. Optical disc for recording high resolution and normal image, optical disc player, optical disc recorder, and playback control information generator
JP2000270347A (ja) 1999-03-17 2000-09-29 Sharp Corp 記録装置、及び該記録装置を用いた監視システム
JP2002209232A (ja) * 2001-01-09 2002-07-26 Canon Inc 複眼カメラ
JP5036132B2 (ja) * 2002-11-21 2012-09-26 ビジョン サード イメージング,インコーポレイテッド 裸眼立体表示のための視差画像のクリティカルな位置合わせ
US7269875B1 (en) * 2003-11-19 2007-09-18 David Brian Grimes Cleaning apparatus
JP2006135747A (ja) 2004-11-08 2006-05-25 Canon Inc 三次元画像変換装置ならびに制御方法
KR20080070201A (ko) * 2007-01-25 2008-07-30 삼성전자주식회사 추가적인 자막 제공 방법 및 그 재생 장치
JP2009004940A (ja) 2007-06-20 2009-01-08 Victor Co Of Japan Ltd 多視点画像符号化方法、多視点画像符号化装置及び多視点画像符号化プログラム
JP5278796B2 (ja) 2008-07-30 2013-09-04 日本精機株式会社 表示装置
WO2010113454A1 (ja) * 2009-03-31 2010-10-07 パナソニック株式会社 記録媒体、再生装置、及び集積回路

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1074541A (zh) * 1991-11-04 1993-07-21 李胜 记录和再现立体像
CN1197574A (zh) * 1995-09-29 1998-10-28 松下电器产业株式会社 具有非连续系统时间信息的位流的无断层重放方法和装置
CN1680891A (zh) * 2004-04-07 2005-10-12 松下电器产业株式会社 信息处理装置及信息记录介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JP特开2006-135747A 2006.05.25
JP特开2007-67846A 2007.03.15

Also Published As

Publication number Publication date
US20110038614A1 (en) 2011-02-17
JPWO2009133714A1 (ja) 2011-08-25
WO2009133714A1 (ja) 2009-11-05
JP5351146B2 (ja) 2013-11-27
CN102017640A (zh) 2011-04-13
US8565576B2 (en) 2013-10-22

Similar Documents

Publication Publication Date Title
CN102017640B (zh) 再现装置、集成电路与再现方法
CN102027751B (zh) 再现装置
CN102685435B (zh) 再现装置、记录方法
JP5596830B2 (ja) 旧来のフォーマットとの互換を維持しつつも、記録内容を編集することができる記録媒体、記録装置
CN102833572B (zh) 接收装置
CN102172033B (zh) 再生装置、记录方法、记录介质再生系统
CN101803396B (zh) 记录方法、再现装置和集成电路
CN102232295A (zh) 再现装置、记录介质及集成电路
CN101953170B (zh) 再现装置及集成电路
CN101682719A (zh) 记录有3d影像的记录介质、记录3d影像的记录装置以及再现3d影像的再现装置和再现方法
JP4984181B2 (ja) 再生装置および再生方法
JP4993042B2 (ja) 再生装置、再生方法、および記録方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant