发明内容
此外在这类信息记录介质中,根据信息记录介质的高密度技术的发展,可使诸如交互式重放这样的内容重放更复杂且更完善。因此,就子图像而言,根据交互式重放,还需要更复杂且更完善的重放控制。例如,需要在主图像视频上进行诸如子图像的动态显示、对子图像加以阴影的显示、以及对子图像所高亮控制的各种操作按钮的显示这样的各种显示控制。
然而,为了通过利用DVD视频标准中的子图像来执行各种显示控制,因此必虚正确的将进行显示控制所需的各种控制信息读取到DVD的播放器中,或者有选择的将各种控制信息中的必要信息读取到DVD的播放器中。除了读取主视频信息和子视频信息之外,还要花费时间来读取控制信息,这可造成这样的问题,即在技术上很难快到不停止连续重放地执行各种显示控制。此外,例如,为了临时停止或者完全停止诸如对子图像加以阴影或者使其高亮这样的一个显示控制,因此必在播放器上删除用于此的控制信息或者使其无效。其结果是,需要花费时间来进行删除并使其无效,并且导致控制器的处理负荷增加,因此总的来说还存在重放控制复杂的技术问题。
例如针对上述问题已实现了本发明。因此本发明的一个目的就是提供一种信息记录介质、信息记录设备和方法、信息重放设备和方法、信息录放设备和方法、用于记录或者重放控制的计算机程序、以及其包括有控制信号的数据结构,这可利用主视频信息来对所要重放的子视频信息进行复杂且完善的重放,所述重放包括诸如交互式重放这样的其借助于DVD播放器等等来对用于对复杂且完善的内容重放的一部分进行播放的子图像重放。
在本发明的信息记录介质上,记录有:视频信息,该视频信息表示主视频;子视频信息,该子视频信息表示在主视频上至少可部分显示的子视频;以及子视频控制信息,该子视频控制信息包括(i)多类控制信息组分,用于以预先所设置的各种方法来对子视频信息进行显示控制以及(ii)类型表示信息,用于通过每个类型来表示控制信息组分的存在性或不存在性或者有效性或无效性。
根据本发明的信息记录介质,当对诸如DVD这样的信息记录介质上的信息进行重放时,按照原样或者在进行任何处理或者处置之后,可对诸如主图像或者视频显示屏幕这样的主视频上的子图像信息进行至少局部的叠加以作为子帧。顺便说一下,可在主视频上显示整个子视频信息,或者剪切下一部分子视频信息以作为子帧并对其进行显示。或者,可从相同的子视频信息剪切下上述一个或多个子帧。在剪切多个子帧的情况下,可剪切其包括有任何共同部分或者不包括有共同部分的多个子帧。
在对信息记录介质上的信息进行重放的过程中,根据下述多类控制信息组分中的由包含在子视频控制信息之中的类型表示信息示出其存在性或者有效性的控制信息组分,以各种方法来对子视频信息进行显示控制,所述多类控制信息组分是预先所设置的并且也包含在其存储在SCP(子图像控制包)中的或者其被记录为SCP流的子视频控制信息之中。在这里,例如,“以各种方法的显示控制”包括在主视频上进行诸如子图像的动态显示、对子图像加以阴影的显示、以及对子图像所高亮控制的各种操作按钮的显示这样的各种显示控制。此外,类型表示信息通过利用例如二进制值“1”或“0”来表示控制信息组分的每一个是否存在于子视频控制信息之中,或者表示控制信息组分的每一个是否是有效的而与其存在性无关。因此,在重放过程中,如果在主视频上执行子视频的显示控制,也就是说,如果执行对子视频信息的显示控制,那么信息重放设备首先参考类型表示信息。此后,从信息记录介质中读取由类型表示信息确认其存在性或有效性的控制信息组分,并且根据所读取的控制信息组分而以各种方法来执行对子视频信息的显示控制。
因此,例如,可以各种方法对其作为子图像的子视频信息执行有效且快速的显示控制,并且这最终可对子图像进行各种各样的显示。在本发明信息记录介质的一个方面,子视频控制信息进一步包括子帧范围信息以将子视频的至少一部分区域指定为子帧,控制信息组分包括其用于通过子帧单元来对子视频信息进行控制的信息,并且类型表示信息通过子帧单元来表示控制信息组分的存在性或不存在性或者有效性或无效性。
根据这个方面,通过诸如坐标信息等等这样的子帧范围信息来将子视频的至少一部分区域指定为子帧以指定子帧矩形区域的相对两个角或者四个角的坐标。虽然子帧是子视频之内的矩形区域,但是子帧可采用任何任意形状。控制信息组分具有其通过子帧单元来对子视频信息进行控制的信息,并且类型表示信息通过子帧单元来表示控制信息组分的存在性或不存在性或者有效性或无效性。因此,如果在重放的过程中执行对子帧的显示控制,那么子帧单元首先参考类型表示信息,并且其次,通过子帧单元来从信息记录介质中读取由类型表示信息确认其存在性或者有效性的控制信息组分,并且以各种方法来执行对子帧的显示控制。
在本发明信息记录介质的另一方面中,类型表示信息具有表格信息,该表格信息包括每个类型的一位信息。
根据这个方面,如果在对信息记录介质中的信息进行重放的过程中执行对子视频信息的显示控制,那么首先参考类型表示信息,该类型表示信息具有其包括有每个类型的一位信息的表格信息。例如,一位信息通过其值“1”来表示相应控制信息组分的存在性或者有效性,并且通过其值“0”来表示相应控制信息组分的不存在性或者无效性。因此,在信息重放设备上,可相对快速且容易的确认控制信息组分的存在性或不存在性或者有效性或无效性,并且总的来说可有效的以各种方法来对子视频信息有效的执行显示控制。
在这个方面中,将其构造成表格信息包括其与类型无关的扩展位信息,并且子视频控制信息中的控制信息组分所占用的部分是长度可变的。
根据这个方面,在以未包含在表格信息之中的新方法来执行显示控制的情况下,可由新方法中的用于显示控制的类型表示信息来替代扩展位信息。此后,新近将新方法中的用于显示控制的控制信息组分包含在长度可变子视频信息所占用的那部分中。由此,可相对容易的引入新方法中的显示控制。
在本发明信息记录介质的另一方面中,控制信息组分包括动态控制信息以动态显示子视频信息。
根据这个方面,按照子视频通过动态控制信息来接收动态显示控制的形式,可在主视频上显示子视频。例如,子帧的一部分受到诸如平移(平行位移)、按比例缩放(按比例放大和按比例缩小)、旋转等等这样的特殊处理或者特殊处置,以便相对于主视频而言可在重放时间动态显示这部分子帧。
在本发明信息记录介质的另一方面中,控制信息组分包含阴影显示控制信息以有选择的对子视频当中的不透明部分加以阴影并且将其显示在主视频上。
根据这个方面,在有选择的对子视频当中的不透明部分加以阴影之后,在主视频上显示子视频。例如,根据其表示子视频部分透明性的α值来有选择的对不透明部分加以阴影。此后,例如,对包含在矩形子帧之中的字母或者图形加以阴影并在主视频上使其显示为从三维上突出。或者,对整个子帧或者子帧的外帧加以阴影并且将其显示在主视频上。
在本发明信息记录介质的另一方面中,控制信息组分包含(i)按钮信息,该按钮信息将在主视频上所显示的子视频的至少一部分定义为其起按钮作用的按钮视频部分;以及(ii)高亮信息,该高亮信息定义怎样对按钮视频部分执行高亮显示控制。
根据这个方面,包含在控制信息组分之中的按钮信息将下述子视频信息的至少一部分定义为按钮视频部分,所述子视频信息包括其表示一按钮的平面图、图案、图标、以及图像等等。在这里“按钮”例如是推入式按钮(即只能被按下的按钮)、开关按钮(即在每个操作中其状态交替改变的按钮)、以及专用按钮(即其中一个仅被按下的多个按钮)等等。通过远程操作、音频输入操作、相对于屏幕的触摸操作、键盘操作等等来在重放过程中执行这种按钮操作。此外,根据包含在控制信息组分之中的高亮信息来定义怎样对按钮视频部分执行高亮显示控制。在这里“怎样执行高亮显示控制”表示执行哪类高亮显示以响应诸如所按下的、所选择的、未按下的、未选择的、可按下或可选择的、不可按下或不可选择的等等这样的“按钮状态”。为响应该按钮状态,通过显示所高亮显示的按钮来执行诸如改变亮度、改变对比度、对背部加以阴影或者反影这样的特定高亮显示控制以便使其显得与其他按钮或者其他位置不同。其结果是,将子视频当中的由按钮信息所定义的按钮视频部分在主视频上显示为按钮,并且根据该高亮信息来执行对按钮视频部分的高亮显示控制。
在根据本发明信息记录介质的另一方面中,将主视频信息、子视频信息、以及子视频控制信息划分成预定包单元并对其进行多路复用,并且进一步使其相对分流成由所划分的主视频信息所组成的视频流、由所划分的子视频信息集合所组成的子图像流、以及由所划分的子视频控制信息所组成的控制信息流。
根据这个方面,例如与MPEG2的PS(节目流)相类似,在对其进行打包与分流之后对每个信息进行记录的情况下,将诸如子图像信息这样的子视频信息记录为特定SPD(数据)流,并且将用于执行对子视频信息进行显示控制的子视频控制信息记录为其与SPD流不同的特定SCP(子图像控制包)流。此外将主视频记录为特定视频流。因此,例如,通过下述子视频控制信息来以各种方法来对基于其被记录为PS中的一个流的子视频信息的显示进行有效的显示控制,所述子视频控制信息包含有多类控制信息组分并且被记录为另一流。另外,通过利用相对于相同子视频信息流而言的多个子视频控制信息可实现按照各种方法的显示控制。例如,还可通过利用相同子视频信息来执行不同显示控制。
本发明的信息记录设备具有:第一记录设备,该第一记录设备用于记录视频信息以表示主视频;第二记录设备,该第二记录设备用于记录子视频信息以表示在主视频上可至少部分显示的子视频;以及第三记录设备,该第三记录设备用于记录子视频控制信息,该子视频控制信息包括(i)多类控制信息组分,用于以预先所设置的各种方法来对子视频信息进行显示控制以及(ii)类型表示信息,用于通过每个类型来表示控制信息组分的存在性或不存在性或者有效性或无效性。
根据本发明的信息记录设备,由控制器、编码器、下述TS对象产生器、光学拾取器、剪切设备等等所组成的第一记录设备将其表示主视频的视频信息记录在诸如DVD这样的信息记录介质上。由控制器、编码器、光学拾取器、剪切设备等等所组成的第二记录设备将子视频信息记录在诸如DVD这样的信息记录介质上。由控制器、编码器、光学拾取器、剪切设备等等所组成的第三记录设备将其包括有控制信息组分和类型表示信息的子视频控制信息记录在诸如DVD这样的信息记录介质上。
因此,可相对有效的将信息记录在上述本发明的信息记录介质(包括其各个方面)上。
顺便说一下,本发明的信息记录设备还采用其与根据本发明信息记录介质的各个方面相应的各个方面。
本发明的信息记录方法具有:第一记录处理,该第一记录处理用于记录视频信息以表示主视频;第二记录处理,该第二记录处理用于记录子视频信息以表示在主视频上可至少部分显示的子视频;以及第三记录处理,该第三记录处理用于记录子视频控制信息,该子视频控制信息包括(i)多类控制信息组分,用于以预先所设置的各种方法来
对子视频信息进行显示控制以及(ii)类型表示信息,用于通过每个类型来表示控制信息组分的存在性或不存在性或者有效性或无效性。
根据本发明的信息记录方法,借助于控制器、编码器、随后所描述的TS对象产生器、光学拾取器、剪切设备等等,第一记录处理用于将视频信息记录在诸如DVD这样的信息记录介质上以表示主视频,第二记录处理用于将子视频信息记录在诸如DVD这样的信息记录介质上,并且第三记录处理用于将其包括有控制信息组分和类型表示信息的子视频控制信息记录在诸如DVD这样的信息记录介质上。
因此,可相对有效的将信息记录在上述本发明的信息记录介质(包括其各个方面)上。
顺便说一下,本发明的信息记录方法还采用其与根据本发明信息记录介质的各个方面相应的各个方面。
根据本发明的信息重放设备是用于对上述本发明信息记录介质(包括其各个方面)上的信息进行重放的信息重放设备,该信息重放设备包括:重放设备,该重放设备用于对视频信息、子视频信息、以及子视频控制信息进行重放;显示输出设备,该显示输出设备可在所重放的视频信息上显示所重放的子视频信息并对其输出;以及控制设备,该控制设备用于根据由包含在已重放子视频控制信息之中的类型表示信息示出其存在性或者有效性的控制信息组分来控制显示输出设备以按照各种方法来对子视频信息进行显示控制,并在主视频上显示子视频信息。
根据本发明的信息重放设备,由控制器、解码器、多路分离器、光学拾取器等等所组成的重放设备对视频信息、子视频信息、以及子视频控制信息进行重放。诸如CRT(阴极射线管)设备、PDF(等离子体显示板)设备、LCD(液晶显示器)设备、投影仪设备等等这样的显示输出设备可在所重放的视频信息上显示并输出子视频信息。此后,根据由包含在已重放子视频控制信息之中的类型表示信息示出其存在性或者有效性的控制信息组分,诸如控制器等等这样的控制设备控制显示输出设备以按照各种方法来对子视频信息进行显示控制并且在主视频上显示子视频信息。
因此,可相对有效的对根据上述本发明信息记录介质(包括其各个方面)上的信息进行重放。
顺便说一下,本发明的信息重放设备还采用其与根据本发明信息记录介质的各个方面相应的各个方面。
根据本发明的信息重放方法是用于对上述本发明信息记录介质(包括其各个方面)上的信息进行重放的信息重放方法,这信息重放方法包括:重放处理,该重放处理用于对视频信息、子视频信息、以及子视频控制信息进行重放;控制处理,根据由包含在重放子视频控制信息之中的类型表示信息示出其存在性或者有效性的控制信息组分来控制其可在重放视频信息上显示重放子视频信息并将其输出的显示输出设备,以按照各种方法来对子视频信息进行显示控制,并在主视频上显示子视频信息。
根据本发明的信息重放方法,重放处理用于借助于控制器、解码器、多路分离器、光学拾取器等等来对视频信息、子视频信息、以及子视频控制信息进行重放。根据由包含在重放子视频控制信息之中的类型表示信息示出其存在性或者有效性的控制信息组分,控制处理借助于控制器等等来对诸如CRT设备、PDF设备、LCD设备、投影仪设备等等这样的显示输出设备进行控制以按照各种方法来对子视频信息进行显示控制并且在主视频上显示子视频信息。
因此,可相对有效的对根据上述本发明信息记录介质(包括其各个方面)上的信息进行重放。
顺便说一下,本发明的信息重放方法还采用其与根据本发明信息记录介质的各个方面相应的各个方面。
根据本发明的信息录放设备具有:第一记录设备,该第一记录设备用于记录视频信息以表示主视频;第二记录设备,该第二记录设备用于记录子视频信息以表示在主视频上可至少部分显示的子视频;以及第三记录设备,该第三记录设备用于记录子视频控制信息,该子视频控制信息包括(i)多类控制信息组分,用于以预先所设置的各种方法来对子视频信息进行显示控制以及(ii)类型表示信息,用于通过每个类型来表示控制信息组分的存在性或不存在性或者有效性或无效性;重放设备,该重放设备用于对视频信息、子视频信息、以及子视频控制信息进行重放;显示输出设备,该显示输出设备可在所重放的视频信息上显示所重放的子视频信息并将其输出;以及控制设备,该控制设备用于根据由包含在已重放子视频控制信息之中的类型表示信息示出其存在性或者有效性的控制信息组分来控制显示输出设备以按照各种方法来对子视频信息进行显示控制,并在主视频上显示子视频信息。
根据本发明的信息录放设备,因为其具有上述本发明的信息记录设备及信息重放设备的功能,因此可相对有效的对本发明信息记录介质上的信息进行录放(包括其各个方面)。
顺便说一下,本发明的信息录放设备还采用其与根据本发明信息记录介质的各个方面相应的各个方面。
根据本发明的信息录放方法具有:第一记录处理,该第一记录处理用于记录视频信息以表示主视频;第二记录处理,该第二记录处理用于记录子视频信息以表示在主视频上可至少部分显示的子视频;以及第三记录处理,该第三记录处理用于记录子视频控制信息,该子视频控制信息包括(i)多类控制信息组分,用于以预先所设置的各种方法来对子视频信息进行显示控制以及(ii)类型表示信息,用于通过每个类型来表示控制信息组分的存在性或不存在性或者有效性或无效性;重放处理,该重放处理用于对视频信息、子视频信息、以及子视频控制信息进行重放;控制处理,根据由包含在重放子视频控制信息之中的类型表示信息示出其存在性或者有效性的控制信息组分来控制其可在重放视频信息上显示重放子视频信息并将其输出的显示输出设备,以按照各种方法来对子视频信息进行显示控制,并在主视频上显示子视频信息。
根据本发明的信息录放方法,因为其具有上述本发明的信息记录方法及信息重放方法的功能,因此可相对有效的对本发明信息记录介质上的信息进行录放(包括其各个方面)。
顺便说一下,本发明的信息录放方法还采用其与根据本发明信息记录介质的各个方面相应的各个方面。
根据本发明的用于记录控制的计算机程序用于对配置于根据上述本发明信息记录设备(包括其各个方面)上的计算机进行控制,该程序可使计算机起第一记录设备、第二记录设备、以及第三记录设备至少一部分的作用。
根据本发明的用于记录控制的计算机程序,通过从诸如ROM、CD-ROM、DVD-ROM、以及硬盘等等这样的其用于将计算机程序存储在其中/其上的记录介质中读取并且执行该计算机程序,或者通过经由通讯设备而将计算机程序下载到计算机中并使其运行,可相对容易的具体体现根据上述本发明的信息记录设备。
顺便说一下,根据本发明的用于记录控制的计算机程序还采用其与根据上述本发明信息记录介质的各个方面相应的各个方面。
根据本发明的用于重放控制的计算机程序用于对配置于根据上述本发明信息信息重放设备(包括其各个方面)上的计算机进行控制,该程序可使计算机起重放设备、显示输出设备、以及控制设备至少一部分的作用。
根据本发明的用于重放控制的计算机程序,通过从诸如ROM、CD-ROM、DVD-ROM、以及硬盘等等这样的其用于将计算机程序存储在其中/其上的记录介质中读取并且执行该计算机程序,或者通过经由通讯设备而将计算机程序下载到计算机中并使其运行,可相对容易的具体体现根据上述本发明的信息重放设备。
顺便说一下,根据本发明的用于重放控制的计算机程序还采用其与根据上述本发明信息记录介质的各个方面相应的各个方面。
根据本发明的用于录放控制的计算机程序用于对配置于根据上述本发明信息信息录放设备(包括其各个方面)上的计算机进行控制,该程序可使计算机起第一记录设备、第二记录设备、第三记录设备、重放设备、显示输出设备、以及控制设备至少一部分的作用。
根据本发明的用于录放控制的计算机程序,通过从诸如ROM、CD-ROM、DVD-ROM、以及硬盘等等这样的其用于将计算机程序存储在其中/其上的记录介质中读取并且执行该计算机程序,或者通过经由通讯设备而将计算机程序下载到计算机中并使其运行,可相对容易的具体体现根据上述本发明的信息录放设备。
顺便说一下,根据本发明的用于录放控制的计算机程序还采用其与根据上述本发明信息记录介质的各个方面相应的各个方面。
根据本发明的其包括有控制信号的数据结构具有:视频信息,该视频信息表示主视频;子视频信息,该子视频信息表示在主视频上可至少部分显示的子视频;以及子视频控制信息,该子视频控制信息包括(i)多类控制信息组分,用于以预先所设置的各种方法来对子视频信息进行显示控制以及(ii)类型表示信息,用于通过每个类型来表示控制信息组分的存在性或不存在性或者有效性或无效性。
根据其包括有本发明控制信号的数据结构,与根据上述本发明的信息记录介质相类似,例如可按照各种方法有效且快速的对其作为子图像的子视频信息执行显示控制,并且这最终可在主视频上对子视频进行各式各样的显示。
顺便说一下,其中包括有根据本发明控制信号的数据结构还采用其与根据本发明信息记录介质的各个方面相应的各个方面。
本发明的上述目的是通过计算机可读介质中的用于记录控制的计算机程序产品来实现的,该计算机程序切实的具体体现为配置在根据本发明上述信息记录设备(包括其各个方面)上的计算机可执行的程序指令,该程序可使计算机起第一记录设备、第二记录设备、以及第三记录设备至少一部分的作用。
本发明的上述目的是通过计算机可读介质中的用于重放控制的计算机程序产品来实现的,该计算机程序切实的具体体现为配置在根据本发明上述信息重放设备(包括其各个方面)上的计算机可执行的程序指令,该程序可使计算机起重放设备、显示输出设备、以及控制设备至少一部分的作用。
本发明的上述目的是通过计算机可读介质中的用于录放控制的计算机程序产品来实现的,该计算机程序切实的具体体现为配置在根据本发明上述信息录放设备(包括其各个方面)上的计算机可执行的程序指令,该程序可使计算机起第一记录设备、第二记录设备、第三记录设备、重放设备、显示输出设备、以及控制设备至少一部分的作用。
根据本发明的用于记录控制、重放控制、或者录放控制的计算机程序产品,通过从诸如ROM、CD-ROM、DVD-ROM、以及硬盘等等这样的其用于将计算机程序存储在其中/其上的记录介质中读取并且执行该计算机程序,或者通过经由通讯设备而将计算机程序下载到计算机中并使其运行,可相对容易的具体体现根据上述本发明的第一记录设备、第二记录设备、第三记录设备、重放设备、显示输出设备、以及控制设备的至少一部分。更具体地说,计算机程序产品是由计算机可读代码(或者计算机可读命令)构成的以使计算机起第一记录设备、第二记录设备、第三记录设备、重放设备、显示输出设备、以及控制设备的作用。
从下述实施例和示例中可显而易见的得知本发明的这些效果及其他优点。
具体实施方式
(信息记录介质)
参考图1至图13对本发明的信息记录介质的实施例进行说明。在这些实施例中,本发明的信息记录介质应用于其可进行记录(写入)并且进行重放(读取)的光盘。
首先,参考图1对实施例中的光盘的基本结构进行说明。图1的上半部是其具有多个区的光盘结构的总平面示意图,并且下半部是其与上部相对应的区域结构在径向上的示意图。
如图1所示,通过诸如磁光法和相变法这样的其可仅一次或者多次进行记录(写入)的各种记录方法来对光盘100进行记录。与DVD相类似,从绕着中心孔102的内圆周至外圆周,光盘100具有位于盘片主体记录面上的导入区104、数据区106、以及导出区108,所述盘片主体的记录面的直径大约为12cm。在每个区中,以中心孔102为中心而交替的形成了同轴形或者螺旋形沟槽轨道和岸台轨道。这些沟槽轨道是摆动的。此外,在这些轨道的一个上或者这两个轨道上形成了预制凹坑。顺便说一下,本发明并不局限于其具有上述这三个区的光盘。
接下来,参考图2来对记录在本实施例光盘上的传送流(TS)和节目流(PS)的结构进行说明。为了进行比较,图2(a)示意性的给出了传统DVD的MPEG 2节目流,图2(b)示意性的给出了MPEG 2传送流(TS)的结构。此外,图2(c)示意性的给出了本发明中的MPEG 2节目流的结构。
在图2(a)中,记录在传统DVD中的一个节目流仅包括沿着时间轴t的其作为主图像信息的视频数据的一个视频流,并且进一步包括其作为音频信息的音频数据的最多8个音频流以及其作为子图像信息的子图像数据的最多32个子图像流。也就是说,在任意时间tx所多路复用的视频数据仅与一个视频流相关。例如,与多个TV节目或者多个影片相对应的多个视频流不能同时包含在节目流之内。因为每个TV节目需要至少一个视频流,因此不可在只具有一个视频流的DVD的节目流格式中对多个TV节目进行多路复用并对其进行传送或者记录,以便对其包含有视频图像的已多路复用TV节目等等进行传送或记录。
在图2(b)中,记录在本发明光盘100中的一个传送流(TS)包括多个视频流,这多个视频流是其作为主图像信息的视频数据的基本流(ES),并且记一步包括多个音频流和多个子图像流,所述多个音频流是其作为音频信息的音频数据的基本流(ES),所述多个子图像流是其作为子图像信息的子图像的基本流(ES)。也就是说,在任意时间tx所多路复用的视频数据与多个视频流相关。例如,与多个TV节目或者多个影片相对应的多个视频流同时包含在传送流之内。因此,在具有多个视频流的传送流格式中,可对多个TV节目进行多路复用并且可对其进行传送或记录。然而,其采用现有传送流的数字广播不对子图像流进行传送。
在图2(c)中,记录在本发明光盘100上的一个节目流(PS)包括其作为主图像信息的视频数据的多个视频流,并且进一步包括其作为音频信息的音频数据的多个音频流以及其作为子图像信息的子图像数据的多个子图像流。也就是说,在任意时间tx所多路复用的视频数据与多个视频流相关。例如,其与多个TV节目或者多个影片相对应的多个视频流同时包括在节目流中。
顺便说一下,为了便于说明,在图2(a)至图2(c)中按照从上到下的顺序来排列视频流、音频流、以及子图像流。然而,该顺序不与如随后所描述的一个包接一个包的进行多路复用的顺序相对应。在传送流中,在概念上一个视频流、两个音频流、以及两个子图像流的集合例如与一个节目相对应。
上述实施例中的光盘100适用于对如图2(b)所示的传送流(TS)进行多记录,也就是说同时对多个节目进行记录。此外,代替该传送流或者除此之外,可将如图2(c)所示的节目流(PS)多记录在相同光盘100中。
接下来,参考图3和图10,对记录在光盘100上的数据结构进行说明。图3示意性的给出了记录在光盘100上的数据结构的示意图。图4示意性的给出了图3所示每个对象中的详细数据结构。图5和图6分别示意性的给出了图3所示每个播放列表(P列表)集合中的详细数据结构。图7示意性的给出了图6所示每个项的详细数据结构。图8示意性的给出了图4所示每个标题组分中的数据的逻辑结构。图9示意性的给出了在每个播放列表集合是由一个播放列表组成的情况下每个标题组分中的数据的逻辑结构。图10示意性的给出了图3所示每个对象中的详细数据结构。
在以下说明中,“标题”是指这样的重放单元,根据该重放单元可连续或者顺序的执行多个“播放列表”,并且该重放单元是诸如一个电影和一个TV节目这样的逻辑上的大组单元。“播放列表集合”是指一束“播放列表”。例如,可以是这样的一束播放列表,该播放列表在角度重放(angle reproduction)或者亲代重放(parentalreproduction)过程中可对其具有彼此可转换特定关系的多个内容信息进行重放,或者可以是这样的一束播放列表,该播放列表可对其与在相同时区内所广播的且集体所记录的多个节目有关的内容信息进行重放。或者,可以是这样的一束播放列表,该播放列表可对一个标题中的根据所需功能的例如根据信息重放系统所需的诸如高影象兼容性、显示分辨率、环绕扩音器兼容性、扩音器配置等等这样的视频性能或者音频性能所准备的各种内容信息进行重放。“播放列表”是用于对要对“对象”进行重放所需的信息进行存储的信息并且“播放列表”是由下述多个“项”组成的,所述每个项存储有其与对象的重放范围有关的信息以访问该对象。“对象”是其构成上述MPEG2传送流的内容的实体信息。
在图3中,光盘100具有其作为一逻辑结构的下列四个文件:一盘片信息文件110;一播放列表(P列表)信息文件120;一对象信息文件130;以及一对象数据文件140。该光盘100进一步具有一文件系统105以对这些文件进行管理。顺便说一下,尽管图3未直接给出排列在光盘100上的物理数据,但是可按照图3所示的排列与图1所示的另一排列相对应的方式来执行记录。也就是说,可将文件系统105等等在继记录在导入区104之后记录在数据记录区106中,并且进一步可将对象数据文件140等等记录在数据记录区106中。即使不存在有如图1所示的导入区104或导出区108,也可以构造出图3所示的文件结构。
盘片信息文件110是用于对与整个光盘100有关的一般信息进行存储的文件,并且其存储了盘片一般信息112、标题信息表格114、以及其他信息118。盘片一般信息112将标题的总数目等等存储在光盘100中。标题信息表格114包括标题指针114—1以及多个标题200(标题#1—#m),这多个标题的ID(标识)号或者记录地址是由标题指针114—1来表示的。在每个标题200中,记录每个标题的每个标题类型(例如连续重放类、分支型等等)或者其构成每个标题的播放列表(P列表)数目以作为逻辑信息。
更具体地说,例如,如图4所示,每个标题200是由标题一般信息200—1、多个标题组分200—2、以及其他信息200—5组成的。此外,每个标题组分200—2是由前命令200PR、指向播放列表集合的指针200PT、后命令200PS、以及其他信息200—6组成的。
作为根据本发明第一指针信息一示例的指针200PT表示存储在播放列表信息文件120中的播放列表集合126S的ID号并且根据其包括有指针200PT的标题组分200—2而与所重放的内容信息相对应。顺便说一下,指针200PT可以是这样的信息,该信息根据标题组分200—2来表示其与所要重放的内容信息相对应的播放列表集合126S的记录位置。作为根据本发明第一前命令一示例的前命令200PR表示在对下述内容信息进行重放之前所执行的命令,所述内容信息的重放顺序是由指针200PT所指定的一个播放列表集合126S来定义的。作为根据本发明第一后命令一示例的后命令200PS是在对下述内容信息进行重放之后所执行的命令,所述内容信息的重放顺序是由所述一个播放列表集合来定义的。包含在标题组分200—2之中的其他信息200—5例如包括下一信息以指定在对当前标题组分进行当前重放之后接下来所要重放的标题组分。
因此,当信息重放设备对信息记录介质进行重放时,通过根据指针200PT来访问播放列表集合126S并且执行控制以从播放列表集合126S中的多个播放列表126当中选择其与所希望的节目等等相对应的播放列表,可对所希望的内容信息进行重放以作为标题组分200—2。此外,对该标题组分200—2进行单独的或者顺序的重放这可重放一个标题200。此外,根据前命令200PR,可执行下述内容信息中的在进行重放之前所要执行的命令,所述内容信息的重放顺序是由指针200PT所指定的一个播放列表集合126S来定义的。此外,根据后命令200PS,可执行下述内容信息中的在进行重放之后所要执行的命令,所述内容信息的重放顺序是由指针200PT所指定的一个播放列表集合126S来定义的。后命令200PS可以是用于使内容信息分支的命令、用于选择下一标题等等的命令。另外,根据包含在其它信息200—5之中的“下一信息”,可对在当前所重放的标题组分200—2之后所要重放的下一标题组分200—2进行重放。
再次在图3中,播放列表信息文件120对其表示每个播放列表的逻辑结构的播放列表(P列表)信息表格121进行存储。将该表格121分成播放列表(P列表)管理信息122、播放列表(P列表)集合指针124、多个播放列表(P列表)集合126S(P列表集合#1—#n)、以及其他信息128。在该播放列表信息表格121中,按照播放列表集合编号的顺序来存储每个播放列表集合126S的逻辑信息。换句话说,用于存储每个播放列表集合126S的顺序是播放列表集合编号。此外,在上述标题信息表格114中,多个标题200可参考相同的播放列表集合126S。也就是说,即使在标题#q和标题#r使用相同播放列表集合#p的情况下,在标题信息表格114上也指向播放列表信息表格121中的播放列表集合#p。
如图5所示,播放列表集合126S包括有播放列表集合一般信息126—1、多个播放列表126(播放列表#1—#x)、项定义表格126—3、以及其他信息126—4。每个播放列表126包括多个播放列表组分126—2(播放列表组分#1—#y)以及其他信息126—5。此外,每个播放列表组分126—2包括前命令126PR、指向项的指针126PT、后命令126PS、以及其他信息126—6。
作为根据本发明第二指针信息一示例的指针126PT表示这样的项标识号,该项标识号是由其与所重放的内容信息相对应的项定义表126—3根据其包括有指针126PT的播放列表组分126—2来定义的。顺便说一下,指针126PT可以是由项定义表126—3所定义的项记录位置。如图6所示,就播放列表集合126S而言,在项定义表126—3中定义了多个项204。它们通常属于多个播放列表126。此外,将包含在播放列表集合126S之中的每个播放列表126的名称、诸如重放时间这样的UI(用户接口信息)、每个项定义表格126—3的地址信息等等记录为播放列表集合一般信息126—1。
再次在图5中,作为根据本发明第二前命令一示例的前命令126PR表示在对指针126PT所指定的一个项204进行重放之前所执行的命令。作为根据本发明第二后命令一示例的后命令126PS表示在对所述一个项204进行重放之后所执行的命令。包含在播放列表组分126—2之中的其他信息126—6包括下一信息以指定其与播放列表组分126—2的重放的下一重放有关的播放列表组分126—2。
如图7所示,项204是所显示的最小单元。在项204中,记录有其表示对象起始地址的“入点信息”以及其表示对象结束地址的“出点信息”。顺便说一下,这些“入点信息”和“出点信息”中的每一个均可直接或者间接的表示地址以作为重放时间标度上的时间周期或者时间点。在该图中,如果对“流对象#m”所指定的对象的多个ES(基本流)进行多路复用,那么指定项204意味着指定特定ES或者特定ES的组合。
如图8所示,标题组分200—2在逻辑上是由前命令200PR或者126PR、指针200PT所选择的播放列表集合126S、后命令200PS或者126PS、以及下一信息200—6N组成的。因此,根据系统中的诸如视频分辨率这样的任何可重放条件,执行从播放列表集合126S中选择播放列表126这样的处理。
然而,如图9所示,如果指针200PT所指定的播放列表集合仅仅是由一个播放列表组成的,也就是说如果由单播放列表126代替了图3所示的播放列表集合126S,那么标题组分200—2在逻辑上是由前命令200PR或126PR、在重放操作过程中所要重放的播放列表126、后命令200PS或126PS、以及下一信息200—6N组成的。在这种情况下,只要指定了用于重放的播放列表集合,那么就对单播放列表126进行重放,这与系统中的可重放条件无关。
再次在图3中,在对象信息文件130中,存储有在每个播放列表126中所构造的每个项在对象数据文件140中的存储位置(也就是重放对象的逻辑地址)和/或与该项的重放有关的各种属性信息。尤其是,在该实施例中,对象信息文件130存储如随后所详细描述的其包括有多个AU(相关单元)信息132I(AU#1—#q)的AU表格131、ES(基本流)映射表134、以及其他信息135。
对象数据文件140存储每个传送流(TS#1对象—TS#s对象)的多个TS对象142,也就是存储实际上所要重放的内容的实体数据。
顺便说一下,可将参考图3所讨论的四类文件进一步分成分别所存储的多个文件。由文件系统105来对这些文件进行管理。例如,可将对象数据文件140分成诸如对象数据文件#1、对象数据文件#2等等这样的多个文件。
如图10所示,将图3所示的其作为逻辑上可重放单元的TS对象142分成多个定位单元143,每个定位单元例如具有6kB的数据。定位单元143的报头与TS对象142的报头对齐。进一步将每个定位单元143分成多个源信息包144,每个源信息包具有192B的数据。该源信息包144是物理上可重放的单元,根据该源信息包144(即一个包接一个包)可对光盘100上的数据当中的至少视频数据、音频数据、以及子图像数据进行多路复用,并且还可以按照相同方式来对其他的信息进行多路复用。每个源信息包144包括控制信息145,该控制信息145具有4B的数据以用于对重放进行控制,该控制信息例如是其表示TS(传送流)包在重放时间标度上的重放开始时间点的信息包到达时间标记等等,并且每个源信息包144包括TS包146,该TS包146具有188B的数据。TS包146(还被称为“TS包负载”)的报头部分具有一包报头146a。将视频数据打包成“视频包”、将音频数据打包成"音频包"、或者子图像数据打包成“子图像包”,或者对其他数据进行打包。
接下来,参考图11和图12,说明通过图4所示的TS包146来对其具有图2(b)所示的传送流格式的视频数据、音频数据、子图像数据等等进行多记录。图11从概念上给出了以横轴作为时间轴来对位于上部的节目#1(PG1)的基本流(ES)以及位于中部的节目#2(PG2)的基本流(ES)进行多路复用以形成这两个节目(PG 1 & PG 2)的传送流(TS)的示意图。图12从概念上给出了在一个传送流(TS)中所多路复用的其作为沿着时间而排列的信息包的TS包的图像。
如图11所示,通过沿着时间轴来离散的排列通过对节目#1的视频数据进行打包所获得的TS包146可形成节目#1(位于上部)的基本流。通过沿着时间轴来离散的排列通过对节目#2的视频数据进行打包所获得的TS包可形成节目#2(位于中部)的基本流。此后,对这些TS包146进行多路复用以便形成这两个节目的传送流(下部)。顺便说一下,为了便于说明,图11中省略了下述,即如图2(b)所示,与节目#1的基本流相类似,可对通过对音频数据进行打包所获得的TS包所构成的基本流和/或通过对子图像数据进行打包所获得的TS包所构成的子图像流进行多路复用。除此之外,与节目#2的基本流相类似,可对通过对音频数据进行打包所获得的TS包所构成的基本流和通过对子图像数据进行打包所获得的TS包所构成的子图像流进行多路复用。
如图12所示,在该实施例中,如此所多路复用的多个TS包146形成了一个TS流。此后,利用所添加的诸如包到达时间标记等等这样的信息,将处于多路复用格式的多个TS包146多记录在光盘100上。顺便说一下,在图12中,“组分(i0j)”表示由其构成了节目#i(i=1,2,3)的数据所组成的TS包146,其中j(j=1,2,...)是其构成了节目的每个流的序列号。将该(i0j)定义为一信息包ID,该信息包ID是每个基本流的TS包146的标识号。使在相同时间点上所多路复用的多个TS包146的包ID固定为一固有值,以便即使在相同时间点上对多个TS包146进行多路复用,也可彼此区分这多个TS包146。
此外,在图12中,还通过TS包146单元来对PAT(节目相关表格)以及PMT(节目映射表)打包并对其进行多路复用。它们当中的PAT存储其表示多个PMT包ID的一表格。尤其是,如图12所示,MPEG2标准定义了PAT,以便(000)作为预定包ID。也就是说,在在相同时间点上所多路复用的多个包当中,可对通过对PAT打包所获得的TS包146进行检测以作为其包ID为(000)的TS包146。PMT存储其表示在一个或者多个节目中存储每个节目的每个基本流的包ID的一表格。可将任意的包ID施予PMT,但是其包ID是由具有上述包ID(000)的可检测PAT来表示的。因此,在相同时间点上所多路复用的多个包当中,根据PAT可检测通过对PMT进行打包所获得的TS包146(即图12中的其被施予了包ID(100)、(200)、以及(300)的TS包146)
在数字的传输图12所示传送流的情况下,调谐器参考由此所构造的PAT和PMT并且从而提取与所希望的基本流相对应的多路复用包并对所提取的包进行解码。
在这个实施例中,存储在图10所示TS对象142中的TS包146包括这些PAT和PMT包。换句话说,当对如图12所示的传送流进行传输时,将所传输的流直接记录在光盘100上,这是很大的优点。
此外,在这个实施例中,当对光盘100进行重放时,不参考由此所记录的这些PAT和PMT。反之,参考如图3所示的并且随后所详细描述的AU表格131及ES映射表134,这可有效的执行重放并且适用于复杂的多影象重放等等。为此,在这个实施例中,以AU表格131和ES映射表134的格式而将进行解码或记录时通过参考PAT和PMT所获得的基本流与信息包之间的关系存储在对象信息文件130中而无需进行打包或者多路复用。
接下来,参考图13,对光盘100上的数据的逻辑结构进行说明。图13示意性的给出了光盘100上的数据的逻辑结构示意图,其集中于从逻辑层进展为对象层或者实体层。
在图13中,将诸如一个电影或者一个TV节目这样的其是逻辑大单元的一个或多个标题200记录在光盘100中。每个标题200包括一个或多个标题组分200—2。每个标题组分200—2在逻辑上是由多个播放列表集合126S组成的。在每个标题组分200—2中,多个播放列表集合126S具有顺序结构或者分支结构。
顺便说一下,在简单的逻辑结构情况下,一个标题组分200是由一个播放列表集合126S组成的。此外,一个播放列表集合126S是由一个播放列表126组成的另一方面,多个标题组分200—2或者多个标题200可参考一个播放列表集合126S。
每个标题播放列表126在逻辑上是由多个项(播放项)204构成的。在每个播放列表126中,多个项204可具有顺序结构或者分支结构。另一方面,多个播放列表126可参考一个项204。记录在项204上/中的上述入点信息和出点信息在逻辑上指定了TS对象142的重放范围。此后,参考在逻辑上所指定的重放范围的对象信息130d并且从而通过最终的文件系统来在物理上指定TS对象142的重放范围。在这里,对象信息130d包括诸如要在TS对象142中进行数据搜索所需的TS对象142的属性信息、ES地址信息134d等等这样的各种信息以对TS对象142进行重放(顺便说一下,图3所示的ES映射表134包括多个ES地址信息134d)。
此后,如下所述当信息录放设备对TS对象142进行重放时,从项204和对象信息130d中获得TS对象142中的所要重放的物理地址,以便对所期望的基本流进行重放。
顺便说一下,所示的在图13对象信息之内的其包括有多个ES地址信息134d的EP(入口通路)映射在这里表示其内列有AU表格131和ES映射表134的一对象信息表格。
因此,在该实施例中,记录在项204上/中的入点信息和出点信息以及记录在对象信息130d的ES映射表134(参见图3)中的ES地址信息134d可按照重放顺序而使逻辑层与对象层相关以便对基本流进行重放。
如上所述,在该实施例中,对TS包146单元进行多路复用并将其记录在光盘100上。因此,可将其包括有图2(b)所示多个基本流的传送流记录在光盘100上。在该实施例中,在将数字广播记录在光盘100上的情况下,可在记录速率的限制范围内同时记录多个节目。然而,在这里采用这样的记录方法,即在该方法中对多个节目进行多路复用并对其记录以用于一个TS对象142。现在,对其可执行该记录处理的信息录放设备的实施例进行说明。
(信息录放设备)
接下来,参考图14至图19对本发明的信息录放设备的实施例进行说明。在这里,图14给出了信息录放设备的方框图,并且图15至图19给出了其操作流程。
在图14中,将信息录放设备500大致分成一重放系统和一记录系统,该信息录放设备500可将信息记录在上述光盘100上,并且可对记录在其上/其中的信息进行重放。在这个实施例中,信息录放设备500用于记录和重放。然而,根据本发明的信息记录设备的一实施例基本上是由信息录放设备500的记录系统构成的,并且根据本发明的信息重放设备的一实施例基本上是由信息录放设备500的重放系统构成的。
该信息录放设备500具有:一光学拾取器502;一伺服单元503;一主轴电机504;一解调器506;一多路分离器508;一视频解码器511;一音频解码器512;一子图像解码器513;一加法器514;一静止图像解码器515;一系统控制器520;一存储器530;一存储器540;一存储器550;一调制器606;一格式化器608;一TS对象产生器610;一视频编码器611;一音频编码器612;以及一子图像编码器613。该系统控制器520包括一文件系统/逻辑结构数据产生器521以及一文件系统/逻辑结构数据读取器522。此外,存储器530和其可使用户输入诸如标题信息等等的用户接口720与系统控制器520相连。
在这些组件当中,解调器506、信号分离器508、视频解码器511、音频解码器512、子图像解码器513、加法器514、静止图像解码器515、存储器540、以及存储器550主要构成了重放系统。另一方面,在这些组件当中,调制器606、格式化器608、TS对象产生器610、视频编码器611、音频编码器612、以及子图像编码器613主要构成了该记录系统。重放系统和记录系统一般共用光学拾取器502、伺服单元503、主轴电机504、系统控制器520、存储器530、以及用于使用户输入诸如标题信息等等的用户接口720。此外,对于记录系统而言,配备有TS对象数据源700(或者PS对象数据源700,或者诸如位图数据、JPEG数据等等这样的静止图像数据源700)、视频数据源711、音频数据源712、以及子图像源713。此外,配置于系统控制器520上的文件系统/逻辑结构数据产生器521主要用于记录系统,并且文件系统/逻辑结构数据读取器522主要用于重放系统。
光学拾取器502使诸如激光束这样的具有第一功率的光束LB照射在光盘100上以作为重放的读取光,并且使所改变的具有第二功率的光束LB照射在光盘100上以作为记录的写入光。在重放和记录的过程中,在系统控制器520所输出的控制信号Sc1的控制之下,伺服单元503执行光学拾取器502的焦点伺服、跟踪伺服等等以及主轴电机504的主轴伺服。在伺服单元503的主轴伺服的控制之下,主轴电机504使光盘以预定的速度旋转。
(i)记录系统的结构和操作
接下来,参考图14至图18,对每种情况下的其构成信息录放系统500的记录系统的每个组件的特定结构和操作进行说明。
(i—1)利用已产生的TS对象的情况
参考图14和图15对这个情况进行说明。
在图14中,TS对象数据源700是由诸如录像磁带及存储器这样的用于存储TS对象数据D1的存储设备构成的。
首先在图15中,通过用户接口720,将下述每个标题信息(例如播放列表内容等等)输入到系统控制器520中以作为诸如标题信息这样的用户输入I2,所述每个标题信息是利用TS对象数据D1而逻辑的构造在光盘100上。此后,系统控制器520通过用户接口720输入诸如标题信息这样的用户输入I2(步骤S21:是,以及步骤S22)。在这种情况下,在来自系统控制器520的控制信号Sc4的控制之下,用户接口720通过标题菜单屏幕来执行诸如选择这样的输入操作以响应所要记录的内容。顺便说一下,如果已执行了用户输入(步骤S21:否),那么省略这些处理。
此后,在来自系统控制器520的用于表示数据读的控制信号Sc8的控制之下,TS对象数据源700输出TS对象数据D1。此后,系统控制器520输入来自TS对象源700的TS对象数据D1(步骤S23),并且根据与视频数据打包在一起的PAT、PMT等等来执行对TS对象数据D1的数据阵列的分析(例如分析记录数据长度等等)、对每个基本流结构的分析等等(例如知道ES_PID(基本流/包标识号))(步骤S24),这是由于文件系统/逻辑结构数据产生器521中的TS分析特征。
接下来,系统控制器520根据对TS对象数据D1的数据阵列和每个基本流的分析结果以及诸如所输入的标题信息这样的用户输入I2而使文件系统/逻辑结构数据产生器521产生了磁盘信息文件110、播放列表信息文件120、对象信息文件130、以及文件系统105(参看图3)以作为逻辑信息文件数据D4。存储器530用于产生该逻辑信息文件数据D4。
顺便说一下,显而易见的并且可以想到的是可以做出这样的改进,即预先配备与每个基本流的结构信息以及TS对象数据D1的数据阵列有关的数据,所有这种改变仍属于该实施例的范围之内。
在图14中,格式化器608是用于使数据阵列格式化以将TS对象数据D1和逻辑信息文件数据D4存储到光盘100上。更具体的说,格式化器608具有一开关Sw1和一开关Sw2,并且由来自系统控制器520的开关控制信号Sc5来控制其切换。当对TS对象数据D1格式化时,它使开关Sw1与①侧相连并且使开关Sw2与①侧相连以便输出来自TS对象数据源700的TS对象数据D1。顺便说一下,由来自系统控制器520的控制信号Sc8来执行对TS对象数据D1的传输控制。另一方面,当对逻辑信息文件数据D4格式化时,由来自系统控制器520的开关控制信号Sc5来对格式化器608进行切换控制,并且使开关Sw2与②侧相连以便输出逻辑信息文件数据D4。
在图15的步骤S26中,在如上所构造的格式化器608的切换控制之下,通过格式化器608输出(i)步骤S25中的来自文件系统/逻辑结构数据产生器521的逻辑信息文件数据D4或者(ii)输出来自TS对象数据源700的TS对象数据D1(步骤S26)。
将来自格式化器608的选择输出传送到调制器606以作为盘片图像数据D5、由调制器606对其进行调制、并且通过光学拾取器502将其记录在光盘100上(步骤S27)。在这种情况下,系统控制器520还执行盘片记录控制。
此后,如果在步骤S25中所产生的逻辑信息文件数据D4以及相应TS对象数据D1仍没有完全被记录,那么操作流程回到步骤S26以继续进行记录(步骤S28:否)。顺便说一下,逻辑信息文件数据D4和相应对象数据D1的记录顺序不存在有优先权。
另一方面,如果两者都已经被记录,则根据存在有结束命令或者不存在有结束命令来判断对光盘100的记录是否结束(步骤S29)。如果没有结束(步骤S29:否),那么操作流程回到步骤S21以继续该记录。另一方面,如果结束了(步骤S29:是),则结束一系列的记录处理。
如上所述,在利用已备TS对象的情况下,信息录放设备500执行记录处理。
顺便说一下,图15中的示例给出了在步骤S25配备了逻辑信息文件数据D4之后,在步骤S26输出逻辑信息文件数据D4以及相应的TS对象数据D1。然而,还可在步骤S25之前输出TS对象数据D1和/或将TS对象数据D1记录到光盘100上,以便在该记录之后或者与该记录相并行的产生逻辑信息文件数据D4并且对其进行记录。
另外,可使用PS对象数据源或者静止图像数据源以代替TS对象数据源700。在这种情况下,对PS对象数据、诸如位图数据、JPEG数据等等这样的静止图像数据而不是TS对象数据D1执行与上述TS对象数据D1相同的记录处理。此外,代替TS对象142,将PS对象数据或者静止图像数据存储在对象数据文件140中。此后,在系统控制器520的控制之下产生了与PS对象数据或者静止图像数据有关的各种逻辑信息并且将其存储在盘片信息文件110、播放列表信息文件120、对象信息文件130等等中。
(i-2)接收并且记录空中传送流的情况
参考14和图16对该情况进行说明。顺便说一下,在图16中,与图15相同的步骤具有相同的步骤附图标记,并且必要时省略对其的说明。
再次,在这种情况下,如同上述“利用已备TS对象的情况”,执行相似的处理。因此,在下文中集中于对与该情况的不同之处进行说明。
在接收并且记录空中传送流的情况下,TS对象数据源700具有一接收器(机顶盒),该接收器用于接收空中的数字广播,例如接收TS对象数据D1,并且将其实时的传送到格式化器608(步骤S41)。同时,将下述接收信息D3(即与通过接收器以及系统控制器520的接口所传送的数据相对应的信息)输入到系统控制器520并且将其存储在存储器530中(步骤S44),所述信息D3包括在接收过程中所解码的节目结构信息以及下述ES_PID信息。
同时,在格式化器608的切换控制之下,将输出到格式化器608的TS对象数据D1输出到调制器606(步骤S42),并且将其记录到光盘100上(步骤S43)。
随着这些操作,利用包含在下述接收信息D3之内的节目结构信息以及ES_PID信息,文件系统/逻辑结构数据产生器521制备了逻辑信息文件数据D4(步骤S24和步骤S25),上述接收信息D3是在接收过程中所输入的并且存储在存储器530中。此后,在结束了记录一系列TS对象数据D1之后,又将该逻辑信息文件数据D4记录到光盘100上(步骤S46和步骤S47)。顺便说一下,可在步骤S43之后执行这些步骤S24和步骤S25。
此外,如有必要(例如在对标题的一部分进行编辑等等的情况下),通过将来自用户接口720的标题信息的用户输入I2等等添加到其存储在存储器530中的节目结构信息以及ES_P1D信息上,可通过系统控制器520来配备逻辑信息文件数据D4并且进一步将其记录到光盘100上。
如上所述,在接收空中传送流并且实时的对其进行记录的情况下,信息录放设备500执行记录处理。
顺便说一下,如果将在广播时所获得的所有接收数据一次存储到存档设备中,并且此后,如果其用作TS对象源700,那么执行“与利用已备TS对象的情况”相同的处理。
(i-3)对视频数据、音频数据、以及子图像数据进行记录的情况参考图14和图17对该情况进行说明。顺便说一下,在图17中,与图15相同的步骤具有相同的步骤附图标记,并且必要时省略对其的说明。
在对预先所分别配备的视频数据、音频数据、以及子图像数据进行记录的情况下,视频数据源711、音频数据源712、以及子图像数据源713分别具有诸如录像带和存储器这样的存储器,并且分别存储视频数据DV、音频数据DA、以及子图像数据DS。
由下述控制信号Sc8来控制这些数据源,所述控制信号发出了用于从系统控制器520中读取数据的一指令,并且这些数据源将视频数据DV、音频数据DA、以及子图像数据DS分别传送到视频编码器611、音频编码器612、以及子图像编码器613(步骤S61)。此后,视频编码器611、音频编码器612、以及子图像编码器613执行预定类型的编码处理(步骤S62)。
由来自系统控制器520的控制信号Sc6来控制TS对象产生器610并且TS对象产生器610按照这种方式将所编码的数据转换成其构成了传送流的TS对象数据(步骤S63)。在这种情况下,将每个TS对象数据的数据阵列信息(例如记录数据长度等等)以及每个基本流的结构信息(例如如随后所述的ES_PID等等)作为信息I6而从TS对象产生器610传送到系统控制器520并且将其存储到存储器530中(步骤S66)。
另一方面,将TS对象产生器610所产生的TS对象数据传送到格式化器608的开关Sw1的②侧。换句话说,当对来自TS对象产生器610的TS对象数据进行格式化时,由来自系统控制器520的开关控制信号Sc5来对格式化器608进行切换控制以使开关Sw1转换到②侧并且使开关Sw2转换到①侧,从而输出TS对象数据(步骤S64)。此后,通过调制器606而将该TS对象数据记录到光盘100上。
随着这些操作,利用输入到存储器530中的其作为信息I6的每个TS对象数据的数据阵列信息以及每个基本流的结构信息,文件系统/逻辑结构数据产生器521制备逻辑信息文件数据D4(步骤S24和步骤S25)。此后,在结束记录一系列的TS对象数据D1之后,又将逻辑信息文件数据D4记录到光盘100上(步骤S67和步骤S68)。顺便说一下,可以在步骤S65之后进行步骤S24和步骤S25。
此外,如有必要,(例如在对标题的一部分进行编辑的情况下),通过将来自用户接口720的诸如标题信息等等这样的用户输入I2添加到其存储在存储器530中的这些信息上,可通过文件系统/逻辑结构产生器521来制备逻辑信息文件数据D4并且另外将其记录到光盘100上。
如上所述,在对预先所分别制备的视频数据、音频数据、以及子图像数据进行记录的情况下,信息录放设备500执行记录处理。
顺便说一下,即使当对用户所具有的任意内容进行记录时,该记录处理也是适用的。
(i-4)通过创作(authoring)来记录该数据的情况
参考图14和图18来对该情况进行说明。顺便说一下,在图18中,与图15相同的步骤具有相同的步骤附图标记,并且必要时省略对其的说明。
在这种情况下,通过兼备上述三种情况下的三类记录处理,创作系统预先产生了TS对象、逻辑信息文件数据等等(步骤S81),并且此后直到在格式化器608中所执行的切换控制时才结束该处理(步骤S82)。此后,将通过该操作所获得的信息传送到调制器606以作为盘片图像数据D5(步骤S83),该调制器装配在原版唱片切削机的前面和/或后面,并且该切削机制备了原版唱片(步骤S84)。
(ii)重放系统的结构与操作
接下来,参考图14和图19对其构成了信息录放设备500中的重放系统的每个组件的特定结构和操作进行说明。
在图14中,通过用户接口720将从光盘100所要重放的标题、其重放条件等等输入到系统控制器520中以作为诸如标题信息等等这样的用户输入I2。在这种情况下,在来自系统控制器520的控制信号Sc4的控制之下,通过用户接口720可实现诸如标题菜单屏幕上的选择处理这样的其适用于所要重放的内容的输入处理。
对此做出响应,系统控制器520根据光盘100来控制盘片重放,并且光学拾取器502将读信号S7传送到解调器506。
解调器506根据该读信号S7来对记录在光盘100上的记录信号进行解调,并且将其输出以作为所解调的数据D8。将包含在已解调数据D8之中的其作为未多路复用信息部分的逻辑信息文件数据(即图3所示的文件系统105、盘片信息文件110、P列表信息文件120、以及对象信息文件130)提供给系统控制器520。根据该逻辑信息文件数据,该系统控制器520执行诸如确定重放地址以及控制光学拾取器502的处理这样的各种重放控制。
另一方面,根据是包括有TS对象数据以作为已解调数据D8之中的已多路复用信息部分,还是包括有静止图像数据,还是包括有这两者,在来自系统控制器520的控制信号Sc10的控制之下,将转换开关Sw3转换到①侧(多路分离器508侧)或者转换到②侧(静止图像解码器515侧)。因此,可有选择的将TS对象数据提供给多路分离器508,并且可有选择的将静止图像数据提供给静止图像解码器515。
此后,就所包含的其作为已解调数据D8中的已多路复用信息部分的TS对象数据而言,在系统控制器520的控制信号Sc2的控制之下,多路分离器508对TS对象数据进行多路分离。在这里,当在系统控制器520的重放控制之下结束对重放位置地址的访问时,传送控制信号Sc2以开始进行多路分离。
分别对来自多路分离器508的视频包、音频包、子图像包进行传送并分别将其提供给视频解码器511、音频解码器512、以及子图像解码器513。此后,分别对视频数据DV、音频数据DA、以及子图像数据DS进行解码。在这种情况下,通过存储器540将子图像数据DS提供给加法器514。如果需要,那么在系统控制器520的控制信号Sc5的控制之下,有选择的或者以预定时间输出来自存储器540的子图像数据DS,以便将其叠加在视频数据DV上。也就是说,与直接叠加子图像解码器513所输出的子图像数据这样的情况相比,很容易对叠加时间进行控制,或者很容易判断对叠加的需要。例如,在控制信号Sc5的输出控制之下,可选择是在主图像上显示其使用子图像的字幕还是显示其使用子图像的菜单屏幕。
顺便说一下,虽然分别包括有下述信息包以作为解调数据D8的一部分,所述信息包是通过对包含在图6所示传送流之中的PAT或PMT进行打包所获得的,然而多路分离器508丢弃或者抛弃了它们。
由来自系统控制器520的控制信号Sc3来控制加法器514,该控制信号Sc3发出了进行混合的一指令,并且使在视频解码器511和子图像解码器513中所分别解码的视频数据DV和子图像数据DS在预定时间混合或者叠加。该结果作为视频输出而从信息录放设备500输出到例如电视监视器。
另一方面,将在音频解码器512中所解码的音频数据DA作为音频输出而从信息录放设备500输出到例如外接扬声器。
在静止图像数据包含在已解码数据D8之中的情况下,代替重放操作或者对视频数据DV或子图像数据DS进行处理或者除此之外,通过系统控制器520的控制信号Sc10所控制的转换开关Sw3而将静止图像数据提供给静止图像解码器515。此后,在系统控制器520的控制信号Sc11控制之下,通过转换开关Sw4而将诸如所解码的位图数据、JPEG数据等等这样的静止图像数据直接添加到加法器514上。或者,通过转换开关Sw4可将其临时存储在存储器550中。在系统控制器520的控制信号Sc12的控制之下,可有选择的或者以预定时间输出来自存储器550的静止图像数据,并且此后通过转换开关Sw5将其提供给加法器514。因此,如果需要,那么将静止图像叠加在视频数据DV或子图像数据DS上。也就是说,与直接叠加静止图像解码器515所输出的静止图像数据这样一种情况相比较,很容易控制叠加时间或者很容易判断对叠加的需要。例如,在控制信号Sc12的输出控制之下,可选择是在主图像还是在子图像上显示其诸如菜单屏幕或视窗屏幕这样的其使用静止图像数据或静止图像作为背景图像的静止图像。
另外,在系统控制器520的控制信号Sc13的控制之下,借助于其被转换到②侧的转换开关Sw5而通过另一路径(未给出)输出静止图像数据。或者,不输出来自其被转换到②侧的转换开关Sw5的静止图像数据。
在这里,参考图19的流程图来对系统控制器520的重放处理例程的特定示例进行说明。
在图19中,假定初始条件为系统控制器520以及位于系统控制器520之内的文件系统/逻辑结构数据读取器522已结束了通过文件系统105来对重放系统中的光盘100的识别以及对卷宗结构及文件结构的识别(参见图3)。在这里,对从盘片信息文件110中的盘片一般信息112中获得了所有标题的总数目并且此后从它们当中选定或者选择了一个标题之后的操作流程进行说明。
首先,通过用户接口720执行对标题的选定或者选择(步骤S211)。对其进行响应,系统控制器520从文件系统/逻辑结构数据读取器522的读取结果中获得了与重放顺序有关的信息。顺便说一下,在标题200的选择过程中,借助于用户利用遥控器等等的外部输入操作,可从其组成了标题200的整个标题组分200—2中选择所期望的标题组分200—2(参见图4),或者可根据对信息录放设备500所调整的系统参数等等来自动选择一个标题组分200—2。
此后,可获得下述多个播放列表126的内容,所述多个播放列表126组成了其与所选标题200(标题组分200—2)相对应的播放列表集合126S。在这里,作为在逻辑层的处理,获得了这样的信息,该信息与每个播放列表126的结构以及其组成了每个播放列表(参见图5、图6、以及图13)的每个项有关(步骤S212)。
此后,从在步骤S212所获得的多个播放列表126中获得了所要重放的播放列表126的内容。例如,在这里,从播放列表#1开始重放,并且获得了相应播放列表126的内容(步骤S213)。播放列表126的内容可以是通过步骤S213的获得处理所获得的一个或多个播放列表组分126—2(参见图5)。
此后,执行其包含在播放列表126之中的前命令126PR(参见图5)(步骤S214)。顺便说一下,对于前命令126PR而言可从下述多个播放列表126中选择一个,所述多个播放列表组成了其与多个播放列表126具有某种关系的播放列表集合126S。如果其组成了播放列表126的播放列表组分126—2不具有前命令126PR,那么可省略该处理。
此后,根据在步骤S213所获得的播放列表126所标识的项204(参见图5至图7)来确定所要重放的TS对象142(参见图3和图10)。更具体地说,根据该项204,可获得其与作为重放目标的TS对象142有关的对象信息文件130(参见图3)并且可识别所要重放的TS对象142的流编号、地址等等。
顺便说一下,在该实施例中,还可获得下述AU(相关单元)信息132I以及PU(显示单元)信息302I以作为存储在对象信息文件130中的信息。根据这些信息,可使上述逻辑层与对象层相关(参见图13)。此后,实际上开始对在步骤S215所确定的TS对象142进行重放。也就是说,根据逻辑层的处理,开始对象层的处理(步骤S216)。
在TS对象142的重放过程中,判断是否存在其组成了所要重放的播放列表126的下一项204(步骤S217)。此后,只要在存在下一项204的情况下(步骤S217:是),处理返回步骤S215以重复上述确定以及对TS对象142的重放。
另一方面,在步骤S217的判断,如果判断出不存在下一项204(步骤S217:否),那么执行其与当前所执行的播放列表126相对应的后命令126PS(参见图5)(步骤S218)。顺便说一下,如果其组成了播放列表126的播放列表组分126—2不具有后命令126PS,那么忽略该处理。
此后,判断是否存在有其组成了所选标题200的下一播放列表126(步骤S219)。如果存在(步骤S219:是),那么处理返回步骤S213以重复获得所要重放的播放列表126这样的处理以及后续处理。
另一方面,在步骤S219的判断,如果判断出不存在下一播放列表126(步骤S219:否),也就是说如果已完全对其与在步骤S211所选择的标题200相对应的所要重放的所有播放列表126进行了重放,那么结束一系列重放操作或者处理。
如上所述,实施例中的信息录放设备500对光盘100进行重放。
尤其是在该实施例中,(i)就上述记录系统的结构和操作而言,记录对象数据文件140以便下述子图像流或者控制信息流包括SP数据(静止图像数据)和SP控制信息以对子图像数据的各种显示进行控制,所述子图像流或者控制信息流即就是与子图像有关的基本流。
尤其是在该实施例中,(ii)就重放系统的结构和操作而言,当在步骤S215和S216确定出对象并对其进行重放时,对记录在子图像流或者控制信息流中的SP数据以及SP控制信息进行重放,并且由此可利用子帧来实现其包括有子图像的运动控制、阴影加边控制、高亮按钮控制等等的各种显示控制。随后将对子图像的这些各种显示控制进行讨论。
(播放列表集合中的播放列表的选择方案)
在该实施例中,从包含在所重放播放列表信息文件120之中的播放列表集合126S中适当的选择其与所希望的内容信息相对应的播放列表126。
如果包含在标题组分200—2之中的前命令200PR(参见图4)具有这样一列播放列表选择命令,即在该列播放列表选择命令中记录有每个播放列表126的选择条件,那么根据选择条件来执行对播放列表的选择。可根据添加到其存储在播放列表集合126S中的属性信息(例如用于表示其与播放列表有关的内容信息的属性的信息,其包括有视频性能的视频分辨率、是否渐进或者交织、视频编解码器、音频信道号、音频编解码器等等)来执行对播放列表的选择。或者,根据用于对每个播放列表的选择条件进行存储的播放列表集合控制信息来执行对播放列表的选择。由于这些选择,例如,可选择其与所希望的内容信息相对应的所希望的节目、所希望的亲代块、所希望的角度块等等。或者,例如,可实现对播放列表的选择,以便可选择信息重放系统可显示的播放列表,并且可完全发挥信息重放系统的视频重放性能或者音频重放性能。
(子图像的各种显示控制)
现在,参考图20至图47,对其利用SP数据和SP控制信息来对子图像进行各种显示控制进行说明。
首先,参考图20至图22,对执行子图像的这些各种显示控制所使用的子图像数据的结构和控制进行充分的说明。随后参考从图23的附图对它们当中的SP控制信息进行详细的讨论。图20(a)从概念上给出了用于对子图像数据进行控制的SP控制信息的数据结构的特定示例,并且图20(b)从概念上给出了其包括有下述SP数据的SP数据结构的特定示例,所述SP数据即就是其构成了子图像数据主体的静止图像数据。图21示意性的给出了其是由SP控制信息和SP数据结构所组成的三类子图像结构。图22示意性的给出了沿着重放时间标度的SPD流与多个SCP流之间的关系。
在该实施例中,在图14中,临时将子图像解码器513所解码的子图像数据记录在其作为一缓冲器的存储器540中。此后,在系统控制器520的控制信号Sc5的控制之下读取包含在临时所记录的子图像数据之中的SP数据(静止图像数据)和SP控制数据信息(静止图像控制数据)的至少一个。此后,通过使SP控制信息作用于SP数据,执行静止图像显示以作为所有的或者部分视频输出。
如图20(a)所示,SP控制信息721具有SCP报头和SF控制参数。“SCP报头”是由SP数据标识符构成的以指定其与SP控制信息721的控制对象相对应的SP数据、用于表示SP数据的记录位置的信息、以及其他信息组成的。“SF控制参数”是由多个参数构成的以对下述每个子帧单元(SF单元)的SP数据进行控制,所述每个子帧单元是所剪切图像的一部分以作为由SP数据所定义的一图像的至少一部分。更具体地说,“SF控制参数”包括这样的参数,该参数通过PTS(表示时间标记)等等来表示SF数据的开始时间点或者显示结束时间点。进一步更具体地说,“SF控制参数”包括各种参数以表示诸如显示时间、子图像的剪切范围或者其显示位置、标度、旋转等等这样的各种条件的条件。
如图20(b)所示,SP数据结构722具有结构信息和SP数据(静止图像数据的主体或者实体)。“结构信息”是由用于标识或指定SP数据的标识符以及诸如SP数据的长度这样的其他信息构成的。“SP数据”例如具有以JPEG格式或者其受到行程编码的位映射数据格式的图像数据等等。
因此,当对子图像数据进行重放时,根据图20(a)所示的SF控制参数,利用子帧来对通过剪切掉图20(b)所示SP数据的至少一部分所获得的每个子帧单元执行各种重放控制。
如图21所示,将SP控制信息721和SP数据结构722打包成多个TS包146(参见图10)并对其进行多路复用。用于将子图像结构中的SP控制信息721的报头部分存储在其中的TS包146被称为“SCP”并且用于将子图像结构中的SP数据结构722的报头部分存储在其中的TS包146被称为“SPD”。
如图21(a)所示,其包括有SCP的SP控制信息721和SP数据结构722被认为是一个子图像结构并将其分成多个TS包146。如图21(b)所示,其包括有SCP的SP控制信息721被认为是一个子图像结构并将其分成多个TS包146。如图21(c)所示,其包括有SPD的SP数据结构722被认为是一个子图像结构并将其分成多个TS包146。
在该实施例中,例如,就记录在SPD流上的SP数据结构中的SP数据而言,对记录在其与SPD流不同的SCP流上的SP控制信息进行操作,由此执行对静止图像的重放控制。在这种情况下,就一个SPD流而言仅存在一个或多个进行操作的SCP流。将这两类流记录在相互不同的基本流上这可进行有效的重放控制。此外,就一个SPD流上的SP数据而言,对多个SCP流上的多个SP控制信息进行操作这可进行更有效的重放控制。
更具体地说,如图22所示,在“ES_PID=200”的视频流(视频1)重放过程中的时间点t11,开始读取“ES_PID=201”的SPD流上的SP数据(SPD1),并且将其存储在信息记录/重放设备500的存储器540中(参考图14)。此后,对所存储的SP数据进行存储直到例如所设置的结束时间点,或者对其进行存储直到开始读取下一子图像。
在图22中,在“ES_PID=202”的SCP流(SCP1)上,在时间点t21、时间点t22、时间点t23、以及时间点t24分别提供了SCP#1a、SCP#1b、SCP#1c、以及SCP#1d。在“ES_PID=203”的SCP流(SCP2)上,在时间点t31、时间点t32、以及时间点t33分别提供了SCP#2a、SCP#2b、以及SCP#2c。在“ES_PID=204”的SCP流(SCP3)上,在时间点t41、时间点t42、时间点t43、以及时间点t44分别提供了SCP#3a、SCP#3b、SCP#3c、以及SCP#3d。
然而,除了对静止图像进行这种重放控制之外,还可根据子图像流上所记录的子图像数据结构中的SP数据来对记录在相同流上的子图像结构中的SP控制信息进行操作,从而执行对静止图像的重放控制。也就是说,可将SP控制信息721和SP数据结构722记录成仅仅一个子图像流,从而对SP控制信息721进行操作以成为SP数据结构722。
在任何情况下,通过多次共用或使用所提供的其作为具有大数据量的位图数据和JPEG数据的SP数据,可节省盘片的受限记录容量,这可更有效的进行重放以及显示处理。此外,在任何情况下,可将这种子图像叠加在运动图像或者主视频上,主视频是基于记录在另一视频流中的视频数据。
现在,参考图23至图27,对SP控制信息的数据结构进行说明。图23至图27是由一系列表格组成的以表示其内存储有该实施例的SP控制信息的子图像控制包的结构。顺便说一下,在图23至图27所示的一系列表格中,示出了数据结构是多层次级,其集中于本发明实施例的数据结构。因此,与本发明实施例无关的项被示为“其他”或者“其他信息”。然而,如果需要可以添加新的项。
首先,如图23所示,作为SP控制信息的一示例,子图像控制包(表格)810包括SCP报头811和子帧控制参数812。顺便说一下,如上所述,子图像控制包810是由下述多个TS包构成的,在所述TS包中SCP位于控制信息流或者子图像流中的其报头部分。
在图23中,如中间列的上部所示,SCP报头(表格)811包括与子图像控制包810有关的信息,具体地说包括子图像序列标识号、SPD(SP数据)入口段PTS以及其他等等。
在SCP报头811中,子图像序列标识号定义了子图像的连续性。与此有关,某个SPD以及其作用于该SPD的一组SCP被称为子图像序列。另一方面,SPD入口段PTS定义了每个入口段的每个开始PTS,在每个入口段中存在有其作为控制对象的子图像数据的报头包。
在图23中,如中间列的下部所示,子帧控制参数(表格)812是用于定义子帧在主视频上的显示模式的各种参数,具体地说即子帧总数、子帧总按钮数、子帧信息813(子帧信息#1至#n)、视图矩形814、子帧高亮方案、以及其他。
在子帧控制参数812中,子帧总数定义了从子图像所剪切下的子帧总数目。子帧总按钮数定义了由子图像所形成的子帧按钮的总数目。每个子帧信息813(子帧信息#1至#n)包括分别与子帧#1至#n有关的信息。视图矩形814包括与下述矩形窗(显示窗)有关的信息,通过所述矩形窗可查看位于虚笛卡尔座标系统中的子帧。此外,作为根据本发明的"SCP按钮"高亮信息的一示例,子帧高亮方案包括子帧按钮图像的高亮值以及其控制信息。
在图23中,如右列的上半部所示,每个子帧信息813(子帧信息#1至#n)包括子帧开始PTS、子帧结束PTS、子帧矩形、SFCCI、子帧控制部分等等。
在每个子帧信息813(子帧信息#1至#n)中,子帧开始PTS定义了用于开始对子帧所指定的图像信息进行显示的PTS。子帧结束PTS定义了用于结束对子帧所指定的图像信息进行显示的PTS。例如通过指定左上角和右下角的坐标,子帧矩形定义了所剪切的用于该子帧的矩形区域。
SFCCI(子帧控制部分信息)是根据本发明的“类型指定信息”的一示例。例如,如果将值“1”分配给每个项目(article),那么这是指可在该项目所表示的显示模式下显示子帧,或者是指存在与该项目相对应的控制信息。或者,如果将值“0”分配给每个项目,那么这是指不能在该项目所表示的显示模式下显示子帧,或者是指不存在与该项目相对应的控制信息。
此外,子帧控制部分具体表示用于对子帧显示进行控制的类型以作为其存在性或有效性是由SFCCI来表示的每个项目。例如,子帧控制部分表示诸如2D显示、按钮显示、移动显示、α混合显示、阴影或暗影显示等等这样的控制类型以作为用于对子帧显示进行控制的类型。
在图23中,如图右列的下半部所示,视窗矩形814具有用于表示Vx、Vy、宽度、高度、以及矩形斜率(视向矢量Ux和Uy)的信息。视窗矩形用于对下述显示窗的位置进行控制,通过所述显示窗可查看位于虚笛卡尔座标系统中的一个或多个子帧。Vx和Vy指定了显示窗参考点(参见图35)的坐标(例如该示例中的左下角)。宽度指定了显示窗的宽度,并且高度指定了显示窗的高度。视向矢量指定了用于表示显示窗斜率的矢量信息。
现在,如图24所示,其即就是每个子帧信息#1至#n的每个子帧信息(表格)813包括多个表格。
在图24中,如图中间列的上半部所示,子帧矩形(表格)815包括诸如子帧x1、子帧y1、子帧x2、以及子帧y2这样的用于指定子帧范围的信息。该信息表示用于从子图像剪切下子帧的坐标。子帧x1和子帧y1与该范围左上角的坐标相对应,并且子帧x2和子帧y2与该范围右下角的坐标相对应。
在图24中,如图右列的上半部所示,SFCCI位分配(表格)816是由32位组成的。每个位通过其值“0”或“1”来表示下述控制信息的存在性或有效性,所述控制信息与用于在主视频上显示该子帧的每个显示模式有关。例如,位“0”表示用于执行2D转换的子图像控制信息的存在性或者2D转换的有效性。例如,“位1”表示用于执行按钮显示(即SCP按钮显示)的子图像控制信息的存在性或者按钮显示的有效性。例如,“位3”表示用于执行α混合的子图像控制信息的存在性或者α混合的有效性。例如,“位4”表示用于执行阴影加边的子图像控制信息的存在性或者阴影加边的有效性。
在图24中,如图右列的下半部所示,子帧控制部分(表格)817具有其存在性或有效性是由SFCCI位分配表格816来表示的各种子图像控制信息的特定内容。例如,对其包括有2D显示、按钮显示等等的特定子图像控制信息进行记录。
现在,如图25所示,子帧控制部分(表格)817包括多个表格。在图25中,如中间列的上半部所示,2D转换控制部分(表格)818包括子帧控制部分标识信息、TM11、TM12、TM21、TM22、TM31、TM32等等。子帧控制部分标识信息是用于对其与2D转换有关的部分进行标识的信息(例如分配给2D转换控制的标识号)。每个TM是这样的信息,该信息用于指定2D控制所使用的转换矩阵的垂直组分和水平组分。根据由此所构造的2D转换控制部分818,利用根据该实施例的子图像可实现2D显示。
在图25中,如图右列的上半部所示,子帧按钮控制部分(表格)819包括子帧控制部分标识信息、子帧初始按钮状态、子帧按钮命令等等。子帧控制部分标识信息是用于对其与子帧按钮有关的部分进行标识的信息(例如分配给按钮控制的标识号)。子帧初始按钮状态表示处于其初始状态的按钮的操作条件。子帧按钮命令表示为响应子帧的按钮操作所执行的命令。根据由此所构造的子帧按钮控制部分819,利用根据该实施例的子图像可实现SCP按钮显示。
在图25中,如图右列的中心部分所示,阴影勾边控制部分(表格)820包括子帧控制部分标识信息、阴影偏移量x、阴影偏移量y、阴影R、阴影G、阴影B等等。顺便说一下,可包括亮度和色差信息以代替阴影R、阴影G、以及阴影B。子帧控制部分标识信息是用于对其与阴影勾边有关的部分进行标识的信息(例如分配给阴影勾边控制的标识号)。阴影偏移量x根据原始图象来指定阴影的水平偏移量。阴影偏移量y根据原始图象来指定阴影的垂直偏移量。每个偏移量例如是由像素单元来定义的。阴影R、阴影G、以及阴影B指定阴影的颜色。根据由此所构造的阴影勾边控制部分820,可实现与根据实施例的子图像有关的阴影勾边显示。
在图25中,如右列的下半部所示,子帧矩形运动控制部分(表格)821包括子帧控制部分标识信息、前延迟、后延迟、帧阶跃、支点(leg)总数、样条控制、支点信息#1至#n等等。子帧控制部分标识信息是用于对其与子帧矩形运动控制有关的部分进行标识的信息(例如分配给矩形运动控制的标识号)。支点总数指定子帧迹线所沿着的路径或通路上的经过点数目。样条控制是用于对从子帧迹线的起始点到结束点的经过点进行平滑描绘的信息。如果未表示上述平滑迹线,那么这些经过点是线性迹线。支点信息#1至#n是分别与每个经过点有关的信息。根据由此所构造的子帧矩形运动控制部分821,可实现与根据该实施例的子图像有关的矩形运动。
在图25中,如中间列的下半部所示,2D转换运动控制部分(表格)822包括子帧控制部分标识信息、前延迟、后延迟、帧阶跃、支点总数、样条控制、支点信息#1至#n等等。子帧控制部分标识信息是用于对其与2D转换运动控制有关的部分进行标识的信息(例如分配给2D转换运动控制的标识号)。前延迟表示这样的控制,该控制即就是使子帧从子帧的显示开始时间点延迟预定延迟而开始移动。后延迟表示这样的控制,该控制即就是从子帧的显示结束时间点延迟预定延迟而开始移动。帧阶跃指定了操作的时间间隔或时间周期。支点总数表示子帧迹线所沿着的路径上的经过点数目。样条控制指定了从子帧迹线的起始点到结束点的经过点是否是平滑曲线。在样条控制中,该路径不总恰好是经过点上的迹线,但是可以是与这些点相接近的迹线。如果未指定这种样条形式的平滑迹线,那么执行一控制以便使经过点的迹线是线性的。支点信息#1至#n具有分别与每个经过点有关的信息。根据由此所构造的2D转换运动控制部分822,可实现与根据该实施例的子图像有关的2D转换运动。
现在,如图26所示,子帧矩形运动控制部分(表格)821包括多个表格。
在图26中,如右列所示,其即就是每个支点信息#1至#n的每个支点信息(表格)823包括相对位置x、相对位置y、相对标度等等。相对位置x表示相对于当前位置而言的经过点的水平位置。相对位置y表示相对于当前位置而言的经过点的垂直位置。此外,相对标度包括用于将当前大小标度成预定大小的信息。根据由此所构造的支点信息823,可改变根据该实施例的子图像的显示位置或显示大小。
现在,如图27所示,2D转换运动控制部分(表格)822包括多个表格。
在图27中,如右列所示,其即就是每个支点信息#1至#n的每个支点信息(表格)824包括枢轴点x、枢轴点y、相对位置x、相对位置y、相对标度、相对角度等等。枢轴点用于指定在子帧的移动过程中进行旋转或标度的中心。枢轴点x指定该中心的x坐标。枢轴点y指定该中心的y坐标。相对位置x表示相对于当前位置而言的水平位置关系。相对位置y表示相对于当前位置而言的垂直位置关系。此外,相对标度包括用于将当前大小标度成预定大小的信息。相对角度包括用于将当前角度转换成预定角度的信息。根据由此所构造的支点信息824,可改变根据该实施例的子图像的显示位置或显示大小。
如参考图23至图27所说明的,存储在根据实施例子图像控制包中的SP控制信息具有层次数据结构。
现在,参考图28至图47,对根据上述所构造的层次数据结构所具体执行的子帧的各种显示控制进行说明。
首先,参考图28,对用于从子图像上剪切下子帧这样的控制进行说明。图28从概念上给出了怎样从子图像上剪切子帧。
在图28中,预先对子图像831进行记录以作为SP数据(静止图像数据)并且作为子图像流。信息录放设备500对该子图像831进行重放并且此后将其记录在存储器540中。根据从其与子图像流相同或不同的基本流中所重放的SP控制信息(参见图23至图27),该子帧832是从子图像831所剪切下的一部分图像。
例如,在图28中,将左上角的坐标定义为(x1,y1),并且将右下角的坐标定义为(x2,y2)。将该子帧定义为这样的矩形,该矩形具有由这些坐标(x1,y1)和(x2,y2)所定义的对角线。通过读取子图像控制包810、通过进一步参考子图像控制包810中的子帧控制参数812、通过进一步参考子帧控制参数812中的子帧信息813(子帧信息#1至#n)、通过进一步参考子帧信息813中的子帧矩形815、并且通过进一步参考子帧矩形815中的子帧x1,子帧y1,子帧x2,以及子帧y2(参见图23和图24)来对该子帧的范围进行设置。
现在,参考图29来对从相同子图像上剪切下多个不同子帧这样的控制进行说明。图29从概念上给出了从相同子图像上剪切下一个或多个子帧的三个特定示例进行说明。
在图29中,如“示例1”所示,剪切下子帧832以便其与子图像831相同。
如“示例2”所示,剪切下子图像831的至少一部分以作为子帧832a(“示例2”的上图)。或者,彼此相独立的剪切多个子帧832b、832c、以及832d(“示例2”的下图)。
如“示例3”所示,剪切下多个子帧(例如子帧832a和子帧832e)以便包括若干彼此公共的部分,也就是说彼此相重叠(“示例3”的上图)。或者,按照一个(例如832f)完全包括有另一个(例如832g)的方式来对其进行剪切(“示例3”的下图)。
如图28的情况(参见图23和图24),通过参考包含在子图像控制包810的层次结构之中的子帧x1、子帧y1、子帧x2、子帧y2来设置上述各种子帧。因此,可从相同子图像上剪切下各种子帧。
现在,参考图30,对所剪切子帧的记录格式进行说明。图30从概念上给出了子帧的显示位置。
如图30所示,在如上所述的对子帧进行剪切处理的过程中,执行在将所剪切的子帧832a至832g转换到子帧坐标系统(XL,YL)中之后对其进行记录。也就是说,在信息录放设备500中,将所有子帧832的坐标系统转换为图30所示的坐标系统并对其进行记录,而不管所定义的用于剪切子帧的子图像范围。在这个示例中,对子帧832进行记录以使其具有作为坐标系统起点的左下角。
现在,参考图31,对从子帧坐标系统至主视频虚坐标系统的转换处理进行说明。图31从概念上给出了每个子帧坐标系统中的子帧以及主视频虚坐标系统中的其是由这些子帧所组成的主视频的排列。
如图31所示,此后将其每个均被转换为子帧坐标系统(XL,YL)并对其进行记录的多个子帧(图31的左半侧)转换为主视频虚坐标系统(Xw,Yw)以便合成一个图像(图31的右半侧)。在这里,将轮胎及车身的子帧图像转换为主视频虚坐标系统(Xw,Yw)并对其显示以便合成汽车图像。将用于对这种显示进行控制的SP控制信息记录在子图像控制包810中(参见图23至图27)。根据子图像控制包210中的各种控制信息的内容,可按照将后胎安装于车身旁边这样的方式或者每个轮胎转动的方式来合成图像。
例如通过读取子图像控制包810、此后参考其中的子帧控制参数812、此后参考其中的子帧信息813、并且此后参考其中的子帧控制部分817(参见图23),利用预先所确定的轮胎和车身的子帧可实现图31中所示的显示。在主视频虚坐标系统(Xw,Yw)中可任意的设置由此所配置的主视频中的排列。
现在,参考图32,对2D转换运动控制进行说明。图32从概念上给出了主视频坐标系统中的其涉及子帧移动(平行位移)的显示方案。
如图32所示,为了2D转换运动控制,在主视频虚坐标系统(Xw,Yw)中移动所随意选择的子帧837,而不会改变子帧837。从预定子图像剪切下子帧837。通过读取子图像控制包810、此后参考其中的子帧控制参数812、此后参考其中的子帧信息813、此后参考其中的子帧控制部分817、并且此后参考2D转换运动控制部分822可实现对这种子帧837的显示(参见图23至图27)。
现在,参考图33,对其涉及子帧的图像大小变化的控制以及其涉及矩形运动的控制进行说明。图33从概念上给出了主视频坐标系统中的其涉及子帧的移动及图像大小变化的显示方案。
如图33所示,为了图像大小改变控制以及2D转换运动控制,可按比例减小(或者按比例增大)所随意选择的子帧837并且使其移动以形成主视频坐标系统(Xw,Yw)中的图像838。从预定子图像剪切下初始的子帧837。通过读取子图像控制包810、此后参考其中的子帧控制参数812、此后参考其中的子帧信息813、此后参考其中的2D转换运动控制部分822、此后参考其中的子帧矩形运动部分821、并且此后参考其中的支点信息824可实现其涉及从图像837至图像838的转换的这种显示(参见图23至图26)。也就是说,根据包含在支点信息824之中的相对标度等等,可实现其涉及从子帧837至图像838的转换的显示。在这种情况下,支点信息824(即支点信息#1至#n)仅表示开始点和结束点。在开始点与结束点之间的区域中,执行显示控制以便子帧线性移动。
现在,参考图34,对其涉及子帧旋转的2D转换运动控制进行说明。图34从概念上给出了主视频虚坐标系统中的其涉及子帧旋转的显示方案。
如图34所示,为了其涉及旋转的2D转换运动控制,使所随意选择的子帧837在主视频虚坐标系统(Xw,Yw)中旋转而不会改变子帧837。从预定子图像剪切下初始的子帧837。通过读取子图像控制包810、此后参考其中的子帧控制参数812、此后参考其中的子帧信息813、此后参考其中的子帧控制部分817、此后参考其中的2D转换运动控制部分822、此后参考其中的支点信息824(支点信息#1至#n)、并且此后参考枢轴点x,枢轴点y,相对角度等等可实现其涉及子帧旋转的显示(参见图23至图27)。
现在,参考图35,对子帧的显示窗(视窗矩形)控制进行说明。图35从概念上给出了主视频虚坐标系统中的其涉及显示窗及子帧排列的显示方案。
如图35所示,从预定子图像剪切下子帧837(可以是一个或多个)并且使其排列在主视频虚坐标系统(Xw,Yw)中的预定位置上。根据其与2D转换控制部分818有关的信息,或者通过参考图32、图33、图34等等所说明的方案来执行直到该排列为止的处理。此外,对其即就是显示窗的视窗矩形进行定义并且使其在主视频虚坐标系统(Xw,Yw)中移动,这导致了对下述子帧837的一个或多个图像进行显示这样的处理,所述子帧排列在主视频虚坐标系统中并且包含在视窗矩形范围内所环绕的一区域之中。此外,通过读取子图像控制包810、此后参考其中的子帧控制参数812、此后参考其中的视窗矩形814、并且此后参考其中的Vx,Vy,宽度,高度等等(参见图23)可实现其涉及视窗矩形的显示。
此外在该示例中,可实现这样的控制,即通过随着时间的过去来改变Vx、Vy、宽度、高度等等可改变视窗矩形范围内所环绕的区域。
现在,参考图36,对其涉及子帧旋转以及图像大小变化的显示控制进行说明。图36从概念上给出了主视频虚坐标系统中的其涉及子帧旋转以及图像大小变化的显示方案。
如图36所示,使所随意选择的子帧837逐渐的或者连续的按比例缩小(或者逐渐或者连续的按比例增大)并且使其旋转式的在主视频虚坐标系统(Xw,Yw)中移动以通过图像839及840形成图像841。从预定子图像上剪切下初始的子帧837。通过读取子图像控制包810、此后参考其中子帧控制参数812、此后参考其中的子帧信息813、此后参考其中的子帧控制部分817、此后参考其中的2D转换运动控制部分822、此后参考其中的支点信息824(支点信息#1至#n)、并且此后参考枢轴点x,枢轴点y,相对位置x,相对位置y,相对标度,相对角度等等(参见图23至图27)可实现对子帧的显示。在这里,根据相对角所定义的预定角度来排列图像839、840、以及841,并且根据相对标度所定义的标度来对其顺序的显示。
现在,参考图37,对其涉及子图像中的子帧移动的显示控制进行说明,也就是说对子帧矩形运动显示控制进行说明。图37从概念上给出了其涉及子图像中的子帧移动的显示方案。
如图37所示,根据预定规则而顺序的从子图像831剪切下子帧837、842、以及843。此后,在主视频虚坐标系统(Xw,Yw)中顺序的显示所剪切的这些子帧。通过读取子图像控制包810、此后参考其中子帧控制参数812、此后参考其中的子帧信息813、此后参考其中的子帧控制部分817、此后参考其中的子帧矩形运动控制部分821、此后参考其中的支点信息823、并且此后参考相对于子帧矩形815所指定的子帧初始位置而言的相对位置x,相对位置y,相对标度等等(参见图24至图26)可实现对子帧的显示。
现在,参考图38,对其涉及主视频虚坐标系统中的子帧的移动路径的显示控制进行说明。图38从概念上给出了其涉及主视频虚坐标系统中的子帧的移动路径的显示方案。
如图38所示,子帧在预定路径上移动。尤其是在图38(a)中,子帧在下述路径上移动,所述路径通过经过点1和2而从开始点线性连接至结束点。在图38(b)中,子帧在下述路径上移动,所述路径通过经过点1和2而从开始点至结束点受到样条内插。将其与经过点、线性移动、具有样条内插的移动等等有关的显示信息记录在子图像控制包210中。此外,经过点并不局限于其数目为两个,而是可以更多。通过读取子图像控制包812、此后参考其中的子帧控制参数812、此后参考其中的子帧信息813、此后参考其中的子帧控制部分817、此后参考其中的子帧矩形运动控制部分821或者参考其中的2D转换运动控制部分822、并且此后参考其中的样条控制等等(参见图23至图25)可实现对子帧的这种显示。
信息录放设备500对其与参考图23至图38所讨论的各种显示方案有关的SP数据和SP控制信息进行重放与读取以作为记录在盘片100中的基本流。执行读取处理以作为参考图19流程图所讨论的对象的重放处理的一部分。在这种情况下,根据子图像控制包210中的SP控制信息来剪切SP数据,并且在其受到上述制造或者处理之后将其显示在主视频上。
在该实施例中,这两个显示方案均是可用的,一个是参考图23至图38所讨论的其基于SP控制信息的按钮显示(即根据图25的子帧按钮控制部分819来对其进行控制的“SCP按钮”),另一个是参考图20至图22所讨论的其基于下述信息的按钮显示(即根据图20(b)的SP数据结构722而可显示且可控的“SPD按钮”),所述信息是其用作SP数据报头信息的结构信息中所提供的。在该实施例中,根据所需的情况可使用“SCP按钮”和“SPD按钮”之一或者可使用这两者。在下文的说明中,根据情况需要可将“SPD按钮”所需的SP数据的报头信息(结构信息)中的按钮控制信息称为“SPD按钮信息”,以便使其不同于“SPD按钮”。
现在,参考图39的流程图,来对获得绘制控制参数的的示例进行说明。图39给出了用于获得绘制控制参数的操作流程的流程图。此外,在图39中,子图像控制包810(参见图23)简写为“SCP”。
顺便说一下,在这里“绘制控制参数”尤其是指下述各种子帧控制参数中的其与绘制有关的参数,所述各种子帧控制参数是由图23所示的存储在SP控制包中的SP控制信息组成的。例如,图23所示的所有子帧控制参数812等等可以是绘制控制参数,或者前者可以包括与后者不同的其他参数。
首先,在图39中,从SCP报头中获得了SPD(SP数据)按钮的数目(N)(步骤S101),并且判断SPD按钮数目(N)是否大于“0”(步骤S102)。如果在步骤S102判断出SPD按钮的数目(N)不大于“0”(步骤S102:否),那么这是指不存在SPD按钮信息,并且因此该处理前进到步骤S105。另一方面,如果在步骤S102判断出SPD按钮的数目(N)大于“0”(步骤S102:是),那么获得所有SPD按钮信息(总数=N)(步骤S103),并且进一步获得SPD按钮的高亮信息(步骤S104)。可从其内预先记录有高亮信息的SP数据的报头信息中或者从SP数据的结构信息中获得高亮信息。或者,可以从所预先记录的SP控制信息中获得高亮信息(例如,在这种情况下,可从图23所示的子帧控制参数812中获得该子帧高亮方案)。此后,从SP控制信息中获得子帧数目(M)(步骤S105)。
此后,从子图像控制参数812(参见图23)中获得子帧的显示开始PTS以及显示结束PTS(步骤S106)、获得子帧SP数据上的位置信息(步骤S107)、并且对SFCCI进行核对且获得子帧控制部分(步骤S108)。此后,判断是否获得了所有子帧(总数=M)的信息(步骤S109)。如果判断出未获得所有子帧的信息(步骤S109:否),那么重复步骤S106之后的处理以获得子帧的各种信息。
如果判断出已获得了所有子帧的信息(步骤S109:是),那么判断是否存在子帧按钮(步骤S110)。如果判断出不存在子帧(步骤S110:否),那么处理前进至步骤S112。另一方面,如果判断出存在子帧按钮(步骤S110:是),那么获得子帧的高亮信息(步骤S111)。此后,获得显示对象区域(步骤S112),并且结束获得绘制控制参数。
因此,对获得其与SPD按钮有关的参数以及获得绘制控制参数的操作流程进行说明。然而,根据适合于其之一的过程可获得其他参数。
现在,参考图40的流程图,对图39步骤S108的对SFCCI进行核对且获得该SFCC(子帧控制部分)的示意性操作进行说明。顺便说一下,如图24右列上半部所说明的SFCCI位分配表格816所示,在这里SFCCI位组合可以是位0至31(LSB至MSB)。
首先,判断SFCCI位0是否是“1”(步骤S201)。如果判断出位0不是“1”(步骤S201:否),那么处理前进到步骤S203。如果判断出位0是“1”(步骤S201:是),那么这意味着存在转换控制部分或者其是有效的,并且因此获得该转换控制部分(步骤S202)。
此后,判断SFCCI位1是否是“1”(步骤S203)。如果判断出位1不是“1”(步骤S203:否),那么处理前进到步骤S205。如果判断出位1是“1”(步骤S203:是),那么这意味着存在子帧按钮控制部分或者其是有效的,并且因此获得子帧按钮控制部分(步骤S204)。
此后,判断SFCCI位4是否是“1”(步骤S205)。如果判断出位4不是“1”(步骤S205:否),那么处理前进到步骤S207。如果判断出位4是“1”(步骤S205:是),那么这意味着存在阴影勾边控制部分或者其是有效的,并且因此获得该阴影勾边控制部分(步骤S206)。
此后,判断SCCI位8是否是“1”(步骤S207)。如果判断出位8不是“1”(步骤S207:否),那么该处理前进到步骤S209。如果判断出位8是“1”(步骤S207:是),那么这意味着存在子帧矩形运动控制部分或者其是有效的,并且因此获得该子帧矩形运动控制部分(步骤S208)。
此后,判断SFCCI位9是否是“1”(步骤S209)。如果判断出位9不是“1”(步骤S209:否),那么结束一系列处理。另一方面,如果判断出位9是“1”(步骤S209:是),那么这意味着存在转换运动控制部分或者其是有效的,并且因此获得该转换运动控制部分(步骤S210)且此后结束一系列处理。
如上所述,获得其存在性或者有效性是由SFCCI来确定的子帧控制部分。在该示例中,对位0、位1、位4、位8和位9进行核对,如果需要,还按照相同的方式来对SFCCI位分配表格816(参见图24)所列的其他位进行核对。
现在,参考图41至图44的流程图,对子帧绘制处理进行说明。顺便说一下,这些流程图一起形成了下述一系列流程图,所述流程图当中的关系是由诸如①②等等这样的圆圈中的数字来表示的。
首先在图41中,判断是否获得了有效的转换控制部分(步骤S301)。如果判断出获得了有效的转换控制部分(步骤S301:是),那么将从转换控制部分中所获得的参数设置到子帧的坐标变换矩阵中(步骤S302)。如果判断出未获得有效的转换控制部分(步骤S301:否),那么将单元矩阵设置为子帧的坐标变换矩阵(步骤S303)。此后,判断是否获得了有效的子帧按钮控制部分(步骤S304)。
如果判断出在步骤S304获得了有效的子帧按钮控制部分(步骤S304:是),那么获得其与子帧按钮的初始状态相对应的高亮所需的参数(步骤S305)。例如在这里,获得图23所示的子帧控制参数812中的子帧高亮方案(表格),并且获得下述按钮的标识号信息等等,所述按钮是由该子帧高亮方案来指定的并且在初始状态被激活。
此后,获得当按下子帧按钮时所执行的命令(步骤S306)并且处理前进到图43的步骤S501。
另一方面,如果判断出未获得有效的子帧按钮控制部分(步骤S304:否),那么处理前进到图42的步骤S401。
在图42中,判断是否获得了有效的SPD按钮信息(步骤S401)。如果判断出获得了有效的SPD按钮信息(步骤S401:是),那么获得其与SPD按钮的初始状态相对应的高亮所需的参数(步骤S402)。此后,获得当按下SPD按钮时所执行的命令(步骤S403),处理前进到图43的步骤S501。另一方面,如果判断出在步骤S401未获得有效的SPD按钮信息(步骤S401:否),那么该处理前进到图43的步骤S501。
此后,判断在图43的步骤S501是否获得了有效的阴影勾边部分(步骤S501)。如果判断出获得了有效的阴影勾边部分(步骤S501:是),那么获得所加以阴影的对象的信息(步骤S502)以及阴影的水平偏移信息和阴影的垂直偏移信息这两者或者任一个(步骤S503),获得阴影的颜色信息(步骤S504),并且获得其他信息(步骤S505)。此后,在背景缓冲器中对该阴影加以描述(步骤S506),并且处理前进到图44的步骤S601。另一方面,如果判断出在步骤S501未获得有效的阴影勾边部分(步骤S501:否),那么该处理还前进到图44的步骤S601。
此后,判断在图44的步骤S601是否获得了有效的转换运动控制部分(步骤S601)。如果判断出获得了有效的转换运动控制部分(步骤S601:是),那么根据子帧显示时间信息以及转换运动控制部分的参数来计算转换矩阵中的各个元素的增值(步骤S602),并且该处理前进到步骤S603。另一方面,如果判断出在步骤S601未获得有效的转换运动控制部分(步骤S601:否),那么该处理还前进到步骤S603。
此后,判断在步骤S603是否获得了有效的子帧矩形运动控制部分(步骤S603)如果判断出获得了有效的子帧矩形运动控制部分(步骤S603:是),那么根据子帧显示时间信息以及子帧矩形运动控制部分的参数来计算所移动子帧的坐标增值(步骤S604),并且处理前进到步骤S605。另一方面,如果判断出在步骤S603未获得有效的子帧矩形运动控制部分(步骤S603:否),那么该处理也前进到步骤S605。
此后,在背景缓冲器中对该子帧的图像加以描绘(步骤S605),并且当当前重放时间等于子帧的显示开始PTS时或者在此之后(步骤S606),开始将在背景缓冲器中所描绘的图像输出到前景(步骤S607)。此后,判断当前重放时间是否等于子帧的显示结束PTS(步骤S608)。如果判断出当前重放时间等于显示结束PTS,那么结束一系列描绘。
另一方面,在步骤S608当前重放时间等于显示结束PTS的情况下(步骤S608:否),如果存在从子帧矩形运动控制部分中所获得的任何参数值,那么将增值添加到该参数上(步骤S609),并且如果存在从转换运动控制部分中所获得的任何参数增值,那么将该增值添加到该参数上(步骤S610),并且如果对绘制参数进行任何改变,那么根据新的参数来在背景缓冲器中对子帧的图像加以描绘(步骤S611),并且处理返回至步骤S607以重复以下处理。
因此,如参考图41至图44所讨论的,执行对子帧的一系列描述处理。顺便说一下,该描绘处理并不局限于上述说明,而是只要在可实现与上述说明相同处理的范围内,可采用其包括有任何处理项目、任何处理顺序等等的任何方法。
(阴影勾边的示例性显示)
现在,参考图45对其具有“阴影勾边”的用于对所显示的字母或者字符加以阴影或者对子帧加以阴影的显示控制进行说明。图45从概念上给出了阴影勾边显示。
在图45中,位于左侧的两个示例性显示表示分别相对于透明背景中的其具有不透明字母而言的阴影勾边,同时位于右侧的两个示例性显示表示相对于子帧完全不透明而言的阴影勾边。此外,位于上侧的两个示例性显示表示相对于阴影而言没有添加模糊的阴影勾边,同时位于下侧的两个示例性显示表示相对于阴影而言其添加了模糊的阴影勾边。
在子帧的透明背景中对不透明字母加以阴影的情况下,在主视频上显示这些字母以作为所立体分离的字母或者图样。在子帧整体来说不透明的情况下,在主视频上显示这样的图像,即在该图像中对整个子帧或者子帧的周线加以阴影。顺便说一下,“α值”用于表示其是二进制或者多级别(例如255个级别)的透明性。在二进制值的情况下,将值“0”定义为“透明”,并且将值“1”定义为“不透明”。在多级别的情况下,将值“0”定义“透明”,将最大值“255”定义为“不透明”,并且将中间值定义为表示透明与不透明之间的适当透明性。
此外,为了加以阴影,通过将偏移值应用到不透明部分上并且从而添加所加以阴影的方向和数量,或者通过对所投射的背景角度进行控制可实现有效的阴影。此外,该阴影不局限于黑色,而可通过以任何所期望的比例来混合RGB信号而可以采用任何所期望的颜色。此外,从其添加有适当阴影的整个子帧的透明性中可获得有效阴影。
在图25所示子帧控制部分817中的阴影勾边控制部分820中对其具有上述阴影勾边的显示控制加以描绘。也就是说,从该部分中可获得特定阴影勾边所需的其包括有偏移量或者偏移位置、阴影颜色等等的信息,并且根据这些信息来添加阴影。此后,通过参考图24所示SFCCI位分配表格816中的位4的阴影勾边,可确定阴影勾边控制部分820的存在性或有效性。
此外,存在这样的描述,即该描述有关于在获得子帧控制部分的操作流程中的步骤S206获得其与阴影勾边有关的控制信息并且对图40所示的SFCCI进行核对,并且存在这样的描述,即该描述有关于图45所示的在图43的步骤S501至S506加以阴影的处理。
(按钮的示例性显示)
参考图46对“按钮”的显示控制进行说明。图46(a)给出了一子帧以及按钮图像的范围。图46(b)给出了基于按钮α值的一图像。图46(c)给出了其用作按钮的一区域。
例如,如图46(a)所示,截断其包括有按钮图样的一部分SP数据以作为子帧。就“SPD按钮”而言,可使子帧作为一按钮的按钮信息(即用于定义按钮范围的按钮位置信息)包含在其被添加到SP数据上的报头信息之中,并且就“SCP按钮”而言,其可包含在SP控制信息之中。
根据这种按钮信息来确定图46所示按钮的功能。例如,按钮功能的类型包括推入式按钮、开关按钮、专用按钮等等。通过对所显示的按钮图像进行远程控制操作、音频输入操作、屏幕上的触摸操作、键盘操作等等来执行这些按钮的操作。
在这种情况下,整个子帧不总是作为按钮,而是如图46(c)所示仅剪切下由α值所定义的子帧的不透明区以使其作为按钮图像部分(即作为按钮的可操作区域)。也就是说,在这种情况下,参考α值,并且根据上述按钮信息而仅对该α值所示不透明性所示出的坐标区域进行控制以作为按钮。然而,为了简单起见,可使图46(a)所示的整个子帧作为按钮。
对该按钮应用高亮控制。例如,可根据图23所示子帧控制参数812中的子帧高亮方案,或者根据图25所示子帧按钮控制部分819中的子帧按钮命令或根据图23所示子帧控制参数812中的子帧高亮方案以及图25所示子帧按钮控制部分819中的子帧按钮命令,或者根据其他信息,来对该按钮应用高亮控制。该高亮显示便于有区别的识别当前按下的按钮、当前所选按钮、当前可选但并非所选的按钮、当前不可选的按钮等等。根据设备的当前工作条件,不但可对所按下的按钮进行预定的高亮,而且还可对可选的按钮组进行预定的高亮。其应用到按钮各种状态的高亮可使得为用户感知按钮状态。
按照下述方式来执行由子帧高亮方案等等所定义的高亮显示控制,所述方式即就是通过根据按钮状态来改变明亮度或对比度,或者进行反向阴影而使所高亮的按钮与其他按钮或者其他部分或局部与有区别。
就SCP按钮而言,存在这样的描述,即关于按钮信息中的上述按钮显示控制包括有图23所示子帧控制参数812中的子帧按钮总数、图25所示子帧按钮控制部分819中的子帧初始按钮状态、子帧按钮命令等等。此后,通过参考图24所示SFCCI位分配表格816中的位1的子帧按钮信息来确定子帧部分819的存在性或有效性。
另一方面,就SPD按钮而言,存在这样的描述,即关于将按钮信息中的上述按钮的显示控制添加到图20(b)所示的SP数据上。更具体地说,例如,存在这样的描述,即关于图20(b)所示SP数据结构722中的结构信息或者SP数据中的“其他信息”。
此外,就SCP按钮和SPD按钮而言,还将高亮信息记录(描述)在SP控制信息中以使其与每个按钮信息相关联。或者,可将其记录在每个SP数据的报头信息(或者结构信息或其他信息)中以使其与每个按钮信息相关联。在任何情况下,通过根据按钮信息来执行控制并且根据彼此相关联的高亮信息来执行高亮显示控制,可对按钮进行高亮。
此外,存在其与下述处理有关的描述,所述处理即就是在步骤S101至S104执行图46所示的按钮控制、在步骤S110至S111执行获得图39的绘制控制参数的操作流程、以及在步骤S203至S204执行获得子帧控制部分并且对图40的SFCCI进行核对的操作流程,并且进一步在步骤S304至S306执行图41的子帧绘制处理的操作流程,以及在步骤S401至S403执行图42的操作流程。
现在,参考图47,对按钮状态的转换作为说明。操作命令预定的与每一个按钮相对应,以便信息录放设备500通过执行与按钮相匹配的所希望的操作来进行操作。例如,从所显示的按钮中选择其与音频功能有关的按钮并对其进行输入,由此立刻执行其与该音频功能有关的操作。如上所述,操作按钮的类型包括推入式按钮、开关式按钮、专用按钮等等。
根据每个按钮的当前工作状态来确定对每个按钮操作状态的转换。按钮状态的转换包括“不可操作的”、“可操作的且当前未选择的”、“可操作的且当前所选择的”、以及“正在执行的”。状态“不可操作的”是指该按钮被显示但是是不可操作的,状态“可操作的且当前未选择的”是指该按钮是可操作的但是当前未选择的这样一种状态,并且因此不可直接对其进行操作、状态“可操作的且当前所选择的”是指按钮是可操作的并且仅选择了该按钮这样一种状态,并且因此可对其直接进行操作、并且状态“正在执行的”是指当前执行对按钮的操作这样一种状态。由于用户的操作,将状态“可操作的且当前所选择的”转换成状态“正在执行的”以及状态“可操作的且当前未选择的”。由于系统命令,将状态“可操作的且当前所选择的”转换为状态“不可操作的”。由于系统命令,将状态“不可操作的”转换为状态“可操作的且当前未选择的”以及状态“可操作的且当前所选择的”。由于在命令操作结束之后用户的操作或者自动的,将状态“正在执行的”转换为状态“可操作的且当前所选择的”。
如上所述,根据其包括有图23所示子帧控制参数812中的子帧按钮总数、图25所示子帧按钮控制部分819中的子帧初始按钮状态、以及子帧按钮命令等等的按钮信息来执行图47所示的按钮控制。
如参考图20至图47所示的,在该实施例中,可实现其包括有子图像运动控制、阴影勾边控制、高亮按钮控制等等的各种显示控制。此外,通过利用诸如SFCCI这样的控制信息可有效的执行对子图像的各种显示控制。
(重放过程中的访问流程)
接下来,参考图48,对其采用AU信息132和PU信息302的信息录放设备500在重放过程中的访问流程以及光盘100的逻辑结构进行描述以作为该实施例的特征之一。图48示意性的给出了与光盘100的逻辑结构有关的重放过程中的整个访问流程。
在图48中,将光盘100的逻辑结构大致分成以下三层:一逻辑层401;一对象层403;以及其使这两个层彼此相关的一逻辑对象相关层402。
在这些层当中,逻辑层401是这样的层,该层在重放过程中在逻辑上指定各种逻辑信息以对所希望的标题进行重放并且还指定所要重放的播放列表(P列表)以及其组成内容。在逻辑层401中,将其表示光盘100上的整个标题200等等的盘片信息110d写入到盘片信息文件110之内(参看图3),并且进一步,将光盘100上的整个内容的重放顺序信息120d写入到播放列表信息文件120之内(参看图3)。更具体的说,写入一个或多个播放列表集合126S的结构以作为重放顺序信息120d以分别用于其包含在每个标题200之中的一个或多个标题组分200—2。此外,每个播放列表集合126S包括一个或多个播放列表126,所述每个播放列表126内均写入有一个或多个项204(参见图13)的结构。此后,在重放过程中进行访问时,如上所述的逻辑层401指定所要重放的标题200、指定与此相对应的播放列表126、并且进一步指定与此相对应的项204。
接下来,逻辑对象相关层402是这样的层,该层用于指定所要重放的TS对象数据140d的属性和物理存储地址,以便将TS对象数据140d的组合和/或结构指定为实体数据并且根据上述在逻辑层401中所指定的信息来执行从逻辑层401到对象层403的地址转换。更具体地说,在逻辑对象相关层402中,将下述对象信息数据130d写入到对象信息文件130之中(参见图3),所述对象信息数据130d将其构成每个项204的一组内容分成AU 132单元并且将每个AU 132细分成PU 302单元。
在这里,“PU(显示单元)”302是这样的单元,该单元可通过重放转换单元来使多个基本流相关并且对其进行分组。如果PU 302中存在三个音频流,那么在对该影象进行重放的过程中用户还可以自由的转换这三个音频(例如不同语音的音频)。
另一方面,“AU(相关单元)132”是这样的单元,该单元可对诸如视频流这样的在一个标题中所使用的TS对象中的多个基本流进行分组,并且其由一个或者多个PU 302构成。更具体地说,AU 132是这样的单元,该单元对间接通过PU 302的每个TS对象的基本流信息包ID(ES_PID)进行分组。该AU 132与其是由下述多个节目所构成的一组合相对应,就内容而言,所述多个节目具有一特定的相互关系,这多个节目例如可以是多源广播中相互可转换的多个节目。属于相同AU 132的PU 302与一个或者多个基本流组合相对应,这一个或者多个基本流组合的每一个在重放的过程中通过用户的操作而构成了相互可转换的多个节目。
因此,如果对所要重放的AU 132进行了标识,并且对属于该AU的PU进行了标识,那么对所要重放的基本流进行标识。也就是说,即使未利用如图12所示的PAT或PMT,那么也可从所多记录的光盘100中重放所想要的基本流。
顺便说一下,对其分别定义了上述AU 132和PU 302的AU信息132I和PU信息302I的更加具体的数据结构进行说明。
根据PU信息302,由其就是基本流的信息包ID(参看图12)的ES_PID来标识或指定实际上所要重放的基本流。同时,将其表示重放的开始时间点以及结束时间点的信息转换成基本流地址信息,并且从而对特定基本流的特定区域(或者特定时间范围)中的内容进行重放。
因此,在逻辑对象相关层402中,执行将与每个项204有关的逻辑地址转换成与每个PU 302有关的实际地址这样的地址转换。
接下来,对象层403是物理上的层以对实际的TS对象数据140d进行重放。在对象层403中,将TS对象数据140d写入对象数据文件140之内(参看图3)。更具体地说,在每个时间点对其构成了多个基本流(ES)的TS包146进行多路复用,沿着时间标度来排列所多路复用的包以形成多个基本流(参看图11)。此后,对于每一个基本流而言,在每个时间点所多路复用的多个TS包与在逻辑对象相关层402所标识的PU 302相关。顺便说一下,还可使多个PU302与一个基本流相关(例如在多个可转换的节目当中,共用其与相同音频数据相关的一个基本流,或者共用其与相同子图像数据相关的一个基本流)。
因此,在对象层403中,利用通过在逻辑对象相关层402进行转换而获得的物理地址来重放实际对象数据。
如上所述,图48所示的三个层可在重放的过程中对光盘100进行访问。
(对象信息文件的结构)
接下来,参考图49,对对象信息文件130中的其可使对象数据文件140中的对象数据与参考图48所讨论的播放列表信息文件120和盘片信息文件110中的各种逻辑信息相关的数据结构进行讨论。图49示意性的给出了在对象信息文件130中所构造的AU(相关单元)表格131(参看图3)以及与该AU表格131有关的ES(基本流)映射表134(参看图3)的数据结构的一个特定示例。
在这个特定示例中,如图49所示,对象信息表格存储在对象信息文件130中。对象信息表格具有如图49的上半部所示的AU表格131以及如图49下半部所示的ES映射表134。
在图49的上半部中,AU表格131具有这样的一结构,该结构允许添加每个区的所需数目的表格。例如,如果存在四个AU,那么具有区域数目可增至四个的结构。
在AU表格131中,存储下述“AU表格一般信息”以及“其他信息”,在该“AU表格一般信息”中写入有AU的数目以及指向每个AU的指针等等。
AU表格131中描述了相应ES映射表134的索引号(索引号=....)以作为这样的AU信息132I,该AU信息132I表示与每个AU#n相对应的每个PU#m中的ES表索引#m。这里,"AU"是这样的一单元,该单元例如与如上所述的TV广播中的"节目"相对应(尤其是,在"多影象"广播的情况下,它是一组其是可改变的或者可选择的多个"影象"这样的一单元),并且该"AU"包括一个或多个PU,每个PU是一重放单元。此外,"PU"是如上所述的一组其包含在每个AU中的相互可变的基本流,并且由PU信息302I来指定与每个PU相对应的ES表索引#m。例如,如果多视图内容具有AU,那么该AU中存储多个PU,并且每个PU中存储其指向多个基本流包ID的指针,该指针指示出其构成每个视图内容的信息包。这表示ES映射表134中的索引号,如随后所述。
在图49的下半部,在ES映射表134中,存储有用于每个区的ES映射表一般信息、多个索引#m(m=1、2、....)、以及"其他信息"。
"ES映射表一般信息"中描述了ES映射表的大小、索引的总数等等。
"索引#m"包括用于重放的整个基本流的基本流包ID(ES_PID)、相应索引号、以及基本流的地址信息。
在该实施例中,例如,如果基本流是上述MPEG2的视频流,那么仅写入位于I图像头部的TS包的TS包号以及相应显示持续时间以作为其即就是ES映射表134上的ES地址信息134d这样的地址信息,通过该地址信息可试图降低数据量。另一方面,就子图像流的ES地址信息134d而言,通过对其上施加有SP控制信息的SP数据的基本流的索引号信息134e进行记录可试图降低数据量。
因为如上所述的结构,因此可从AU表格131所指定的ES映射134的索引号中获得实际基本流的基本流包ID(ES_PID)。此外,因为可同时获得其与基本流包ID相对应的基本流的地址信息,因此可根据这些信息来重放对象数据。
根据上述光盘100的数据结构,即使将新标题添加到光盘100上,也很容易添加所需的信息,这是很有用的。另一方面,即使由于例如编辑等等而使某些信息成为多余的,所要进行的是简单的不参考该信息,并且实际上不必要从该表格中删除该信息,这同样也是很有用的。
如参考图1至图49所详细描述的,根据这个实施例,通过利用SP控制信息等等可实现复杂且完善的重放以对其与视频数据相关的子图像进行重放,该复杂且完善的重放包括利用信息录放设备500的交互式重放、利用对子图像加以阴影的重放、其基于视频屏幕上复杂且完善的按钮操作的高亮显示控制等等。此外,可通过利用SP控制信息之中的诸如SFCCI这样的控制信息来对子图像相对有效且快速的执行这些各种显示控制。
顺便说一下,在上述实施例中,对其作为信息记录介质一示例的光盘100以及与其作为信息录放设备一示例的光盘100有关的记录器或播放器进行了说明。然而,本发明并不局限于该光盘以及其播放器或记录器,而是适用于其支持高密度记录或高传输率的各种记录介质以及其记录器或播放器。
本发明不局限于上述实施例,并且如果需要,在不脱离权利要求及整个说明书所示的本发明的范围或者精神的情况下可对其做出修改。信息记录介质、用于记录信息的设备和方法、用于重放信息的设备和方法、用于录放信息的设备和方法、对记录或者重放进行控制的计算机程序、以及其包括有随这种变化而发生的控制信号的数据结构同样属于本发明的技术范围之内。