CN101268514A - 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 - Google Patents
记录介质、再现数据的方法和装置、以及记录数据的方法和装置 Download PDFInfo
- Publication number
- CN101268514A CN101268514A CNA2006800342303A CN200680034230A CN101268514A CN 101268514 A CN101268514 A CN 101268514A CN A2006800342303 A CNA2006800342303 A CN A2006800342303A CN 200680034230 A CN200680034230 A CN 200680034230A CN 101268514 A CN101268514 A CN 101268514A
- Authority
- CN
- China
- Prior art keywords
- video stream
- picture
- auxiliary video
- video flowing
- main
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
- H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
- H04N21/4431—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB characterized by the use of Application Program Interface [API] libraries
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
- H04N21/4438—Window management, e.g. event handling following interaction with the user interface
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Databases & Information Systems (AREA)
- Library & Information Science (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Television Signal Processing For Recording (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Abstract
在一个实施例中,主视频流和辅助视频流被存储在记录介质的数据区中。主视频流代表主呈现路径,而辅助视频流代表相对于主呈现路径的画中画呈现路径。管理画中画呈现路径再现的管理信息被存储在记录介质的管理区中。管理信息基于辅助视频流是否与主视频流同步而指示画中画呈现路径的类型。
Description
技术领域
本发明涉及记录和再现的方法和装置以及一种记录介质。
背景技术
光盘被广泛地用作能够在其中记录大量数据的记录介质。尤其是最近已开发出诸如蓝光盘(BD)和高清晰度数字多功能盘(HD-DVD)的高密度光学记录介质,并且它们能够记录和存储大量的高质量视频数据和高质量音频数据。
这类基于下一代记录介质技术的高密度光盘记录介质被认为是能够存储的数据远多于常规DVD的下一代光学记录方案。高密度光学记录介质与其它数字设施的开发正在进行当中。另外,对其应用高密度记录介质标准的光学记录/再现装置也处于研发阶段。
根据高密度记录介质和光学记录/再现装置的发展,存在同时再现多个视频的可能。然而,据知还没有方法能够有效地同时记录或再现多个视频。此外,由于没有完全确立的高密度记录介质标准,因此难以开发出完善的基于高密度记录介质的光学记录/再现装置。
发明内容
本发明涉及一种具有用于管理至少一个画中画呈现路径的再现的数据结构的记录介质。
在一个实施例中,主视频流和辅助视频流被存储在记录介质的数据区中。主视频流代表主呈现路径,而辅助视频流代表相对于主呈现路径的画中画呈现路径。管理画中画呈现路径再现的管理信息被存储在记录介质的管理区内。该管理信息基于辅助视频流是否与主视频流同步而指示画中画呈现路径的类型。
在一个实施例中,该管理信息包括子路径类型信息字段,它指示辅助视频流是否为同步类型的画中画呈现路径和异步类型的画中画呈现路径中的一个。
在另一实施例中,该管理信息还指示辅助视频流是否与主视频流多路复用。
在又一实施例中,该管理信息包括指示多个画中画呈现路径类型中的一个的子路径类型信息字段,并且这些类型中的至少一个指示辅助视频流是否与主视频流同步。例如,第一类型可指示辅助视频流与主视频流同步,并且辅助视频流与主视频流多路复用。又如,第二类型可指示辅助视频流与主视频流同步,并且辅助视频流不与主视频流多路复用。再如,第三类型可指示辅助视频流不与主视频流同步,并且辅助视频流不与主视频流多路复用。
在一个实施例中,主视频流和辅助视频流被存储在记录介质的数据区中。主视频流代表主呈现路径,而辅助视频流代表相对主呈现路径的画中画呈现路径。管理画中画呈现路径再现的管理信息被存储在记录介质的管理区中。该管理信息指示辅助视频流是否与主视频数据同步。
本发明还涉及管理至少一个画中画呈现路径再现的方法和装置,并进一步涉及记录用于管理至少一个画中画呈现路径再现的数据结构的方法和装置。
附图说明
包括于此以提供对本发明的进一步理解、并被纳入在本申请内且构成其一部分的附图示出本发明的实施例,并与本说明一起用来解释本发明的原理。在附图中:
图1是示出根据本发明一个实施例的光学记录/再现装置与外围设施结合使用的示例性实施例的示意图;
图2是示出根据本发明一个实施例的记录在作为记录介质的光盘中的文件结构的示意图;
图3是示出根据本发明一个实施例的作为记录介质的光盘的数据记录结构的示意图;
图4是用来理解根据本发明一个实施例的辅助视频的概念的示意图;
图5是示出根据本发明一个实施例的光学记录/再现装置的总体配置的方框图;
图6是解释根据本发明一个实施例的回放系统的示意图;
图7是示出根据本发明的辅助视频元数据的示例性实施例的示意图;
图8是示出根据本发明一个实施例的辅助视频子路径类型的种类的示意图;
图9A-9C分别为用于理解根据本发明实施例的辅助视频子路径类型的示意图;
图10是示出根据本发明一个实施例的AV解码器模型的方框图;
图11A-11C是用于理解根据本发明实施例的辅助视频时间线类型的示意图;以及
图12是示出根据本发明的数据再现方法的示例性实施例的流程图。
具体实施方式
下面将详细参考本发明的示例性实施例,其具体例子示于附图中。在任何可能的场合,在附图中始终使用相同的参考标号来表示相同或相似的部分。
在下面的说明中,将结合光盘作为示例性记录介质来描述本发明的示例性实施例。具体地说,为便于说明而将蓝光盘(BD)用作为一种示例性记录介质。然而,可以领会本发明的技术理念可与应用于BD等效地应用于例如HD-DVD的其它记录介质。
在实施例中普遍使用的“存储”是配备在光学记录/再现装置(图1)中的存储。该存储是用户能在其中自由地存储所需信息和数据以便后续使用这些信息和数据的元件。常用的存储有硬盘、系统存储器、闪存等。然而,本发明不局限于这些存储。
与本发明相关联地,“存储”也可用作存储与记录介质(例如BD)相关联的数据的装置。一般来说,存储在存储中的与记录介质相关联的数据是从外部下载的数据。
对于这类数据,可以领会部分地允许直接从记录介质读出的数据、或者与记录介质的记录和再现相关联地产生的系统数据(例如元数据)可被存储在存储中。
为便于说明,在下面的说明中,记录在记录介质中的数据将被称为“原始数据”,而存储在存储中的与记录介质相关联的数据将被称为“附加数据”。
另外,本发明中定义的“标题”表示与用户接触的再现单元。诸标题各自链接于特定对象。因此,记录在盘中与一标题相关联的流根据与该标题链接的对象中的命令或程序被再现。具体地说,为便于说明,在下面的说明中,在包含根据MPEG压缩方案的视频数据的标题当中,支持诸如无缝多角度和多层(multi story)、语言信任、导演剪辑、三部曲收集等特征的标题将被称为“高清晰度电影(HDMV)标题”。另外,在包括根据MPEG压缩方案的视频数据的标题当中,提供具有网络连接性的完全可编程应用环境以允许内容提供者创建高交互性的标题将被称为“BD-J标题”。
图1示出根据本发明一个实施例的光学记录/再现装置与外围设施结合使用的示例性实施例。
根据本发明一个实施例的光学记录/再现装置10能向或从具有不同格式的各种光盘记录或再现数据。如有必要,光学记录/再现装置10可被设计成具有仅针对特定格式的光盘(例如BD)的记录和再现功能,或单具有再现功能而无记录功能。然而,在下面的说明中,将结合例如用于回放BD的BD播放机或用于记录和回放BD的BD刻录机并计及BD与外围设施的兼容性——这是本发明中必须解决的——来描述光学记录/再现装置10。可以领会本发明的光学记录/再现装置10可以是能内建在计算机等设备中的驱动器。
本发明的光学记录/再现装置10不仅具有光盘30的记录和回放的功能,而且具有接收外部输入信号、处理接收的信号并通过外置显示器20以可视图像的形式将经处理的信号发送给用户的功能。尽管对于外部输入信号没有特别的限制,然而代表性的外部输入信号可以是基于数字多媒体广播的信号、基于因特网的信号等。具体地说,对基于因特网的信号,因特网上的合需数据可在通过光学记录/再现装置10下载后被使用,这是因为因特网是任何人都易于访问的媒体。
在下面的说明中,提供作为外部源的内容的人将被统称为“内容提供者(CP)”。
本发明中使用的“内容”可以是标题的内容,并且在此情形中“内容”表示相关联的记录介质的作者提供的数据。
下文中将详细描述原始数据和附加数据。例如,某个标题的经多路复用的AV流可被记录在光盘中作为该光盘的原始数据。在这种情形中,可经由因特网提供与原始数据的音频流(例如英语)不同的音频流(例如韩语音频流)作为附加数据。一些用户可能希望从因特网下载与附加数据对应的音频流(例如韩语音频流),将所下载的音频流随对应于原始数据的AV流一起再现,或单独再现附加数据。为此希望提供一种能够应用户的请求确定原始数据与附加数据之间的关系、并基于确定结果执行原始数据和附加数据的管理/再现的系统化方法。
如上所述,为便于说明,记录在盘中的信号已被称为“原始数据”,而存在于盘外的信号已被称为“附加数据”。然而,原始数据和附加数据的定义只是为了根据数据获取方法来分类本发明中可使用的数据。因此,原始数据和附加数据不应当局限于特定的数据。任何属性的数据皆可用作为附加数据,只要它们存在于记录有原始数据的光盘外并与原始数据有关系即可。
为了实现用户的请求,原始数据和附加数据各自必须具有彼此之间存在关系的文件结构。下文将结合图2和图3对在BD中可使用的文件结构和数据记录结构进行说明。
图2示出根据本发明一个实施例的用于再现和管理记录在BD中的原始数据的文件结构。
本发明的文件结构包括根目录、以及在根目录下出现的至少一个BDMV目录BDMV。在BDMV目录BDMV中,存在索引文件“index.bdmv”和对象文件“MovieObject.bdmv”作为具有用于保证与用户的交互性的信息的通用文件(上层文件)。本发明的文件结构还包括具有关于实际记录在盘中的数据的信息以及关于用来再现所记录数据的方法的信息的目录,即播放列表目录PLAYLIST、剪辑信息目录CLIPINF、流目录STREAM、辅助目录AUXDATA、BD-J目录BDJO、元数据目录META、备份目录BACKUP、和JAR目录。下文将详细阐述上述目录以及包含在这些目录中的文件。
JAR目录包括JAVA程序文件。
元数据目录META包括关于数据的数据的文件,即元数据文件。这种元数据文件可包括盘库的搜索文件和元数据文件。这类元数据文件用于在记录和再现数据期间高效率地搜索和管理数据。
BD-J目录BDJO包括用于再现BD-J标题的BD-J对象文件。
辅助目录AUXDATA包括用于回放盘的附加数据文件。例如,辅助目录AUXDATA可包括当执行交互图形功能时提供声音数据的“Sound.bdmv”、以及用于在盘回放期间提供字体信息的“11111.otf”和“99999.otf”文件。
流目录STREAM包括根据特定格式记录在盘中的多个AV流文件。这些流最普遍地以基于MPEG-2的传输分组的格式被记录。流目录STREAM将“*.m2ts”作为流文件的扩展名(例如01000.m2ts、02000.m2ts、……)。具体地说,视频/音频/图形信息的多路复用流被称为“AV流”。一个标题由至少一个AV流文件构成。
剪辑信息(clip-info)目录CLIPINF包括剪辑信息文件01000.clpi、02000.clpi、……,它们各自对应于流目录STREAM中所包含的流文件“*.m2ts”。具体地说,剪辑信息文件“*.clpi”记录有流文件“*.m2ts”的属性信息和定时信息。每个剪辑信息文件“*.clpi”以及与该剪辑信息文件“*.clpi”对应的流文件“*.m2ts”被统称为“剪辑”。即,一个剪辑表示包括一个流文件“*.m2ts”以及与该流文件“*.m2ts”对应的一个剪辑信息文件“*.clpi”两者的数据。
播放列表目录PLAYLIST包括多个播放列表文件“*.mpls”。“播放列表”表示剪辑的播放区间的组合。每个播放区间被称为一个“播放项”。每个播放列表文件“*.mpls”包括至少一个播放项,并且可包括至少一个子播放项。每个播放项和子播放项包括关于要被再现的特定剪辑的再现开始时间IN-Time和再现结束时间OUT-Time的信息。因此,播放列表可以是播放项的组合。
至于播放列表文件,使用播放列表文件中的至少一个播放项再现数据的过程被定义为“主路径”,而使用一个子播放项再现数据的过程被定义为“子路径”。主路径提供关联播放列表的主呈现,而子路径提供与主呈现相关联的辅助呈现。每个播放列表文件应当包括一个主路径。每个播放列表文件还包括至少一个子路径,其数目是根据子播放项的存在与否而确定的。因此,每个播放列表文件是整个再现/管理文件结构中的基础再现/管理文件单元,用来基于一个或多个播放项的组合来再现一个或多个合需的剪辑。
与本发明相关联地,通过主路径再现的视频数据被称为主视频,而通过子路径再现的视频数据被称为辅助视频。光学记录/再现装置同时再现主视频和辅助视频的功能也被称为“画中画(PiP)”。在本发明中,基于子路径的特征来分类用来再现辅助视频的子路径的类型,并提供指示经分类的子路径类型的信息。这将结合图7予以详细说明。
备份目录BACKUP将文件的拷贝存储在上述文件结构中,具体地说是记录有与盘的回放相关联的信息的文件的拷贝,例如索引文件“index.bdmv”、对象文件“MovieObject.bdmv”和“BD-Jobject.bdmv”、单元键文件、播放列表目录PLAYLIST中的所有播放列表文件“*.mpls”、以及剪辑信息目录CLIPINF中的所有剪辑信息文件“*.clpi”的拷贝。考虑到当上述文件中有任何文件损坏或丢失时,会引起与盘回放相关联的致命出错,因此备份目录BACKUP被适应性地配置成为备份目的而单独地存储文件拷贝。
同时,可以领会本发明的文件结构不局限于上述名称和位置。即上述目录和文件不应当通过其名称和位置予以理解,而是应当通过其意义予以理解。
图3示出根据本发明一个实施例的光盘的数据记录结构。在图3中示出了与盘中的文件结构相关联的信息的记录结构。参照图3,可以看出盘包括记录有用来管理整个文件的系统信息的文件系统信息区,记录有索引文件、对象文件、播放列表文件、剪辑信息文件、和元文件(这些文件是再现记录的流“*.m2ts”所必需)的区,记录有各自由音频/视频/图形数据或STREAM文件构成的流的流区、以及记录有JAVA程序文件的JAR区。当从盘的内圆周开始观察时,这些区以上述次序编排。
在盘中,存在记录用于再现流区中的内容的文件信息的区。该区被称为“管理区”。文件系统信息区和数据库区被包含在管理区中。
图3中诸区仅为示例性目的而示出和描述。应当领会本发明不局限于图3的区编排。
根据本发明,主视频和/或辅助视频的流数据被存储在流区内。在本发明中,辅助视频可多路复用在与主视频相同的流中,或者可多路复用在与主视频不同的流中。在本发明中,指示用来再现辅助视频的子路径的类型——即子路径类型——的信息被存储在管理区内。可基于辅助视频被多路复用在其中的流的种类来分类子路径类型。同时,根据本发明,关于辅助视频元数据的时间线类型的信息被存储在管理区中。辅助视频元数据是用于管理辅助视频再现的数据。时间线类型信息表示在其上定义元数据的时间线。下面结合图7和图11A-11C来详细说明元数据和时间线类型。
图4是用来理解根据本发明实施例的辅助视频的概念的示意图。
本发明提供一种与主视频数据同时再现辅助视频数据的方法。例如,本发明提供一种允许PiP应用、尤其是有效地执行PiP应用的光学记录/再现装置。
在如图4所示的主视频410的再现期间,可能需要通过与主视频410所用的相同的显示器20输出与主视频410相关联的其它视频数据。根据本发明,可以实现这样的PiP应用。例如,在回放电影或纪录片期间,可向用户提供导演的评注或与摄影过程相关联的插曲。在这种情形中,评注或插曲的视频就是辅助视频420。辅助视频420可从主视频410再现的开头起与主视频410同时地再现。辅助视频420的再现可开始于主视频410再现的中间时段。也可根据再现过程来显示辅助视频420并同时改变辅助视频420在屏幕上的位置或尺寸。也可实现多个辅助视频420。在这种情形中,可在主视频410的再现期间,彼此独立地再现诸辅助视频420。可随关联于主视频410的音频410a一起再现主视频410。类似地,可随关联于辅助视频420的音频420a一起再现辅助视频420。
为了再现辅助视频。其中多路复用有辅助视频的AV流被识别出,并且将辅助视频从该AV流中分离出来以便解码该辅助视频。相应地,提供关于适用于该辅助视频的编码方法以及其中编码有该辅助视频的流的种类的信息。另外,提供关于主视频和辅助视频是否应当被彼此同步的信息。另外,提供关于辅助视频的组成以及关于在其上组成该辅助视频的时间线的信息。本发明提供一种能够满足上述要求并高效率地随主视频一起再现辅助视频的优选方法。下文中将结合图5和其余附图对本发明进行详细说明。
图5示出根据本发明的光学记录/再现装置10的整体配置的示例性实施例。
如图5所示,光学记录/再现装置10主要包括拾取头11、伺服14、信号处理器13、和微处理器16。拾取头11再现记录在光盘中的原始数据和管理数据。管理数据包括再现管理文件信息。伺服14控制拾取头11的操作。信号处理器13从拾取头11接收再现的信号,并将接收到的再现信号恢复成合需的信号值。信号处理器13还将例如主视频和辅助视频的要被记录的信号分别调制成可记录在光盘中的信号。微处理器16控制拾取头11、伺服14和信号处理器13的操作。拾取头11、伺服14、信号处理器13、和微处理器16也被统称为“记录/再现单元”。根据本发明,记录/再现单元在控制器12的控制下从光盘30或存储15读取数据,并将所读取的数据发送给AV解码器17b。即,从再现的角度看,记录/再现单元起到读取数据的读取器单元的作用。记录/再现单元还从AV编码器18接收经编码的信号,并将接收到的信号记录在光盘30中。因此,记录/再现单元可将视频和音频数据记录在光盘30中。
控制器12根据用户命令下载存在于光盘30之外的附加数据,并将附加数据存储在存储15中。控制器12还应用户请求再现存储在存储15中的附加数据和/或光盘30中的原始数据。根据本发明,控制器12基于其中多路复用有辅助视频的流的种类、以及该辅助视频是否与主视频同步来生成子路径类型信息,并执行将子路径类型信息随视频数据一起记录于光盘30中的控制操作。控制器12还生成指示由辅助视频元数据参考的时间线的时间线类型信息,并执行将时间线类型信息随元数据一起记录于光盘30中的控制操作。
光学记录/再现装置10还包括回放系统17,用来在控制器12的控制下解码数据并将经解码的数据提供给用户。回放系统17包括用于解码AV信号的AV解码器17b。回放系统17还包括用于分析与特定标题的回放相关联的对象命令或应用和经由控制器12输入的用户命令、并基于分析结果确定回放方向的播放机模型17a。在一个实施例中,播放机模型17a可实现为包括AV解码器17b。在这种情形中,回放系统17本身是播放机模型。AV解码器17b可包括各自关联于不同种类的信号的多个解码器。
同样包含在本发明的光学记录/再现装置10中的AV编码器18将输入信号转换成例如MPEG2传输流的特定格式的信号,并将经转换的信号发送至信号处理器13,以允许将输入信号记录在光盘30中。
图6是解释根据本发明一个实施例的回放系统的示意图。根据本发明,该回放系统能同时再现主视频和辅助视频。“回放系统”表示由设置在光学记录/再现装置中的程序(软件)和/或硬件构成的联合式再现处理装置。即,该回放系统是一种不仅能回放加载于光学记录/再现装置中的记录介质而且能再现和管理存储于该装置的存储中(例如在从记录介质的外部下载之后)的与该记录介质相关联的数据的系统。
具体地说,如图6所示,回放系统17可包括用户事件管理器171、模块管理器172、元数据管理器173、HDMV模块174、BD-J模块175、回放控制引擎176、呈现引擎177和虚拟文件系统40。下面将详细描述这种配置。
作为用于再现HDMV标题和BD-J标题的单独的再现处理/管理装置,针对HDMV标题的HDMV模块174和针对BD-J标题的BD-J模块175被彼此独立地构造。HDMV模块174和BD-J模块175各自具有接收包含在关联的对象“电影对象”或“BD-J对象”中的命令或程序以及处理接收到的命令或程序的控制功能。HDMV模块174和BD-J模块175各自可从回放系统的硬件配置分离出关联的命令或应用,以实现命令或应用的可移植性。为了实现命令的接收和处理,HDMV模块174包括命令处理器174a。为了实现应用的接收和处理,BD-J模块175包括Java虚拟机(VM)175a和应用管理器175b。
Java VM 175a是其中执行应用的虚拟机。该应用管理器175b包括用于管理在BD-J模块175中处理的应用的寿命周期的应用管理功能。
模块管理器172不仅起到分别向HDMV模块174和BD-J模块175发送用户命令的作用,而且还起到控制HDMV模块174和BD-J模块175的操作的作用。回放控制引擎176根据来自HDMV模块174或BD-J模块175的回放命令分析实际记录在盘中的播放列表文件,并基于分析结果执行回放功能。呈现引擎177解码由回放控制引擎176与其再现相关联地管理的特定流,并将经解码的流显示在显示画面上。具体地说,回放控制引擎176包括:回放控制功能176a,用来管理所有回放操作;以及播放机寄存器176b,用来存储关于播放机的回放状态和回放环境的信息(播放机状态寄存器(PSR)和通用寄存器(GRP)的信息)。在某些情形中,回放控制功能176a表示回放控制引擎176本身。
HDMV模块174和BD-J模块175分别以独立方式接收用户命令。HDMV模块174和BD-J模块175的用户命令处理方法同样彼此独立。为了将用户命令传递给HDMV模块174和BD-J模块175中相关联的那个,应当使用单独的传递手段。根据本发明,这种功能是由用户事件管理器171实行的。因此,当用户事件管理器171接收到通过用户操作(UO)控制器171a生成的用户命令时,用户事件管理器将接收到的用户命令发送给模块管理器172或UO控制器171a。另一方面,当用户事件管理器171接收到通过键事件生成的用户命令时,用户事件管理器将接收到的用户命令发送给BD-J模块175中的Java VM 175a。
本发明的回放系统17还可包括元数据管理器173。元数据管理器173向用户提供盘库和增强的搜索元数据应用。元数据管理器173在用户的控制下执行标题的选择。元数据管理器173也可向用户提供记录介质和标题元数据。
根据本发明的回放系统的模块管理器172、HDMV模块174、BD-J模块175和回放控制引擎176能够以软件方式执行合需的处理。实践中,使用软件的处理相比使用硬件配置的处理在设计上具有优势。当然,一般来说呈现引擎177、解码器19和平面是使用硬件设计的。尤其,各自使用软件执行合需处理的构成要素(例如由附图标记172、174、175和176标示的构成要素)可构成控制器12的一部分。因此,应当注意本发明的上述构成和配置是在其意义的基础上来理解的而不局限于其实现方法,诸如硬件或软件实现。这里,“平面”表示用于解释主视频、辅助视频、PG(呈现图形)、IG(交互图形)、文本字幕的覆盖过程的概念模型。根据本发明,辅助视频平面被编排在主视频平面的前面。因此,在被解码后输出的辅助视频呈现在辅助视频平面上。
图7示出根据本发明的辅助视频元数据的示例性实施例。
根据本发明,辅助视频的再现是使用元数据进行管理的。所述元数据包括关于辅助视频的再现时间、再现大小和再现位置的信息。下面将结合在其中管理数据是PiP元数据的例子对管理数据进行描述。
PiP元数据被包括在作为一种再现管理文件的播放列表中。图7示出包含在管理主视频再现的播放列表的“扩展数据(ExtensionData)”块中的PiP元数据块。PiP元数据可包括至少一个块头部“block_header[k]”910和块数据“block_data[k]920”。块头部和块数据的数目是根据存储在PiP元数据中的元数据块条目的数目确定的。块头部910包括相关联的元数据块的头部信息。块数据920包括相关联的元数据块的数据信息。
块头部910可包括指示播放项识别信息的字段(下文中称之为“PlayItem_id[k]”)以及指示辅助视频流识别信息的字段(下文中称之为“secondary_video_stream_id[k]”)。“PlayItem_id[k]”是与包含其中列有由“secondary_video_stream_id[k]”指向的“secondary_video_stream_id”条目的STN表的播放项对应的值。“PlayItem_id”值在播放列表文件的播放列表块中给出。在PiP元数据中,PiP元数据中的“PlayItem_id”条目按“PlayItem_id”的升序分类排序。“secondary_video_stream_id[k]”被用来识别一子路径以及施加相关联的块数据920的辅助视频流。即,可在对应于“PlayItem_id[k]”的“PlayItem”的STN表中识别出与“secondary_video_stream_id[k]”对应的流条目。由于流条目记录有与辅助视频相关联的子路径识别信息的值,因此光学记录/再现装置10能基于记录值识别用于再现辅助视频的子路径。播放列表块包括子路径块。
根据本发明,是基于其中多路复用有辅助视频的流的种类、以及该子路径是否与关联于该子路径的主路径同步来分类用于再现辅助视频的子路径的类型。根据本发明,关于子路径类型的信息也被记录在数据库文件中。根据本发明的PiP应用模型主要被分成三种类型。因此,根据本发明,用来再现辅助视频的子路径的种类,即子路径类型,是考虑这三种模型来分类的。
参照图8,第一子路径类型与将辅助视频编码于与主视频不同的流中(例如不与主视频多路复用——也被称为外多路复用out-of-mux)并且用来再现辅助视频的子路径与用来再现主视频的主路径同步的情形(810)相关联。第二子路径类型与将辅助视频编码于与主视频不同的流中并且用来再现辅助视频的子路径与用来再现主视频的主路径异步的情形(820)相关联。第三子路径类型与将辅助视频编码于与主视频相同的流中(例如与主视频多路复用——也被称为内多路复用In-mux)并且用来再现辅助视频的子路径与用来再现主视频的主路径同步的情形(830)相关联。下面结合图9A-9C对根据本发明的这些子路径类型进行详细说明。
图9A-9C是用于理解根据本发明的子路径类型的示意图。
图9A示出其中将辅助视频编码于与主视频的不同的流中并且子路径与主路径同步的的情形(810)。如上所述,将辅助视频多路复用在与主视频的不同的流中的情形被称为“外多路复用”类型。
参照图9A,用于管理主视频和辅助视频的播放列表包括用来再现主视频的一个主路径以及用来再现辅助视频的一个子路径。此主路径由四个播放项(“PlayItem_id”=0、1、2、3)构成,而子路径由多个子播放项构成。此子路径与主路径同步。详细地说,是使用识别与每个子播放项相关联的播放项的信息字段“sync_PlayItem_id”以及指示子播放项在播放项中的呈现时间的呈现时戳信息“sync_start_PTS_of_PlayItem”来使辅助视频与主路径同步。即,当播放项的呈现点到达由显示时戳信息所指向的值时,就起动相关子播放项的呈现。由此,通过一个子路径实现的辅助视频的再现是于主视频再现期间的一个时刻起动的。
在这种情形中,由于辅助视频多路复用在与主视频不同的流中,因此播放项和子播放项各自指向不同的剪辑。播放项和子播放项各自包括关于要被再现的特定剪辑的再现开始时间IN-Time和再现结束时间OUT-Time的信息。相应地,相关播放项和子播放项所指向的剪辑被提供给AV解码器17b。
参照图10,它示意地示出根据本发明的AV解码器模型,上述剪辑的流文件以传输流(TS)的形式被提供给AV解码器17b。在本发明中,通过主路径再现的AV流被称为主传输流(下文中将其称为“主流”),而主流以外的AV流被称为子传输流(下文中将其称为“子流”)。因此,主视频和辅助视频分别作为主流和子流被提供给AV解码器17b。在AV解码器17b中,来自光盘30的主流通过开关元件到达缓冲器RB1,并且被缓冲的主流由源拆分组器710拆分组。包含在经拆分组的AV流中的数据在根据数据分组种类在PID(分组标识符)过滤器1720a中从经拆分组的AV流中分离出来后被提供给解码器730a到730g中相关联的那一个。如图所示,来自PID过滤器1720a的分组在被解码器730b到730g接收前可通过另一开关元件。
另一方面,来自光盘30或本地存储15的每个子流通过开关元件到达缓冲器RB2,被缓冲的子流由源拆分组器710b拆分组。包含在经拆分组的AV流中的数据在根据数据分组的种类在PID过滤器2720b中的经拆分组的AV流中分离出来后被提供给解码器730a代730g中相关联的那一个。如图所示,来自PID过滤器2720b的分组可在被解码器730b到730f接收前通过另一开关元件。
即,是在主视频解码器730a中解码主视频,并且在主音频解码器730e中解码主音频。另外,PG(呈现图形)、IG(交互图形)、辅助音频、文本字幕分别是在PG解码器730c、IG解码器730b、辅助音频解码器730f和文本解码器730g中被解码。
经解码的主视频、辅助视频、PG和IG分别由主视频平面740a、辅助视频平面730b、呈现图形平面740c以及交互图形平面740d等再现。显示图形平面740c也可再现于文本解码器730g中解码的图形数据。经解码的主音频和辅助音频在混音器中被混音后输出。由于在图9A的子路径类型中,用来再现辅助视频的子路径与主路径同步,因此在这种情形中控制器12执行将辅助视频与主视频同步地输出的控制操作。
图9B示出将辅助视频编码在与主视频不同的流中并且子路径与主路径异步的情形(820)。与图9A的子路径类型相似,辅助视频流被多路复用成与要基于相关联的播放项再现的剪辑分离的状态。然而,图9B的子路径类型与图9A的子路径类型的区别在于子路径的呈现可在主路径的时间线上的任何时刻起动。
参照图9B,用于管理主视频和辅助视频的播放列表包括用来再现主视频的一个主路径和用来再现辅助视频的一个子路径。主路径由三个播放项构成(“PlayItem_id=0,1,2”),而子路径由一个子播放项构成。通过子路径再现的辅助视频与主路径异步。也就是说,即使子播放项包括用于识别与该子播放项关联的播放项的信息以及指示该子播放项在播放项中的呈现时间的显示时戳信息,这些信息在图9B的子路径类型中也是无效的。相应地,光学记录/再现装置10可无视上述用来将主路径和子路径同步的信息地运作。由此,用户能在重现主视频期间的任何时刻观看辅助视频。
在这种情形中,由于辅助视频被编码在与主视频不同的流中,因此主视频作为主流被提供给AV解码器17b,而辅助视频作为子流被提供给AV解码器17b,如上文中结合图9A所描述的那样。
图9C示出将辅助视频编码在与主视频相同的流中并且子路径与主路径同步的情形(830)。图9C的子路径类型与图9A和9B的子路径类型的区别在于辅助视频被多路复用在与主视频相同的AV流中。如上所述,辅助视频多路复用在与主视频相同的流中的情形被称为“内多路复用”类型。
参照图9C,用于管理主视频和辅助视频的播放列表包括一个主路径和一个子路径。主路径由四个播放项构成(“PlayItem_id”=0,1,2,3),而子路径由多个子播放项构成。构成子路径的每个子播放项包括引用识别与该子播放项相关联的播放项的信息、以及指示该子播放项在播放项中的呈现时间的呈现时戳信息。如前面结合图9A所描述的,使用了上述信息,每个子播放项得以与关联的播放项同步。由此辅助视频与主视频同步。
在图9C的子路径类型中,构成主路径的每个播放项和构成子路径的子播放项中相关联的一个或多个指向同一剪辑。因此,辅助视频随主视频一起被提供给AV解码器17b作为主流。由包含主视频和辅助视频的经分组数据构成的主流被源拆分组器710a拆分组,并随后被发送至PID过滤器1720a。诸数据分组根据关联的PID在PID过滤器1720a中分别从经拆分组的数据中被分离出来,并随后被送至解码器730a到730g中关联的那一个以解码。即,主视频在主视频解码器730a中被解码后从主视频解码器730a输出。辅助视频在辅助视频解码器730b中被解码后从辅助视频解码器730b中输出。在这种情形中,控制器12执行与主视频同步地显示辅助视频的控制操作。
主流和子流可从记录介质30或存储15向AV解码器17b提供。在主视频和辅助视频分别被编码在不同剪辑中的情形中,可将主视频记录在记录介质中以提供给用户,并可从记录介质30之外将辅助视频下载到存储15。当然,与上述情形相反的情形也是可能的。然而,在主视频和辅助视频两者均被存储在记录介质30中的场合,可在其再现前将主视频和辅助视频中的一个拷贝至存储15,以允许同时再现主视频和辅助视频。在主视频和辅助视频两者均被编码于同一剪辑中的情形中,在将主视频和辅助视频记录于记录介质30中之后再提供主视频和辅助视频。在这种情形中,主视频和辅助视频两者均可从记录介质30之外下载。
参照图7,块头部910也可包括指示由相关联的PiP元数据参考的时间线的信息(在下文中将其称为“pip_timeline_type”)。下面结合图11A-11C详细描述根据本发明的PiP时间线类型。
图11A-11C是用于理解根据本发明实施例的辅助视频时间线类型的示意图。
块数据920可包括指示PiP元数据所放点的时戳信息(下文中称其为“pip_metadata_time_stamp”)。根据由上述“pip_metadata_time_stamp[i]”的条目参考的时间线类型,即由PiP元数据所参考的时间线的类型对“pip_timeline_type[k]”进行分类。。下文中将参照“pip_timeline_type[k]”和“pip_metadata_time_stamp[i]”对PiP时间线类型进行详细描述。
在图11A的PiP时间线类型中,用来再现辅助视频的子路径与主路径同步,并且“pip_metadata_time_stamp”的条目参考由PiP元数据指示的播放项的时间线。在图11A中,“pip_metadata_time_stamp”指向相关联的子播放项区间被投射在由“PlayItem_id[k]”指向的播放项的时间线上的区间的呈现时间。在图11A的时间线类型中,“pip_metadata_time_stamp[0]”和“pip_metadata_time_stamp[m]”放在相关联的子播放项区间各自被投射在由“playitem_id[k]”指向的播放项的时间线上的每个区间的起点101a和105a上。
块数据920包括辅助视频组合信息的至少一个块(下文中将其称为“pip_composition_metadata”),其数目是由“pip_metadata_time_stamp”的数目确定的。第i个“pip_composition_metadata”是在“pip_metadata_time_stamp[i]”102a与“pip_metadata_time_stamp[i+1]”103a之间是有效的辅助视频组合信息。一个块数据920中的最末“pip_composition_metadata”是直到由包含在PiP元数据中的“secondary_video_stream_id[k]”指示的子路径的呈现结束时间104a为止有效的。
辅助视频组合信息是指示辅助视频的再现位置和尺寸的信息。参照图7,辅助视频组合信息可包括辅助视频的位置信息以及辅助视频的尺寸信息(下文中称其为“pip_scale[i]”)。辅助视频的位置信息包括辅助视频的水平位置信息(下文中将其称为“pip_horizontal_position[i]”)以及辅助视频的垂直位置信息(下文中将其称为“pip_vertical_position[i]”)。信息“pip_horizontal_position”表示当从屏幕原点出发观察时显示在屏幕上的辅助视频的水平位置,而信息“pip_vertical_position”表示当从屏幕原点出发观察时显示在屏幕上的辅助视频的垂直位置。辅助视频在屏幕上的显示尺寸和位置是由尺寸信息和位置信息确定的。
在图11A的时间线类型中,由上述“secondary_video_stream_id[k]”指示的子路径对应于参照图9A或9C描述的子路径类型810或830,这是因为用来再现辅助视频的子路径,即PiP呈现路径与主路径同步。
在图11A的时间线类型中,辅助视频参考主路径的时间线,这是因为辅助视频与通过主路径呈现的播放项同步地再现。即,当主路径跳转或移回至某个位置时,根据与主路径再现已跳转或移回至的时刻相关联的“pip_metadata_time_stamp”的位置和比例信息来再现辅助视频。因此,辅助视频流沿主路径的时间线再现。
图11B示出PiP呈现路径与主路径异步并且“pip_metadata_time_stamp”的条目参考子路径的时间线的情形。在图11B的实施例中,由上述“secondary_video_time_stamp_id[k]”指示的子路径对应于结合图9B描述的子路径类型820,这是因为PiP呈现路径与主路径异步。在图11B的时间线类型中,“pip_metadata_time_stamp”指示由包含在PiP元数据中的“secondary_video_stream_id[k]”指示的子播放项的区间的呈现时间。在该时间线类型中,“pip_metadata_time_stamp[0]”被设置在子播放项的起点101b上。
在图11B的时间线类型中,辅助视频通过子路径得以再现,而不居于通过主路径进行的再现过程如何,这是因为辅助视频参考子播放项的时间线。即,图11B的时间线类型与图11A的时间线类型的区别在于,即使主路径的呈现点被改为通过主路径再现的播放项的时间线上的某个点,辅助视频的显示位置和比例也不改变。
在图11B的时间线类型中,如上所述,PiP呈现路径与主路径异步。因此,由上述“secondary_video_time_stamp_id[k]”指示的子路径对应于结合图9B描述的子路径类型820。
图11C示出PiP呈现路径与主路径异步并且包含在PiP元数据中的“PlayItem_id[k]”参考的播放项的时间线被“pip_metadata_time_stamp”的条目所参考的情形。与图11A的时间线类型相似,在图11C的时间线类型中也是参考播放项的时间线。因此,“SubPlayItem_IN_time”被投射在播放项的时间线上的点102c处。在图11C的时间线类型中,“pip_metadata_time_stamp”指示由“PlayItem_id[k]”指示的播放项的区间的呈现时间。在图11C的时间线类型中,“pip_metadata_time_stamp[0]”被设置在由“PlayItem_id[k]”指示的播放项的区间的起点101c处,这是因为PiP元数据参考由“PlayItem_id[k]”指示的播放项的时间线。图11C的时间线类型与图11A的时间线类型相似。在图11C的时间线类型的情形中,“pip_metadata_time_stamp[0]”被设置在播放项的区间的起点101c出。然而,在图11A的时间线类型的情形中,“pip_metadata_time_stamp[0]”被设置在相关联的子播放项区间被投射在由“playitem_id[k]”指向的播放项的时间线上的区间的起点101a处。
在图11C的时间线类型中,当主路径的呈现点跳转或移回到某个位置时,在该位置的元数据就被施加于辅助视频。这是因为PiP元数据在图11C的时间线类型中参考播放项的时间线。参照图11C,可以看出例如在与“pip_metadata_time_stamp[i+1]”对应的“pip_composition_metadata[i+1]”已被施加于辅助视频的状态下当主路径的呈现位置从“pip_metadata_time_stamp[i+1]”的位置移回到“pip_metadata_time_stamp[i]”的位置时,与“pip_metadata_time_stamp[i]”对应的“pip_composition_metadata[i]”被施加于辅助视频。
在图11C的时间线类型中,“pip_metadata_time_stamp[i+1]”直到当前播放项的结束时间(out time)104c为止保持有效,这是因为PiP元数据指示由“PlayItem_id[k]”指向的播放项的区间中的呈现时间。然而在子播放项结束时间103c之后,不再显示辅助视频,这是因为一个块数据920中的最末的“pip_composition_metadata”直到由“secondary_video_stream_id[k]”指示的子路径的呈现结束时间为止是有效的。
在图11C的时间线类型中,由上述“secondary_video_time_stamp_id[k]”指示的子路径与结合图9B描述的子路径类型820对应,这是因为PiP呈现路径与主路径异步。
尽管在图7的实施例中,PiP元数据的再现时间信息和组合信息已被描述为包含在播放列表中,然而它们也可以被包含在实现PiP的辅助视频流的头部中。
图12示出根据本发明的数据再现方法的一个示例性实施例。
在生成数据再现命令的情形中,可以由拾取头11构成的读取器单元从记录介质30或存储15读取数据。控制器12检查包含在数据中的PiP元数据。基于PiP元数据,控制器12检查用于再现辅助视频的子路径的子路径类型以及PiP元数据所参考的时间线类型(S1210)。
之后,将PiP元数据沿基于时间线类型识别出的时间线(播放项或子播放项的时间线)施加于辅助视频(S1220)。参照图11A,是从对应于“pip_metadata_time_stamp[0]”的“pip_composition_metadata”开始将PiP元数据施加于辅助视频,这是因为“pip_metadata_time_stamp”指示在子播放项的呈现区间透射在播放项上的区间里的呈现时间。在“pip_metadata_time_stamp[i]”102a,与“pip_metadata_time_stamp[i]”102a对应的“pip_composition_metadata”,具体就是“pip_horizontal_position[i]”、“pip_vertical_position[i]”和“pip_scale[i]”,被施加于辅助视频。“pip_horizontal_position[i+1]”、“pip_vertical_position[i+1]”和“pip_scale[i+1]”在从“pip_metadata_time_stamp[i+1]”103a至子播放项结束时间104a的区间里被施加于辅助视频。
基于以上述方式施加的PiP元数据,辅助视频被显示在主视频上。此时,控制器12确定用来再现辅助视频的子路径是否与用来再现主视频的主路径同步(S1230)。在子路径与图9A或9C的子路径类型对应的情形中,控制器12执行与主视频同步地显示辅助视频的控制操作(S1240)。另一方面,在子路径与图9B的子路径类型对应的情形中,不必使辅助视频与主视频同步。相应地,在这种情形中,控制器12可根据用户的请求在任何时间执行PiP应用。
在子路径与图9A或9B的子路径类型对应的情形中,将辅助视频作为子流的一部分提供给AV解码器17b。另一方面,在子流与图9C的子路径类型对应的情形中,将辅助视频作为主流的一部分提供给AV解码器17b。
根据本发明,用于再现辅助视频的方法是根据子路径类型和辅助视频所用的元数据的时间线类型而改变的。因此,其优势在于能高效率地随主视频一起再现辅助视频,并实现更为多样的辅助视频。
从上面的说明可知,根据本发明的记录介质、数据再现方法和装置、以及数据记录方法和装置,可与主视频同步地再现辅助视频。另外,能高效率地执行再现。因此,其优势在于内容提供者能编撰更为多样的内容,以使用户能体验到更为多样的内容。
工业应用性
本领域内技术人员可以清楚知道可对本发明作出各种修改和变形而不会脱离本发明的精神或范围。因此,本发明旨在涵盖本发明的所有修改和变形。
Claims (40)
1.一种具有用于管理至少一个画中画呈现路径的再现的数据结构的记录介质,包括:
存储主视频流和辅助视频流的数据区,所述主视频流代表主呈现路径,所述辅助视频流代表相对所述主呈现路径的画中画呈现路径;以及
存储用来管理所述画中画呈现路径的再现的管理信息的管理区,所述管理信息基于所述辅助视频流是否与所述主视频流同步来指示所述画中画呈现路径的类型。
2.如权利要求1所述的记录介质,其特征在于,所述管理信息包括子路径类型信息字段,所述子路径类型信息字段指示所述辅助视频流是否为同步类型的画中画呈现路径和异步类型的画中画呈现路径之一。
3.如权利要求1所述的记录介质,其特征在于,所述管理信息还指示所述辅助视频流是否与所述主视频流多路复用。
4.如权利要求1所述的记录介质,其特征在于,所述管理信息包括指示多个画中画呈现路径类型之一的子路径类型信息字段,并且所述类型中的至少一个指示所述辅助视频流是否与所述主视频流同步。
5.如权利要求4所述的记录介质,其特征在于,一个类型指示所述辅助视频流与所述主视频流同步、并且所述辅助视频流与所述主视频流多路复用。
6.如权利要求4所述的记录介质,其特征在于,一个类型指示所述辅助视频流与所述主视频流同步、并且所述辅助视频流不与所述主视频流多路复用。
7.如权利要求4所述的记录介质,其特征在于,一个类型指示所述辅助视频流不与所述主视频流同步、并且所述辅助视频流不与所述主视频流多路复用。
8.如权利要求4所述的记录介质,其特征在于,
第一类型指示所述辅助视频流与所述主视频流同步并且所述辅助视频流与所述主视频流多路复用,第二类型指示所述辅助视频流与所述主视频流同步并且所述辅助视频流不与所述主视频流多路复用,第三类型指示所述辅助视频流不与所述主视频流同步并且所述辅助视频流不与所述主视频流多路复用;并且
所述数据区在所述子路径类型信息字段指示所述第一类型的情况下将所述主视频流和所述辅助视频流存储在单个文件中,在所述子路径类型信息字段指示所述第二类型的情况下将所述主视频流和所述辅助视频流存储在分离的文件中,并且在所述子路径类型信息字段指示所述第三类型的情况下将所述主视频流和所述辅助视频流存储在分离的文件中。
9.如权利要求1所述的记录介质,其特征在于,所述管理信息进一步指示所述辅助视频流是否被存储在所述数据区中与主视频流相同的文件中。
10.一种具有用于管理至少一个画中画呈现路径的再现的数据结构的记录介质,包括:
存储主视频流和辅助视频流的数据区,所述主视频流代表主呈现路径,所述辅助视频流代表相对于所述主呈现路径的画中画呈现路径;以及
存储用来管理所述画中画呈现路径的再现的管理信息的管理区,所述管理信息指示所述辅助视频流是否与所述主视频流同步。
11.如权利要求10所述的记录介质,其特征在于,所述管理信息还包括指示何时随所述主视频流显示所述辅助视频流的定时的呈现定时信息。
12.如权利要求10所述的记录介质,其特征在于,所述管理信息还包括识别所述主视频流中要随其再现所述辅助视频流的播放项的播放项标识符。
13.一种管理至少一个画中画呈现路径的再现的方法,包括:
再现用于管理至少画中画呈现路径的再现的管理信息,所述管理信息基于辅助视频流是否与主视频流同步而指示画中画呈现路径的类型,所述主视频流代表主呈现路径,所述辅助视频流代表相对主呈现路径的画中画呈现路径;以及
基于管理信息再现主视频流和辅助视频流。
14.如权利要求13所述的方法,其特征在于,如果管理信息指示辅助视频流是画中画呈现路径的同步形式,再现主视频流和辅助视频流的步骤再现主视频流和辅助视频流以同步地显示主视频流和辅助视频流。
15.如权利要求13所述的方法,其特征在于,如果管理信息指示辅助视频流是画中画呈现路径的异步类型,再现主视频流和辅助视频流的步骤再现主视频流和辅助视频流以则异步地显示主视频流和辅助视频流。
16.如权利要求13所述的方法,其特征在于,所述管理信息还指示辅助视频流是否与主视频流多路复用。
17.如权利要求16所述的方法,其特征在于,如果管理信息指示辅助视频流与主视频流多路复用,再现主视频流和辅助视频流的步骤从一个文件再现主视频流和辅助视频流。
18.如权利要求17所述的方法,其特征在于,再现主视频流和辅助视频流的步骤使用与用来解码主视频流的解码器不同的解码器解码辅助视频流。
19.如权利要求17所述的方法,其特征在于,再现主视频流和辅助视频流步骤包括:如果管理信息指示辅助视频流与主视频流多路复用,则将主视频流和辅助视频流从再现自记录介质的同一数据流中分离开。
20.如权利要求16所述的方法,其特征在于,如果管理信息指示辅助视频流不与主视频流多路复用,则再现主视频流和辅助视频流的步骤从分离的文件再现主视频流和辅助视频流。
21.如权利要求20所述的方法,其特征在于,再现主视频流和辅助视频流的步骤使用与用来解码主视频流的解码器不同的解码器解码辅助视频流。
22.如权利要求13所述的方法,其特征在于,管理信息包括指示多个画中画呈现路径类型中的一个的子路径类型信息字段,
第一类型指示辅助视频流与主视频流同步,并且辅助视频流与主视频流多路复用;
第二类型指示辅助视频流与主视频流同步,并且辅助视频流不与主视频流多路复用;
第三类型指示辅助视频流不与主视频流同步,并且辅助视频流不与主视频流多路复用。
23.如权利要求22所述的方法,其特征在于,如果子路径类型信息字段指示第一类型,则再现管理视频流和辅助视频流的步骤从一个文件再现主视频流和辅助视频流以同步地显示主视频流和辅助视频流,如果子路径类型信息字段指示第二类型,则从分离的文件再现主视频流和辅助视频流以同步地显示主视频流和辅助视频流,如果子路径类型信息字段指示第三类型,则从分离的文件再现主视频流和辅助视频流以异步地显示主视频流和辅助视频流。
24.如权利要求13所述的方法,其特征在于,主视频流和辅助视频流的比特率之和小于或等于一设定值。
25.如权利要求13所述的方法,其特征在于,辅助视频流具有与主视频流相同的扫描类型。
26.如权利要求13所述的方法,其特征在于,再现主视频流和辅助视频流的步骤使用与用来解码主视频流的解码器不同的解码器解码辅助视频流。
27.一种管理至少一个画中画呈现路径再现的装置,包括:
驱动器,所述驱动器被配置以驱动记录装置以从记录介质再现数据;以及
控制器,所述控制器被配置以控制驱动器以再现用于管理至少画中画呈现路径再现的管理信息,所述管理信息基于辅助视频流是否与主视频流同步而指示画中画呈现路径的类型,所述主视频流代表主呈现路径,辅助视频流代表相对于主呈现路径的画中画呈现路径;并且
所述控制器被配置以控制驱动器基于管理信息再现主视频流和辅助视频流。
28.如权利要求27所述的装置,其特征在于,所述管理信息还包括指示何时与主视频流一起显示辅助视频流的定时的显示定时信息。
29.如权利要求27所述的装置,其特征在于,所述管理信息还包括用来识别辅助视频流与之一起被再现的主视频流的播放项的播放项识别器。
30.如权利要求27所述的装置,其特征在于,还包括:
第一解码器,所述第一解码器被配置以解码主视频流;以及
第二解码器,所述第二解码器被配置以解码辅助视频流。
31.如权利要求30所述的装置,其特征在于,还包括:
至少一个过滤器,所述过滤器被配置以将主视频流和辅助视频流中的至少一个从再现自记录介质的数据中分离出来。
32.一种记录用于管理至少一个画中画呈现路径再现的数据结构的方法,包括:
将主视频流和辅助视频流记录在记录介质的数据区中,所述主视频流代表主呈现路径,所述辅助视频流代表相对于主呈现路径的画中画呈现路径;以及
将管理画中画呈现路径再现的管理信息记录在记录介质的管理区中,所述管理信息基于辅助视频流是否与主视频流同步而指示画中画呈现路径的类型。
33.如权利要求32所述的方法,其特征在于,所述管理信息包括指示辅助视频流是否为画中画呈现路径的同步类型和画中画呈现路径的异步类型中的一个的子路径类型信息字段。
34.如权利要求32所述的方法,其特征在于,所述管理信息还指示辅助视频流是否与主视频流多路复用。
35.如权利要求32所述的方法,其特征在于,所述管理信息包括指示多个画中画呈现路径类型中的一个的子路径类型信息字段,并且所述多个类型中的至少一个指示辅助视频流是否与主视频流同步。
36.如权利要求32所述的方法,其特征在于,记录主视频流和辅助视频流的步骤记录主视频流和辅助视频流以将主视频流和辅助视频流从再现自记录介质的数据流分离出并由分立的解码器解码。
37.一种记录管理至少一个画中画呈现路径再现的数据结构的装置,包括:
驱动器,所述驱动器被配置以驱动记录装置在记录介质上记录数据;
控制器,所述控制器被配置以控制驱动器将主视频流和辅助视频流记录在记录介质的数据区内,所述主视频流代表主呈现路径,所述辅助视频代表相对于主呈现路径的画中画呈现路径;并且所述控制器被配置以控制驱动器将用于管理画中画呈现路径再现的管理信息记录于记录介质的管理区,所述管理信息基于辅助视频流是否与主视频流而指示画中画呈现路径的类型。
38.如权利要求37所述的装置,其特征在于,所述管理信息还指示辅助视频流是否与主视频流多路复用。
39.如权利要求37所述的装置,其特征在于,所述管理信息还包括指示何时与主视频流一起显示辅助视频流的定时的显示定时信息。
40.如权利要求37所述的装置,其特征在于,所述控制器被配置以控制驱动器记录主视频流和辅助视频流以从再现自记录介质的数据流分离主视频流和辅助视频流并由分立的解码器解码。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US70346205P | 2005-07-29 | 2005-07-29 | |
US60/703,462 | 2005-07-29 | ||
US60/709,807 | 2005-08-22 | ||
US60/737,412 | 2005-11-17 | ||
KR10-2006-0030106 | 2006-04-03 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101268514A true CN101268514A (zh) | 2008-09-17 |
Family
ID=38080639
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2006800342303A Pending CN101268514A (zh) | 2005-07-29 | 2006-07-27 | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 |
CNA2006800348210A Pending CN101268516A (zh) | 2005-07-29 | 2006-07-28 | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 |
CNA2006800343293A Pending CN101268515A (zh) | 2005-07-29 | 2006-07-28 | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2006800348210A Pending CN101268516A (zh) | 2005-07-29 | 2006-07-28 | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 |
CNA2006800343293A Pending CN101268515A (zh) | 2005-07-29 | 2006-07-28 | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR20070014968A (zh) |
CN (3) | CN101268514A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103004221A (zh) * | 2010-07-13 | 2013-03-27 | 汤姆森特许公司 | 多媒体应用的画中画的方法 |
CN103168474A (zh) * | 2010-10-18 | 2013-06-19 | 晶像股份有限公司 | 合成不同维度的视频数据流用以同时显示 |
CN104620588A (zh) * | 2012-09-12 | 2015-05-13 | 晶像股份有限公司 | 利用像素重复带宽组合视频流和音频流 |
-
2006
- 2006-07-05 KR KR1020060063014A patent/KR20070014968A/ko not_active Application Discontinuation
- 2006-07-27 CN CNA2006800342303A patent/CN101268514A/zh active Pending
- 2006-07-28 CN CNA2006800348210A patent/CN101268516A/zh active Pending
- 2006-07-28 CN CNA2006800343293A patent/CN101268515A/zh active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103004221A (zh) * | 2010-07-13 | 2013-03-27 | 汤姆森特许公司 | 多媒体应用的画中画的方法 |
CN103168474A (zh) * | 2010-10-18 | 2013-06-19 | 晶像股份有限公司 | 合成不同维度的视频数据流用以同时显示 |
CN104620588A (zh) * | 2012-09-12 | 2015-05-13 | 晶像股份有限公司 | 利用像素重复带宽组合视频流和音频流 |
CN104620588B (zh) * | 2012-09-12 | 2018-04-27 | 美国莱迪思半导体公司 | 利用像素重复带宽组合视频流和音频流 |
Also Published As
Publication number | Publication date |
---|---|
CN101268515A (zh) | 2008-09-17 |
CN101268516A (zh) | 2008-09-17 |
KR20070014968A (ko) | 2007-02-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20070041712A1 (en) | Method and apparatus for reproducing data, recording medium, and method and apparatus for recording data | |
US20080063369A1 (en) | Method and apparatus for reproducing data, recording medium, and method and apparatus for recording data | |
CN1764971B (zh) | 用于再现和记录静止图像和音频数据的方法和装置 | |
US20070025696A1 (en) | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data | |
CN101268514A (zh) | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 | |
CN101118772B (zh) | 配置组合文件结构的方法、以及再现数据的方法和装置 | |
US20070025700A1 (en) | Recording medium, method and apparatus for reproducing data and method and apparatus for recording data | |
US20070041709A1 (en) | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data | |
US20070025706A1 (en) | Method and apparatus for reproducing data, recording medium, and method and apparatus for recording data | |
US20070025699A1 (en) | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data | |
CN101283410A (zh) | 再现数据的方法和装置、记录介质、以及记录数据的方法和装置 | |
JP2009505312A (ja) | 記録媒体、データ再生方法及び再生装置、並びにデータ記録方法及び記録装置 | |
CN101268517A (zh) | 用于再现数据的方法和装置、记录介质、以及用于记录数据的方法和装置 | |
KR20080033433A (ko) | 데이터 재생을 위한 방법 그리고 장치, 기록 매체, 그리고데이터 기록을 위한 방법 그리고 장치 | |
WO2007013777A1 (en) | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data | |
CN102119419A (zh) | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 | |
US20080056679A1 (en) | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data | |
WO2007013778A1 (en) | Recording medium, method and apparatus for reproducing data and method and apparatus for recording data | |
KR20070022578A (ko) | 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치 | |
KR20070031218A (ko) | 데이터 재생방법 및 재생장치 그리고 기록방법, 기록장치및 기록매체 | |
KR20080036126A (ko) | 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치 | |
WO2006031053A2 (en) | Recording medium, method for searching contents recorded within the recording medium, and method and apparatus for reproducing the recorded contents | |
KR20070120003A (ko) | 데이터 재생방법 및 재생장치 그리고 기록방법, 기록장치및 기록매체 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 1124683 Country of ref document: HK |
|
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20080917 |