CN101268516A - 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 - Google Patents
记录介质、再现数据的方法和装置、以及记录数据的方法和装置 Download PDFInfo
- Publication number
- CN101268516A CN101268516A CNA2006800348210A CN200680034821A CN101268516A CN 101268516 A CN101268516 A CN 101268516A CN A2006800348210 A CNA2006800348210 A CN A2006800348210A CN 200680034821 A CN200680034821 A CN 200680034821A CN 101268516 A CN101268516 A CN 101268516A
- Authority
- CN
- China
- Prior art keywords
- brightness
- auxiliary video
- video stream
- picture
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
- H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
- H04N21/4431—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB characterized by the use of Application Program Interface [API] libraries
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
- H04N21/4438—Window management, e.g. event handling following interaction with the user interface
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
Abstract
在一个实施例中,再现用于管理至少画中画呈现路径的再现的管理信息。所述管理信息包括关于亮度键控功能的亮度键控信息,并且所述亮度键控功能管理辅助视频流的透明度。亮度键控信息指示当辅助视频流不是被缩放至全屏大小时亮度键控功能是否能可适用于辅助视频流。辅助视频流表示相对于由主视频流表示的主呈现路径的画中画呈现路径。主视频流和辅助视频流是基于管理信息再现的。
Description
技术领域
本发明涉及记录和再现的方法和装置以及一种记录介质。
发明背景
光盘被广泛地用作能够在其中记录大量数据的记录介质。尤其是最近已开发出诸如蓝光盘(BD)和高清晰度数字多功能盘(HD-DVD)的高密度光学记录介质,并且它们能够记录和存储大量的高质量视频数据和高质量音频数据。
这类基于下一代记录介质技术的高密度光盘记录介质被认为是能够存储的数据远多于常规DVD的下一代光学记录方案。高密度光学记录介质与其它数字设施的开发正在进行当中。另外,对其应用高密度记录介质标准的光学记录/再现装置也处于研发阶段。
根据高密度记录介质和光学记录/再现装置的发展,存在同时再现多个视频的可能。然而,据知还没有方法能够有效地同时记录或再现多个视频。此外,由于没有完全确立的高密度记录介质标准,因此难以开发出完善的基于高密度记录介质的光学记录/再现装置。
发明内容
本发明涉及一种管理至少一个画中画呈现路径的再现的方法。
在一个实施例中,再现用于管理至少一个画中画呈现路径的再现的管理信息。所述管理信息包括关于亮度键控功能的亮度键控信息,并且所述亮度键控功能管理辅助视频流的透明度。所述亮度键控信息指示当辅助视频流不是被缩放至全屏大小时亮度键控功能是否可适用于辅助视频流。辅助视频流表示相对由主视频流表示的主呈现路径的画中画呈现路径。主视频流和辅助视频流是基于管理信息再现的。
在一个实施例中,亮度键控信息指示亮度键控阈值。如果亮度键控功能可适用于辅助视频数据,则以使得辅助视频流中亮度值小于及等于亮度键控阈值的像素被全透明地显示的方式来再现主视频流和辅助视频流。
在另一实施例中,如果亮度键控功能可适用于辅助视频数据,则以使得辅助视频流中亮度值大于及等于亮度键控阈值的像素被全透明地显示的方式来再现主视频流和辅助视频流。
在又一实施例中,亮度键控信息指示亮度键控范围。如果亮度键控功能可适用于辅助视频数据,则以使得辅助视频流中亮度值落在亮度键控范围内的像素被全透明地显示的方式来再现主视频流和辅助视频流。
在一个实施例中,管理信息包括组合信息,并且所述组合信息包括指示要显示辅助视频流的位置的位置信息。
在又一实施例中,管理信息包括组合信息,并且所述组合信息包括指示要显示辅助视频流的大小的比例信息。
本发明还涉及用于管理至少一个画中画呈现路径的再现的装置,涉及记录用于管理至少一个画中画呈现路径的再现的数据结构的方法和装置,并涉及具有用于管理至少一个画中画呈现路径的再现的数据结构的记录介质。
附图简要说明
包括于此以提供对本发明的进一步理解、并被纳入在本申请内且构成其一部分的附图示出本发明的实施例,并与本说明一起用来解释本发明的原理。在附图中:
图1是示出根据本发明一个实施例的光学记录/再现装置与外围设施结合使用的示例性实施例的示意图;
图2是示出根据本发明一个实施例的记录在作为记录介质的光盘中的文件结构的示意图;
图3是示出根据本发明一个实施例的作为记录介质的光盘的数据记录结构的示意图;
图4是用来理解根据本发明一个实施例的辅助视频的概念的示意图;
图5是示出根据本发明一个实施例的光学记录/再现装置的总体配置的方框图;
图6是示意地示出根据本发明一个实施例的回放系统的示例性实施例的方框图;
图7A和7B是示出根据本发明一个实施例的AV解码器模型的示意图;
图8A-8C是分别示出根据本发明一个实施例的辅助视频子路径类型的示意图;
图9是用于概念上地理解根据本发明一个实施例的“亮底键控”的示意图;
图10是示出根据本发明的辅助视频元数据的示例性实施例的示意图;
图11是示出根据本发明的数据再现方法的示例性实施例的流程图;
图12是用于概念上地理解根据本发明使用“亮度键控”实现的主视频和辅助视频的翻转的示意图。
具体实施方式
下面将详细参考本发明的示例性实施例,其具体例子示于附图中。在任何可能的场合,在附图中始终使用相同的附图标记来表示相同或相似的部件。
在下面的说明中,将结合光盘作为示例性记录介质来描述本发明的示例性实施例。具体地说,为便于说明而将蓝光盘(BD)用作为一种示例性记录介质。然而,可以领会本发明的技术理念可与应用于BD等效地应用于例如HD-DVD的其它记录介质。
在实施例中普遍使用的“存储”是配备在光学记录/再现装置(图1)中的存储。该存储是用户能在其中自由地存储所需信息和数据以便后续使用这些信息和数据的元件。常用的存储有硬盘、系统存储器、闪存等。然而,本发明不局限于这些存储。
与本发明相关联地,“存储”也可用作存储与记录介质(例如BD)相关联的数据的装置。一般来说,存储在存储中的与记录介质相关联的数据是从外部下载的数据。
对于这类数据,可以领会部分地允许直接从记录介质读出的数据、或者与记录介质的记录和再现相关联地产生的系统数据(例如元数据)可被存储在存储中。
为便于说明,在下面的说明中,记录在记录介质中的数据将被称为“原始数据”,而存储在存储中的与记录介质相关联的数据将被称为“附加数据”。
另外,本发明中使用的“标题”表示与用户接口的再现单元。诸标题各自链接于特定对象。因此,记录在盘中与一标题相关联的流根据与该标题链接的对象中的命令或程序被再现。具体地说,为便于说明,在记录于盘中的标题当中,包含根据MPEG-2压缩方案的高质量视频信息的标题将被考虑。具体地说,为便于说明,支持诸如连续多角度、多层(multi story)、信任、导演剪辑等的标题将被称为“高清晰度电影(HDMV)标题”。除了包括根据MPEG压缩方案的高质量视频信息的标题外,包括支持盘中标题的更新及其与网络的可连接性并因此提供高交互性的Java程序信息的标题将被称为“BD-J标题”。
图1示出根据本发明一个实施例的光学记录/再现装置与外围设施结合使用的示例性实施例。
根据本发明一个实施例的光学记录/再现装置10能向或从具有不同格式的各种光盘记录或再现数据。如有必要,光学记录/再现装置10可被设计成具有仅针对特定格式的光盘(例如BD)的记录和再现功能,或单具有再现功能而无记录功能。然而,在下面的说明中,将结合例如用于回放BD的BD播放机或用于记录和回放BD的BD刻录机并计及BD与外围设施的兼容性——这是本发明中必须解决的——来描述光学记录/再现装置10。可以领会本发明的光学记录/再现装置10可以是能内建在计算机等设备中的驱动器。
本发明的光学记录/再现装置10不仅具有光盘30的记录和回放的功能,而且具有接收外部输入信号、处理接收的信号并通过外置显示器20以可视图像的形式将经处理的信号发送给用户的功能。尽管对于外部输入信号没有特别的限制,然而代表性的外部输入信号可以是基于数字多媒体广播的信号、基于因特网的信号等。具体地说,对基于因特网的信号,因特网上的合需数据可在通过光学记录/再现装置10下载后被使用,这是因为因特网是任何人都易于访问的媒体。
在下面的说明中,提供作为外部源的内容的人将被统称为“内容提供者(CP)”。
本发明中使用的“内容”可以是标题的内容,并且在此情形中“内容”表示相关联的记录介质的作者提供的数据。
下文中将详细描述原始数据和附加数据。例如,某个标题的经多路复用的AV流可被记录在光盘中作为该光盘的原始数据。在这种情形中,可经由因特网提供与原始数据的音频流(例如英语)不同的音频流(例如韩语音频流)作为附加数据。一些用户可能希望从因特网下载与附加数据对应的音频流(例如韩语音频流),将所下载的音频流随对应于原始数据的AV流一起再现,或单独再现附加数据。为此希望提供一种能够应用户的请求确定原始数据与附加数据之间的关系、并基于确定结果执行原始数据和附加数据的管理/再现的系统化方法。
如上所述,为便于说明,记录在盘中的信号已被称为“原始数据”,而存在于盘外的信号已被称为“附加数据”。然而,原始数据和附加数据的定义只是为了根据数据获取方法来分类本发明中可使用的数据。因此,原始数据和附加数据不应当局限于特定的数据。任何属性的数据皆可用作为附加数据,只要它们存在于记录有原始数据的光盘外并与原始数据有关系即可。
为了实现用户的请求,原始数据和附加数据各自必须具有彼此之间存在关系的文件结构。下文将结合图2和图3对在BD中可使用的文件结构和数据记录结构进行说明。
图2示出根据本发明一个实施例的用于再现和管理记录在BD中的原始数据的文件结构。
本发明的文件结构包括根目录、以及在根目录下出现的至少一个BDMV目录BDMV。在BDMV目录BDMV中,存在索引文件“index.bdmv”和对象文件“MovieObject.bdmv”作为具有用于保证与用户的交互性的信息的通用文件(上层文件)。本发明的文件结构还包括具有关于实际记录在盘中的数据的信息以及关于用来再现所记录数据的方法的信息的目录,即播放列表目录PLAYLIST、剪辑信息目录CLIPINF、流目录STREAM、辅助目录AUXDATA、BD-J目录BDJO、元数据目录META、备份目录BACKUP、和JAR目录。下文将详细阐述上述目录以及包含在这些目录中的文件。
JAR目录包括JAVA程序文件。
元数据目录META包括关于数据的数据的文件,即元数据文件。这种元数据文件可包括盘库的搜索文件和元数据文件。这类元数据文件用于在记录和再现数据期间高效率地搜索和管理数据。
BD-J目录BDJO包括用于再现BD-J标题的BD-J对象文件。
辅助目录AUXDATA包括用于回放盘的附加数据文件。例如,辅助目录AUXDATA可包括当执行交互图形功能时提供声音数据的ound.bdmv、以及用于在盘回放期间提供字体信息的敁11111.otf和敁99999.otf文件。”
流目录STREAM包括根据特定格式记录在盘中的多个AV流文件。这些流最普遍地以基于MPEG-2的传输分组的格式被记录。流目录STREAM将“*.m2ts”作为流文件的扩展名(例如01000.m2ts、02000.m2ts、……)。具体地说,视频/音频/图形信息的多路复用流被称为“AV流”。一个标题由至少一个AV流文件构成。
剪辑信息(clip-info)目录CLIPINF包括剪辑信息文件01000.clpi、02000.clpi、……,它们各自对应于流目录STREAM中所包含的流文件“*.m2ts”。具体地说,剪辑信息文件“*.clpi”记录有流文件“*.m2ts”的属性信息和定时信息。每个剪辑信息文件“*.clpi”以及与该剪辑信息文件“*.clpi”对应的流文件“*.m2ts”被统称为“剪辑”。即,一个剪辑表示包括一个流文件“*.m2ts”以及与该流文件“*.m2ts”对应的一个剪辑信息文件“*.clpi”两者的数据。
播放列表目录PLAYLIST包括多个播放列表文件“*.mpls”。“播放列表”表示剪辑的播放区间的组合。每个播放区间被称为一个“播放项”。每个播放列表文件“*.mpls”包括至少一个播放项,并且可包括至少一个子播放项。播放项和子播放项各自包括关于要被再现的特定剪辑的再现开始时间IN-Time和再现结束时间OUT-Time的信息。因此,播放列表可以是播放项的组合。
至于播放列表文件,使用播放列表文件中的至少一个播放项再现数据的过程被定义为“主路径”,而使用一个子播放项再现数据的过程被定义为“子路径”。主路径提供关联播放列表的主呈现,而子路径提供与主呈现相关联的辅助呈现。每个播放列表文件应当包括一个主路径。每个播放列表文件还包括至少一个子路径,其数目是根据子播放项的存在与否而确定的。因此,每个播放列表文件是整个再现/管理文件结构中的基础再现/管理文件单元,用来基于一个或多个播放项的组合来再现一个或多个合需的剪辑。
与本发明相关联地,通过主路径再现的视频数据被称为主视频,而通过子路径再现的视频数据被称为辅助视频。光学记录/再现装置同时再现主视频和辅助视频的功能也被称为“画中画(PiP)功能”。
备份目录BACKUP将文件的拷贝存储在上述文件结构中,具体地说是记录有与盘的回放相关联的信息的文件的拷贝,例如索引文件“index.bdmv”、对象文件“MovieObject.bdmv”和“BD-Jobject.bdmv”、单元键文件、播放列表目录PLAYLIST中的所有播放列表文件“*.mpls”、以及剪辑信息目录CLIPINF中的所有剪辑信息文件“*.clpi”的拷贝。考虑到当上述文件中有任何文件损坏或丢失时,会引起与盘回放相关联的致命出错,因此备份目录BACKUP被适应性地配置成为备份目的而单独地存储文件拷贝。
同时,可以领会本发明的文件结构不局限于上述名称和位置。即上述目录和文件不应当通过其名称和位置予以理解,而是应当通过其意义予以理解。
图3示出根据本发明一个实施例的光盘的数据记录结构。在图3中示出了与盘中的文件结构相关联的信息的记录结构。参照图3,可以看出盘包括记录有用来管理整个文件的系统信息的文件系统信息区,记录有索引文件、对象文件、播放列表文件、剪辑信息文件、和元文件(这些文件是再现记录的流“*.m2ts”所必需)的区,记录有各自由音频/视频/图形数据或STREAM文件构成的流的流区、以及记录有JAVA程序文件的JAR区。当从盘的内圆周开始观察时,这些区以上述次序编排。
根据本发明,主视频和/或辅助视频的流数据被存储在流区内。在本发明中,辅助视频可被多路复用在与主视频相同的流中,或者可被多路复用在与主视频不同的流中。
在盘中,存在记录用于再现流区中的内容的文件信息的区。该区被称为“管理区”。文件系统信息区和数据库区被包含在管理区中。根据本发明,使用子路径来再现辅助视频。用来再现辅助视频的子路径的类型根据在其中多路复用辅助视频的流的种类以及子路径是否与主路径同步而可被分成三种类型。这三种子路径类型将结合图8A-8C予以说明。由于再现辅助视频的方法是根据子路径类型变化的,因此管理区包括表示子路径类型的信息。
图3中诸区仅为示例性目的而示出和描述。应当领会本发明不局限于图3的区编排。
图4是用来理解根据本发明的辅助视频的概念的示意图。
本发明的目的在于提供一种与主视频数据同时再现辅助视频数据的方法。即,本发明实现一种允许PiP应用、尤其是有效地执行PiP应用的光学记录/再现装置。
在如图4所示的主视频的再现期间,可通过与主视频所用的相同的显示器20显示与主视频相关联的其它视频。根据本发明,可以实现这样的PiP功能。例如,在再现电影或纪录片期间,可向用户提供导演的评注或与摄影过程相关联的插曲。在这种情形中,评注或插曲的视频就是辅助视频。辅助视频可再现于主视频之上。
辅助视频可从主视频再现的起点开始与主视频同时再现。辅助视频的再现也可开始于主视频的再现的中间时段。还可以根据再现程序显示辅助视频并同时改变辅助视频在屏幕上的位置或尺寸。另外,当例如辅助视频不是被缩放至全屏大小时,可有选择性控制辅助视频的透明度。也可实现多个辅助视频。在这种情形中,可在主视频再现期间彼此独立地再现诸辅助视频。可随关联于主视频的音频一起再现主视频。类似地,可随关联于辅助视频的音频一起再现辅助视频。
图5示出根据本发明的光学记录/再现装置10的整体配置的示例性实施例。
如图5所示,光学记录/再现装置10主要包括拾取头11、伺服14、信号处理器13、和微处理器16。拾取头11再现记录在光盘中的原始数据和管理数据。管理数据包括再现管理文件信息。伺服14控制拾取头11的操作。信号处理器13从拾取头11接收再现的信号,并将接收到的再现信号恢复成合需的信号值。信号处理器13还将例如主视频和辅助视频的要被记录的信号分别调制成可记录在光盘中的信号。微处理器16控制拾取头11、伺服14和信号处理器13的操作。拾取头11、伺服14、信号处理器13、和微处理器16也被统称为“记录/再现单元”。根据本发明,记录/再现单元在控制器12的控制下从光盘30或存储15读取数据,并将所读取的数据发送给AV解码器17b。即,从再现的角度看,记录/再现单元起到读取数据的读取器单元的作用。记录/再现单元还从AV编码器18接收经编码的信号,并将接收到的信号记录在光盘30中。因此,记录/再现单元可将视频和音频数据记录在光盘30中。
控制器12根据用户命令下载存在于光盘30之外的附加数据,并将附加数据存储在存储15中。控制器12还应用户请求再现存储在存储15中的附加数据和/或光盘30中的原始数据。根据本发明,控制器12产生用于管理辅助视频的再现的元数据,并执行将元数据随视频数据一起记录在光盘30中的控制操作。
关于这一点,根据本发明,元数据可包括关于是否应当将亮度键控适用于辅助视频的信息。该元数据还包括用于规定要作透明度处理的像素的信息。这将结合图9予以详细说明。
光学记录/再现装置10还包括回放系统17,用来在控制器12的控制下最终解码数据并将经解码的数据提供给用户。回放系统17包括用于解码AV信号的AV解码器17b。回放系统17还包括用于分析与特定标题的回放相关联的对象命令或应用、用于分析经由控制器12输入的用户命令、并用于基于分析结果确定回放方向的播放机模型17a。在一个实施例中,播放机模型17a可实现为包括AV解码器17a。在这种情形中,回放系统17本身是播放机模型。AV解码器17b可包括各自关联于不同种类的信号的多个解码器。
同样包含在本发明的光学记录/再现装置10中的AV编码器18将输入信号转换成例如MPEG2传输流的特定格式的信号,并将经转换的信号发送至信号处理器13,以允许将输入信号记录在光盘30中。
图6是解释根据本发明一个实施例的回放系统的示意图。根据本发明,该回放系统能同时再现主视频和辅助视频。
“回放系统”表示由设置在光学记录/再现装置中的程序(软件)和/或硬件构成的联合式再现处理装置。即,该回放系统是一种不仅能回放加载于光学记录/再现装置中的记录介质而且能再现和管理存储于该装置的存储中(例如在从记录介质的外部下载之后)的与该记录介质相关联的数据的系统。
具体地说,如图6所示,回放系统17可包括用户事件管理器171、模块管理器172、元数据管理器173、HDMV模块174、BD-J模块175、回放控制引擎176、呈现引擎177和虚拟文件系统40。下面将详细描述这种配置。
作为用于再现HDMV标题和BD-J标题的单独的再现处理/管理装置,针对HDMV标题的HDMV模块174和针对BD-J标题的BD-J模块175被彼此独立地构造。HDMV模块174和BD-J模块175各自具有接收包含在关联的对象“电影对象”或“BD-J对象”中的命令或程序以及处理接收到的命令或程序的控制功能。HDMV模块174和BD-J模块175各自可从回放系统的硬件配置分离出关联的命令或应用,以实现命令或应用的可移植性。为了实现命令的接收和处理,HDMV模块174包括命令处理器174a。为了实现应用的接收和处理,BD-J模块175包括Java虚拟机(VM)175a和应用管理器175b。
Java VM 175a是其中执行应用的虚拟机。该应用管理器175b包括用于管理在BD-J模块175中处理的应用的寿命周期的应用管理功能。
模块管理器172不仅起到分别向HDMV模块174和BD-J模块175发送用户命令的作用,而且还起到控制HDMV模块174和BD-J模块175的操作的作用。回放控制引擎176根据来自HDMV模块174或BD-J模块175的回放命令分析实际记录在盘中的播放列表文件,并基于分析结果执行回放功能。呈现引擎177解码由回放控制引擎176与其再现相关联地管理的特定流,并将经解码的流显示在显示画面上。具体地说,回放控制引擎176包括:回放控制功能176a,用来管理所有回放操作;以及播放机寄存器176b,用来存储关于播放机的回放状态和回放环境的信息(播放机状态寄存器(PSR)和通用寄存器(GRP)的信息)。在某些情形中,回放控制功能176a表示回放控制引擎176本身。
HDMV模块174和BD-J模块175分别以独立方式接收用户命令。HDMV模块174和BD-J模块175的用户命令处理方法同样彼此独立。为了将用户命令传递给HDMV模块174和BD-J模块175中相关联的那个,应当使用单独的传递手段。根据本发明,这种功能是由用户事件管理器171实行的。因此,当用户事件管理器171接收到通过用户操作(UO)控制器171a生成的用户命令时,用户事件管理器将接收到的用户命令发送给模块管理器172或UO控制器171a。另一方面,当用户事件管理器171接收到通过键事件生成的用户命令时,用户事件管理器将接收到的用户命令发送给BD-J模块175中的Java VM 175a。
本发明的回放系统17还可包括元数据管理器173。元数据管理器173向用户提供盘库和增强的搜索元数据应用。元数据管理器173在用户的控制下执行标题的选择。元数据管理器173也可向用户提供记录介质和标题元数据。
根据本发明的回放系统的模块管理器172、HDMV模块174、BD-J模块175和回放控制引擎176能够以软件方式执行合需的处理。实践中,使用软件的处理相比使用硬件配置的处理在设计上具有优势。当然,一般来说呈现引擎177、解码器17b和平面是使用硬件设计的。尤其,各自使用软件执行合需处理的构成要素(例如由附图标记172、174、175和176标示的构成要素)可构成控制器12的一部分。因此,应当注意本发明的上述构成和配置是在其意义的基础上来理解的而不局限于其实现方法,诸如硬件或软件实现。这里,“平面”表示用于解释主视频、辅助视频、PG(呈现图形)、IG(交互图形)、文本字幕的覆盖过程的概念模型。根据本发明,辅助视频平面被编排在主视频平面的前面。因此,在被解码后输出的辅助视频呈现在辅助视频平面上。
图7A和7B示意地示出根据本发明的AV解码器模型。
参照图7A,根据本发明的AV解码器17b包括用于同时再现主视频和辅助视频——即实现PiP应用的辅助视频解码器730b。辅助视频解码器730b解码辅助视频。辅助视频能以包含AV流中的状态被记录在记录介质30中以被提供给用户。辅助视频也可在从记录介质30外下载后被提供给用户。AV流以传输流(TS)的形式被提供给AV解码器17b。
在本发明中,通过主路径再现的AV流被称为主传输流或主TS(在下文中也称其为“主流”),并且主流以外的AV流被称为子传输流或子TS(下文中也称其为“子流”)。
在AV解码器17b中,来自光盘30的主流通过开关元件到达缓冲器RB1,并且被缓冲的主流由源拆分组器710拆分组。包含在经拆分组的AV流中的数据在根据数据分组种类在PID(分组标识符)过滤器1720a中从经拆分组的AV流中分离出来后被提供给解码器730a到730g中相关联的那一个。即,在主流中包含辅助视频的情形中,辅助视频由PID过滤器1 720a将其与主流中的其它数据分组分离并随后被提供给辅助视频解码器730b。如图所示,来自PID过滤器1 720a的分组可先通过另一开关元件再被解码器730b到730g接收。
另一方面,来自光盘30或本地存储15的每个子流通过开关元件到达缓冲器RB2,被缓冲的子流由源拆分组器710b拆分组。包含在经拆分组的AV流中的数据在根据数据分组的种类在PID过滤器2 720b中的经拆分组的AV流中分离出来后被提供给解码器730a代730g中相关联的那一个。如图所示,来自PID过滤器2 720b的分组可在被解码器730b到730f接收前通过另一开关元件。
即,是在主视频解码器730a中解码主视频,并且在主音频解码器730e中解码主音频。另外,PG(呈现图形)、IG(交互图形)、辅助音频、文本字幕分别是在PG解码器730c、IG解码器730b、辅助音频解码器730f和文本解码器730g中被解码。
图8A-8C示出根据本发明的辅助视频子路径类型。
根据本发明的PiP应用模型基于其中多路复用辅助视频的流的种类以及用于再现辅助视频的子路径是否与关联于该子路径的主路径同步而被主要分成三种类型。因此在本发明中,考虑前述三种模型来确定用来再现辅助视频的子路径的种类,即子路径类型。
在图8A所示的子路径类型中,辅助视频被编码在与主视频不同的流中,并且子路径与主路径同步。如上所述的将辅助视频多路复用在与主视频的不同的流中的情形被称为“外多路复用(out-of-mux)”类型。
参照图8A,用于管理主视频和辅助视频的播放列表包括用来再现主视频的一个主路径和用来再现辅助视频的一个子路径。主路径由四个播放项构成(“PlayItem_id”=0,1,2,3),而子路径由多个子播放项构成。此子路径与主路径同步。详细地说,使用标识与每个子播放项相关联的播放项的“sync-PlayItem_id”信息字段即信息以及表示该子播放项在播放项中的呈现时间的呈现时戳信息“sync_start_PTS_of_PlayItem”来使辅助视频与主路径同步。即,当播放项的呈现点到达由显示时戳信息所指向的值时,就起动相关联的子播放项的呈现。因此,通过一个子路径的辅助视频再现是开始于通过主路径的主视频再现期间的一个预定时刻。
在这种情形中,由于辅助视频是多路复用在与主视频不同的流中,因此播放项和子播放项各自指向不同的剪辑。播放项和子播放项各自包括关于要被再现的特定剪辑的再现开始时间IN-Time和再现结束时间OUT-Time的信息。相应地,相关联的播放项和子播放项所指向的剪辑被提供给AV解码器17b。
参照图7A,通过对应于图8A的子路径类型的子路径再现的辅助视频作为子流(子TS)被提供给AV解码器17b,而主视频作为主流(主TS)被提供给AV解码器17b。在AV解码器17b中,主流由源拆分组器710a拆分组并随后被送至PID过滤器1720a。另一方面,子流由源拆分组器710b拆分组并随后被送至PID过滤器2720b。包含在经拆分组的子流或主流中的数据在相关联的PID过滤器1720a或PID过滤器2720b中根据其数据分组的种类从相关联的经拆分组的流中被分离出来并被送至解码器730a到730g中相关联的那个以解码。即,主视频是在主视频解码器730a中解码,并且主音频是在主音频解码器730e中解码。另外,PG、IG、辅助音频、文本字幕分别在PG解码器730c、IG解码器730d、辅助音频解码器730f、和文本解码器730g中被解码。
经解码的主视频、辅助视频、PG和IG分别由主视频平面740a、辅助视频平面740b、呈现图形平面740c以及交互图形平面740d等再现。显示图形平面740c也可再现于文本解码器730g中解码的图形数据。经解码的主音频和辅助音频在混音器中被混音后输出。由于在图8A的子路径类型中,用来再现辅助视频的子路径与用来再现主视频的主路径同步,因此控制器12执行随主视频同步地输出辅助视频的控制操作。
在图8B所示子路径类型中,辅助视频被编码在与主视频不同的流中,并且子路径与主路径异步。与图8A的子路径类型相似,要通过子路径再现的辅助视频流被多路复用成与要基于相关联的播放项再现的剪辑分离的状态。然而,图8B的子路径类型与图8A的子路径类型的区别在于子路径的呈现可在主路径的时间线上的任何时刻起动。
参照图8B,用于管理主视频和辅助视频的播放列表包括用来再现主视频的一个主路径和用来再现辅助视频的一个子路径。该主路径由三个播放项(“PlayItem_id”=0,1,2)构成,而所述子路径由一个子播放项构成。通过子路径再现的辅助视频与主路径异步。也就是说,即使当子播放项包括用来标识与子播放项关联的播放项的信息以及表示播放项中子播放项的呈现时间的呈现时戳信息,这些信息在图8B的子路径类型中是无效的。相应地,光学记录/再现装置10可无视上述用来将主路径和子路径同步的信息地运作。由此,用户能在重现主视频期间的任何时刻观看辅助视频。
在图8C所示子路径类型中,辅助视频被编码在与主视频相同的流中,并且子路径与主路径同步。如上所述,将辅助视频多路复用在与主视频的不同的流中的情形被称为“外多路复用(out-of-mux)”类型。图8C的子路径类型与图8A和8B的子路径类型的区别在于其辅助视频被多路复用在与主视频相同的AV流中。如上所述,将辅助视频多路复用在与主视频相同的流中的情形被称为“内多路复用(in-mux)”类型。
参照图8C,用于管理主视频和辅助视频的播放列表包括一个主路径和一个子路径。主路径由四个播放项构成(“PlayItem_id”=0,1,2,3),而子路径由多个子播放项构成。构成子路径的每个子播放项包括用来标识与子播放项相关联的播放项的信息以及表示该子播放项在播放项中的呈现时间的呈现时戳信息。如前面结合图8A所描述的,使用了上述信息,每个子播放项得以与相关联的播放项同步。由此辅助视频与主视频同步。
在图8C的子路径类型中,构成主路径的每个播放项和构成子路径的子播放项中相关联的一个或多个指向同一剪辑。因此,辅助视频随作为主流的主视频一起被提供给AV解码器17b。如图7A所示,作为包括主视频和辅助视频的经分组数据的主流由源拆分组器710a拆分组并随后被送至PID过滤器1 720a。诸数据分组各自根据相关联的PID在PID过滤器1 720a中从经拆分组的数据中被分离出来,并随后被送至解码器730a到730g中相关联的那一个以解码。即,主视频在主视频解码器730a中被解码后从主视频解码器730a输出。辅助视频在辅助视频解码器730b中被解码后从辅助视频解码器730b中输出。在这种情形中,控制器12执行与主视频同步地显示辅助视频的控制操作。
主流和子流可从记录介质30或存储15向AV解码器17b提供。在主视频和辅助视频分别被存储在不同的剪辑中的场合,主视频可被记录在记录介质30中以提供给用户,而辅助视频可从记录介质30外下载至存储15。当然,与上述情形相反的情形也是可能的。然而,在主视频和辅助视频两者均被存储在记录介质30中的场合,应在其再现前将主视频和辅助视频中的一个拷贝至存储15,以允许同时再现主视频和辅助视频。在主视频和辅助视频两者被存储在同一剪辑中的情形中,在将它们记录在记录介质30中之后提供主视频和辅助视频。然而,在这种情形中,主视频和辅助视频两者皆是从记录介质30外下载的。
这里,“平面”表示用于解释主视频、辅助视频、PG(呈现图形)、IG(交互图形)、和文本字幕的覆盖过程的概念模型。根据本发明,此平面模型允许独立控制主视频、辅助视频、PG、IG、和文本字幕。根据本发明,从主视频解码器730a提供的数据被再现于主视频平面740a上。从辅助视频解码器730b提供的数据被再现于辅助视频平面740b上。参照图7B,根据本发明的辅助视频平面740b被重叠在主视频平面740a上。根据包含在用于管理辅助视频的再现的元数据中的大小和位置信息调整辅助视频平面740a以使辅助视频平面740b在显示器20上以单个图像的形式与主视频平面740a组合。上面结合图7A描述的呈现图形平面740c被重叠在辅助视频平面740b上。交互图形平面740d重叠在呈现图形平面740c上。呈现图形平面740c和交互图形平面740d在显示器20上以单个图像的形式被组合在一起,从而通过显示器20将它们提供给用户。
图9是用于概念上地理解根据本发明一个实施例的“亮度键控”的示意图。
作为多样地实现内容的一种方法,本发明提供一种再现方法,其中辅助视频平面上的特定像素被处理成变得透明,即“键出(key-out)”。键出可通过将“亮度键控”适用于辅助视频来实现。最初,“亮度键控”是用来以重叠状态在视频之上显示一静止图像,如同在显示运动图像期间以静止图像的形式显示在运动图像之上的该运动图像的标题。在本发明中,上述“亮度键控”旨在被适用于与主视频同时再现的辅助视频。
参照图9,当辅助视频平面重叠在主视频平面之上时,主视频中被辅助视频平面重叠掉的部分无法为用户所见(910)。例如,在由例如电影或纪录片等的主运动图像构成的主视频再现期间,导演评注或与摄制过程相关联的插曲可作为辅助视频被显示在主视频平面上。在这种情形中,主视频中被与向其输出辅助视频的辅助视频平面重叠掉的部分为辅助视频平面所隐藏(910)。当辅助视频的一部分——例如辅助视频的背景部分根据本发明通过对其适用“亮度键控”而被处理成变为透明时,主视频中被辅助视频平面重叠掉的部分可透过辅助视频的透明部分被看见(920)。下文中结合图9对“亮度键控”适用方法进行详细说明。
例如,辅助视频可包括各自对应于解释主视频的导演910a和在导演910a周围的背景910b的视频部分。另外,构成辅助视频的像素可分别具有不同的亮度值。当导演910a是辅助视频中要被呈现的主题时,可能需要处理背景910b以使背景910b变得透明,从而使主视频可透过透明的背景910b被看见。在这种情形中,由于形成一个图象的像素可能各自具有不同的亮度值,因此设置一用于将导演910a与背景910b彼此区分开的基准亮度。亮度值比此基准亮度值高或低的像素被处理成变为透明。例如,当像素亮度的范围是从“0”到“255”并且构成背景910b的像素中最亮的一个像素的亮度值为“15”时,可将基准亮度置为亮度值“15”,并且亮度值范围为从“0”到“15”的像素随后可被处理成变为透明。在这种情形中,构成背景910b的像素变得透明。结果,可透过透明的背景920b看到主视频。此时,在保持导演910a的像素的原始透明度值的状态下输出导演910a。
关于向辅助视频适用“亮度键控”的信息被包含在用于管理辅助视频的再现的元数据中,从而被提供给用户。下面将结合图10对其进行描述。
图10示出根据本发明的辅助视频元数据的一个示例性实施例。
根据本发明,辅助视频的再现是使用元数据进行管理的。所述元数据包括关于辅助视频的再现时间、再现大小、和再现位置的信息。在下面的说明中,元数据将被称为“PiP元数据”。
PiP元数据可出现在作为一种再现管理文件的播放列表中。图10示出出现在管理主视频的再现的播放列表“PlayList”的“扩展数据(ExtensionData)”块中的PiP元数据块。PiP元数据可包括至少一个由块头部构成的块“block_header[k]”910和至少一个由块数据构成的块“block_data[k]”920,其数目取决于存储在PiP元数据块中的元数据块条目的数目。块头部910包括相关联的元数据块的头部信息。块数据920包括相关联的元数据块的数据信息。尽管在图10的实施例中描述的是PiP元数据出现在播放列表中,然而PiP元数据也可以出现在实现PiP的辅助视频流的头部中。
块头部910可包括表示播放项识别信息的字段(下文中称其为“‘PlayItem_id[k]”)、以及表示辅助视频流标识信息的字段(下文中称其为“secondary_video_stream_id[k]”)。信息“PlayItem_id[k]”具有对应于播放项的值,该播放项包括STN表,其中列有由“secondary_video_stream_id[k]”指向的“secondary_video_stream_id”条目。“PlayItem_id[k]”的值被存储在播放列表文件的播放列表块中。优选地,在PiP元数据中,“PlayItem_id”的条目以记录在PiP元数据中的“PlayItem_id”的升序分类排序。信息“secondary_video_stream_id[k]”被用来识别子路径以及要对其施加相关联的块数据920的辅助视频流。即,可在对应于“PlayItem_id[k]”的“PlayItem”的STN表中识别出与“secondary_video_stream_id[k]”对应的流条目。由于流条目记录有与辅助视频相关联的子路径识别信息的值,因此光学记录/再现装置10能基于记录的值识别用于再现辅助视频的子路径。播放列表块包括子路径块。
根据本发明,PiP元数据可包括关于对辅助视频适用“键出”的信息。PiP元数据还可包括用于规定辅助视频中要作透明度处理——即变得透明——的像素。参照图10,当表示是否已将“键出”适用于辅助视频的信息即“is_luma-key”被置为“1b”时,用于规定辅助视频中要作透明度处理的像素的信息即“upper_limit_key”规定辅助视频亮度的上限。例如,当辅助视频不是被缩放至全屏大小时,“is_luma_key”指示透明度处理(即亮度键控功能)是否可适用于辅助视频。在这种情形中,当主视频平面740a和辅助视频平面740b彼此重叠时,辅助平面740b上亮度值范围从“0”至“upper_limit_luma_key”的像素被处理成变为透明(即,“经过透明度处理”)。因此,规定的像素显现全透明度。同时,亮度值超过“upper_limit_luma_key”的每一剩余像素保持其原始的不透明度。结果,位于不透明像素之后的主视频部分无法为用户所见。另一方面,当表示是否已对辅助视频适用“透明度处理”的信息,即“is_luma-key”被置为“0b”时,辅助视频平面上的所有像素显现原始的不透明度。结果,位于辅助视频平面之后的主视频部分无法为用户所见。
规定要作透明度处理的像素的信息可以是要作“透明度处理”的像素的亮度的下限,即“lower_limit_luma_key”。在这种情形中,亮度值不低于该下限的像素被处理成变为透明。或者,规定要作透明度处理的像素的信息可包括要作透明度处理的像素的亮度的上限和下限两者,即“lower_limit_luma_key”和“upper_limit_luma_key”。在这种情形中,亮度值范围在上限与下限之间的像素被处理成变为透明。
同时,块头部910还可包括表示由相关联的PiP元数据参考的时间线的信息(下文中称其为PiP时间线类型“pip_timeline_type”)。块数据920可包括指示PiP元数据所处点的时戳信息(下文中称其为“pip_metadata_time_stsmp ”)。根据由上述“pip_metadata_time_stamp[i]”的条目参考的时间线的类型,即PiP元数据所参考的时间线的类型来确定“pip_timeline_type[k]”。
块数据920还可包括至少一个块辅助视频组合信息(下文中称其为“pip_composition_metadata”),其数目是根据“pip_metadata_time_stamp[i]”确定的。第i个“pip_composition_metadata”是在“pip_metadata_time_stamp[i]”与“pip_metadata_time_stamp[i+1]”之间有效的辅助视频组合信息。
详细地说,辅助视频组合信息是表示辅助视频的再现位置和尺寸的信息。辅助视频组合信息可包括辅助视频的位置信息以及辅助视频的尺寸信息(下文中称其为“pip_scale[i]”)。辅助视频的位置信息包括辅助视频的水平位置信息(下文中将其称为“pip_horizontal_position[i]”)以及辅助视频的垂直位置信息(下文中将其称为“pip_vertical_position[i]”)。信息“pip_horizontal_position”表示当从屏幕原点出发观察时显示在屏幕上的辅助视频的水平位置,而信息“pip_vertical_position”表示当从屏幕原点出发观察时显示在屏幕上的辅助视频的垂直位置。基于组合信息调整辅助视频平面的呈现位置和尺寸(定位和比例缩放)并随后将其与主视频平面组合。
尽管在图10的例子中已将关于将“亮度键控”适用于辅助视频的信息描述为包含在PiP元数据中,然而此信息也可作为单独的亮度键控信息记录在剪辑信息文件中。另外,可将此信息作为单独的信息记录在流头部中。
图11是示出根据本发明的数据再现方法的一个示例性实施例的流程图。
当执行包括关于主视频和辅助视频的再现信息的播放列表文件时,控制器12检查用于管理辅助视频的再现的元数据(S10)。控制器12随后基于包含在图10所示的元数据中的“is_luma_key”值来确定是否已设置对辅助视频适用“亮度键控”(S20)。当“is_luma_key”已被置为“1b”时,辅助视频中亮度值不高于元数据中包含的“upper_limit-luma_key”的像素作透明度处理并随后被呈现给用户(S40)。另一方面,当“is_luma_key”已被置为“0b”时,辅助视频中的所有像素均以原始的不透明度呈现(S30)。即,这些像素被处理为不透明的。
同时,“lower_limit_luma_key”可代替“upper_limit_luma_key”包含在元数据中。在这种情形中,控制器12将对亮度值不低于“lower_limit_luma_key”的像素进行透明度处理。“lower_limit_luma_key”和“upper_limit_luma_key”两者皆可被包含在元数据中。在这种情形中,控制器12将对亮度值范围在“lower_limit_luma_key”与“upper_limit_luma_key”之间的像素进行透明度处理。
同时,当辅助视频的大小被调整成与主视频大小相同时,关于包含在元数据中的“亮度键控”的信息可不被施加于辅助视频。
图12是用于概念上地理解根据本发明的使用“亮度键控”实现的主视频和辅助视频的翻转的示意图。
在本发明中,“翻转”表示主视频与辅助视频大小的互换。在显示器20上被翻转的主视频的位置可与翻转前显示的辅助视频的位置相同或不同。一种翻转方法是互换主视频平面与辅助视频平面的位置以使位于辅助视频平面之后的主视频平面移至辅助视频平面的位置,并且使辅助视频平面移至主视频平面的原始位置,并在主视频平面与辅助视频平面的位置互换的同时互换主视频平面与辅助视频平面的大小。即,可通过互换主视频平面与辅助视频平面的前后位置来实现翻转。然而,当根据本发明将“亮度键控”适用于辅助视频视时,不必互换主视频平面与辅助视频平面的前后位置也可获得翻转效果。
参照图12,当同时再现主视频和辅助视频时,辅助视频被显示在位于主视频平面之前的辅助视频平面上(1210)。自然地,当辅助视频的大小被调整至全屏大小时,主视频由于完全被辅助视频所隐藏而无法被看见(1220)。在根据本发明将“亮度键控”适用于辅助视频的情况下,当辅助视频的大小被调整至全屏大小时,可处理辅助视频中与原来被辅助视频平面隐藏的主视频对应的像素,以使这些像素变得透明。因此,在这种情形中,可透过透明的辅助视频看到主视频(1230)。如前面结合图9所述那样,可使用将主视频与辅助视频彼此区别开的亮度值规定要被处理成变得透明的像素。也可基于关于主视频的翻转位置和尺寸的信息来规定要变为透明的像素。
从上面的说明可知,根据本发明的记录介质、数据再现方法和装置、以及数据记录方法和装置能以使主视频透过辅助视频被看见的方式来再现主视频和辅助视频。因此,其优势在于内容提供者能编撰更为多样的内容,以使用户能体验到更为多样的内容。
工业应用性
本领域内技术人员可以理解,可对本发明作出各种修改和变形而不会脱离本发明的精神或范围。因此,本发明旨在涵盖本发明的所有这些修改和变形。
Claims (42)
1.一种管理至少一个画中画呈现路径的再现的方法,包括:
再现用于管理至少画中画呈现路径的再现的管理信息,所述管理信息包括关于亮度键控功能的亮度键控信息,所述亮度键控功能管理辅助视频流的透明度,并且所述亮度键控信息指示当所述辅助视频流不是被缩放至全屏大小时所述亮度键控功能是否可适用于所述辅助视频流,所述辅助视频流表示相对由主视频流表示的主呈现路径的所述画中画呈现路径;以及
基于所述管理信息再现所述主视频流和所述辅助视频流。
2.如权利要求1所述的方法,其特征在于,
所述亮度键控信息指示亮度键控阈值;并且
如果所述亮度键控功能可适用于所述辅助视频数据,则所述再现主视频流和辅助视频流的步骤以使得所述辅助视频流中亮度值小于及等于所述亮度键控阈值的像素被全透明地显示的方式来再现所述辅助视频流。
3.如权利要求2所述的方法,其特征在于,如果所述亮度键控功能可适用于所述辅助视频数据,则所述再现主视频流和辅助视频流的步骤以使得所述辅助视频流中亮度值大于所述亮度键控阈值的像素被全不透明地显示的方式来再现所述辅助视频流。
4.如权利要求1所述的方法,其特征在于,
所述亮度键控信息指示亮度键控阈值;并且
如果所述亮度键控功能可适用于所述辅助视频数据,则所述再现主视频流和辅助视频流的步骤以使得所述辅助视频流中亮度值大于及等于所述亮度键控阈值的像素被全透明地显示的方式来再现所述辅助视频流。
5.如权利要求1所述的方法,其特征在于,
所述亮度键控信息指示亮度键控范围;并且
如果所述亮度键控功能可适用于所述辅助视频数据,则所述再现主视频流和辅助视频流的步骤以使得所述辅助视频流中亮度值落在所述亮度键控范围内的像素被全透明地显示的方式来再现所述辅助视频流。
6.如权利要求1所述的方法,其特征在于,所述管理信息包括组合信息,并且所述组合信息包括指示要显示所述辅助视频流的位置的位置信息。
7.如权利要求6所述的方法,其特征在于,所述位置信息包括指示要在所述主视频流的显示之上显示所述辅助视频流的左上角像素的垂直位置的垂直位置信息。
8.如权利要求6所述的方法,其特征在于,所述位置信息包括指示要在所述主视频流的显示之上显示所述辅助视频流的左上角像素的水平位置的水平位置信息。
9.如权利要求8所述的方法,其特征在于,所述位置信息包括指示要在所述主视频流的显示之上显示所述辅助视频流的左上角像素的垂直位置的垂直位置信息。
10.如权利要求9所述的方法,其特征在于,所述组合信息包括指示要显示所述辅助视频流的大小的比例信息。
11.如权利要求10所述的方法,其特征在于,所述比例信息指示所述辅助视频流的显示相对于所述主视频流的比例,并且所述比例信息指示无比例缩放、1/2比例、1/4比例、1又1/2比例、和全屏比例中的一个。
12.如权利要求10所述的方法,其特征在于,所述再现主视频流和辅助视频流的步骤以使得所述辅助视频流以所述比例信息指示的大小被显示在由所述位置信息指示的位置上的方式来再现所述主视频流和辅助视频流。
13.如权利要求6所述的方法,其特征在于,所述再现主视频流和辅助视频流的步骤以使得所述辅助视频流被显示在由所述位置信息指示的位置上的方式来再现所述主视频流和辅助视频流。
14.如权利要求1所述的方法,其特征在于,所述管理信息包括组合信息,所述组合信息包括指示要显示所述辅助视频流的大小的比例信息。
15.如权利要求1所述的方法,其特征在于,所述再现管理信息步骤从记录在记录介质的管理区中的播放列表再现作为元数据的所述亮度键控信息。
16.如权利要求1所述的方法,其特征在于,所述再现主视频流和辅助视频流的步骤使用与用来解码所述主视频流的解码器不同的解码器来解码所述辅助视频流。
17.一种管理至少一个画中画呈现路径的再现的方法,包括:
再现用于管理至少画中画呈现路径的再现的管理信息,所述管理信息包括关于亮度键控功能的亮度键控信息,所述亮度键控功能管理辅助视频流的透明度,并且如果所述辅助视频流被缩放至全屏大小则所述亮度键控功能改变,所述辅助视频流表示相对由主视频流表示的主呈现路径的所述画中画呈现路径;以及
基于所述管理信息再现所述主视频流和所述辅助视频流。
18.一种管理至少一个画中画呈现路径的再现的方法,包括:
再现用于管理至少画中画呈现路径的再现的管理信息,所述管理信息包括关于亮度键控功能的亮度键控信息、和组合信息,所述亮度键控功能管理辅助视频流的透明度,并且所述组合信息包括指示要显示所述辅助视频流的位置的位置信息。所述辅助视频流表示相对由主视频流表示的主呈现路径的所述画中画呈现路径;以及
基于所述管理信息再现所述主视频流和所述辅助视频流。
19.一种用于管理至少一个画中画呈现路径的再现的装置,包括:
驱动器,所述驱动器被配置成驱动再现设备从记录介质再现数据;以及
控制器,所述控制器被配置成控制所述驱动器再现用于管理至少画中画呈现路径的再现的管理信息,所述管理信息包括关于亮度键控功能的亮度键控信息,所述亮度键控功能管理辅助视频流的透明度,并且所述亮度键控信息指示当所述辅助视频流不是被缩放至全屏大小时所述亮度键控功能是否可适用于所述辅助视频流,所述辅助视频流表示相对由主视频流表示的主呈现路径的所述画中画呈现路径;并且
所述控制器被配置成控制所述驱动器基于所述管理信息来再现所述主视频流和所述辅助视频流。
20.如权利要求19所述的装置,其特征在于,
所述亮度键控信息指示亮度键控阈值;并且
所述控制器被配置成在所述亮度键控功能可适用于所述辅助视频数据的情况下控制所述主视频流和辅助视频流的再现以使所述辅助视频流中亮度值小于及等于所述亮度键控阈值的像素被全透明地显示。
21.如权利要求20所述的装置,其特征在于,所述控制器被配置成在所述亮度键控功能可适用于所述辅助视频数据的情况下控制所述主视频流和辅助视频流的再现以使所述辅助视频流中亮度值大于所述亮度键控阈值的像素被全不透明地显示。
22.如权利要求19所述的装置,其特征在于,
所述亮度键控信息指示亮度键控阈值;并且
所述控制器被配置成在所述亮度键控功能可适用于所述辅助视频数据的情况下控制所述主视频流和辅助视频流的再现以使所述辅助视频流中亮度值大于及等于所述亮度键控阈值的像素被全透明地显示。
23.如权利要求19所述的装置,其特征在于,
所述亮度键控信息指示亮度键控范围;并且
所述控制器被配置成在所述亮度键控功能可适用于所述辅助视频数据的情况下控制所述主视频流和辅助视频流的再现以使所述辅助视频流中亮度值落在所述亮度键控范围内的像素被全透明地显示。
24.如权利要求19所述的装置,其特征在于,所述控制器被配置成从存储于所述记录介质中的播放列表再现作为元数据的所述亮度键控信息。
25.如权利要求19所述的装置,其特征在于,还包括:
第一解码器,所述第一解码器被配置成解码所述主视频流;以及
第二解码器,所述第二解码器被配置成解码所述辅助视频流。
26.一种记录用于管理至少一个画中画呈现路径的再现的数据结构的方法,包括:
将主视频流和辅助视频流记录在记录介质的数据区中,所述主视频流代表主呈现路径,所述辅助视频流代表相对于所述主呈现路径的画中画呈现路径;以及
将用于管理所述画中画呈现路径的再现的管理信息记录在所述记录介质的管理区中,所述管理信息包括关于亮度键控功能的亮度键控信息,所述亮度键控功能管理所述辅助视频流的透明度,并且所述亮度键控信息指示当所述辅助视频流不是被缩放至全屏大小时所述亮度键控功能是否可适用于所述辅助视频流。
27.如权利要求26所述的方法,其特征在于,所述亮度键控信息指示亮度键控阈值,从而如果所述亮度键控功能可适用于所述辅助视频数据,则所述辅助视频流中亮度值小于及等于所述亮度键控阈值的像素被全透明地显示。
28.如权利要求26所述的方法,其特征在于,所述亮度键控信息指示亮度键控阈值,从而如果所述亮度键控功能可适用于所述辅助视频数据,则所述辅助视频流中亮度值大于及等于所述亮度键控阈值的像素被全透明地显示。
29.如权利要求26所述的方法,其特征在于,所述亮度键控信息指示亮度键控范围,从而如果所述亮度键控功能可适用于所述辅助视频数据,则所述辅助视频流中亮度值落在所述亮度键控范围内的像素被全透明地显示。
30.如权利要求26所述的方法,其特征在于,所述记录管理信息的步骤将所述亮度键控信息作为元数据记录在所述记录介质的所述管理区中的播放列表中。
31.如权利要求26所述的方法,其特征在于,所述记录主视频流和辅助视频流的步骤以使得所述主视频流和辅助视频流能从再现自所述记录介质的数据流中被分离出来并由分别的解码器来解码的方式记录所述主视频流和辅助视频流。
32.一种记录用于管理至少一个画中画呈现路径的再现的数据结构的装置,包括:
驱动器,所述驱动器被配置成驱动记录设备在记录介质上记录数据;
控制器,所述控制器被配置成控制所述驱动器将主视频流和辅助视频流记录在所述记录介质的数据区中,所述主视频流表示主呈现路径,所述辅助视频流表示相对于所述主呈现路径的画中画呈现路径;并且
所述控制器被配置成控制所述驱动器将用于管理所述画中画呈现路径的再现的管理信息记录于所述记录介质的管理区中,所述管理信息包括关于亮度键控功能的亮度键控信息,所述亮度键控功能管理所述辅助视频流的透明度,并且所述亮度键控信息指示当所述辅助视频流不是被缩放至全屏大小时所述亮度键控功能是否可适用于所述辅助视频流。
33.如权利要求32所述的装置,其特征在于,所述亮度键控信息指示亮度键控阈值,从而如果所述亮度键控功能可适用于所述辅助视频数据,则所述辅助视频流中亮度值小于及等于所述亮度键控阈值的像素被全透明地显示。
34.如权利要求32所述的装置,其特征在于,所述亮度键控信息指示亮度键控阈值,从而如果所述亮度键控功能可适用于所述辅助视频数据,则所述辅助视频流中亮度值大于及等于所述亮度键控阈值的像素被全透明地显示。
35.如权利要求32所述的装置,其特征在于,所述亮度键控信息指示亮度键控范围,从而如果所述亮度键控功能可适用于所述辅助视频数据,则所述辅助视频流中亮度值落在所述亮度键控范围内的像素被全透明地显示。
36.如权利要求32所述的装置,其特征在于,所述控制器被配置成将所述亮度键控信息作为元数据记录在所述记录介质的所述管理区内的播放列表中。
37.如权利要求32所述的装置,其特征在于,所述控制器被配置成控制所述驱动器以使得所述主视频流和辅助视频流能从再现自所述记录介质的数据流中被分离出来并由分别的解码器解码的方式来记录所述主视频流和所述辅助视频流。
38.一种具有用于管理至少一个画中画呈现路径的再现的数据结构的记录介质,包括:
存储主视频流和辅助视频流的数据区,所述主视频流代表主呈现路径,所述辅助视频流代表相对于所述主呈现路径的画中画呈现路径;以及
存储用于管理所述画中画呈现路径的再现的管理信息的管理区,所述管理信息包括关于亮度键控功能的亮度键控信息,所述亮度键控功能管理所述辅助视频流的透明度,并且所述亮度键控信息指示当所述辅助视频流不是被缩放至全屏大小时所述亮度键控功能是否可适用于所述辅助视频数据。
39.如权利要求38所述的记录介质,其特征在于,所述管理信息还包括指示何时随所述主视频流显示所述辅助视频流的定时的呈现定时信息。
40.如权利要求38所述的记录介质,其特征在于,所述管理信息还包括识别所述主视频流中要随其再现所述辅助视频流的播放项的播放项标识符。
41.如权利要求19所述的装置,其特征在于,还包括:
至少一个过滤器,所述过滤器被配置成将所述主视频流和所述辅助视频流中的至少一个从再现自所述记录介质的数据中分离出来。
42.如权利要求18所述的方法,其特征在于,所述再现主视频流和辅助视频流的步骤使用与用来解码所述主视频流的解码器不同的解码器来解码所述辅助视频流。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US70346205P | 2005-07-29 | 2005-07-29 | |
US60/703,462 | 2005-07-29 | ||
US60/703,466 | 2005-07-29 | ||
US60/710,144 | 2005-08-23 | ||
KR10-2006-0037778 | 2006-04-26 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101268516A true CN101268516A (zh) | 2008-09-17 |
Family
ID=38080639
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2006800342303A Pending CN101268514A (zh) | 2005-07-29 | 2006-07-27 | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 |
CNA2006800343293A Pending CN101268515A (zh) | 2005-07-29 | 2006-07-28 | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 |
CNA2006800348210A Pending CN101268516A (zh) | 2005-07-29 | 2006-07-28 | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2006800342303A Pending CN101268514A (zh) | 2005-07-29 | 2006-07-27 | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 |
CNA2006800343293A Pending CN101268515A (zh) | 2005-07-29 | 2006-07-28 | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR20070014968A (zh) |
CN (3) | CN101268514A (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8767124B2 (en) * | 2010-07-13 | 2014-07-01 | Thomson Licensing | Method of picture-in-picture for multimedia applications |
US8537201B2 (en) * | 2010-10-18 | 2013-09-17 | Silicon Image, Inc. | Combining video data streams of differing dimensionality for concurrent display |
US9413985B2 (en) * | 2012-09-12 | 2016-08-09 | Lattice Semiconductor Corporation | Combining video and audio streams utilizing pixel repetition bandwidth |
-
2006
- 2006-07-05 KR KR1020060063014A patent/KR20070014968A/ko not_active Application Discontinuation
- 2006-07-27 CN CNA2006800342303A patent/CN101268514A/zh active Pending
- 2006-07-28 CN CNA2006800343293A patent/CN101268515A/zh active Pending
- 2006-07-28 CN CNA2006800348210A patent/CN101268516A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
CN101268514A (zh) | 2008-09-17 |
KR20070014968A (ko) | 2007-02-01 |
CN101268515A (zh) | 2008-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5269097B2 (ja) | 映像情報再生方法、映像情報再生装置、記録媒体、及び映像コンテンツ | |
JP2007518205A (ja) | テキスト・サブタイトル・ストリームの再生・記録のための記録媒体、方法及び装置 | |
US20070041712A1 (en) | Method and apparatus for reproducing data, recording medium, and method and apparatus for recording data | |
KR20070022580A (ko) | 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법및 기록장치 | |
US20070025696A1 (en) | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data | |
JP4603579B2 (ja) | 記録媒体及び記録媒体に記録されたテキストサブタイトルストリームの再生方法及びその装置 | |
CN101268516A (zh) | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 | |
US20070025700A1 (en) | Recording medium, method and apparatus for reproducing data and method and apparatus for recording data | |
US20070025699A1 (en) | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data | |
US20070041709A1 (en) | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data | |
US20070025706A1 (en) | Method and apparatus for reproducing data, recording medium, and method and apparatus for recording data | |
US20070041710A1 (en) | Apparatus for reproducing data, method thereof, apparatus for recording the same, method thereof and recording medium | |
CN101283409A (zh) | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 | |
JP2009505312A (ja) | 記録媒体、データ再生方法及び再生装置、並びにデータ記録方法及び記録装置 | |
KR20080033433A (ko) | 데이터 재생을 위한 방법 그리고 장치, 기록 매체, 그리고데이터 기록을 위한 방법 그리고 장치 | |
CN101268517A (zh) | 用于再现数据的方法和装置、记录介质、以及用于记录数据的方法和装置 | |
KR20080033404A (ko) | 기록매체, 데이터 재생방법/장치 및 데이터 기록방법/장치 | |
CN102119419A (zh) | 记录介质、再现数据的方法和装置、以及记录数据的方法和装置 | |
KR20070022578A (ko) | 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치 | |
EP1911025A1 (en) | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data | |
US20080056679A1 (en) | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data | |
KR20080036126A (ko) | 기록매체, 데이터 재생방법 및 재생장치와 데이터 기록방법및 기록장치 | |
KR20070031218A (ko) | 데이터 재생방법 및 재생장치 그리고 기록방법, 기록장치및 기록매체 | |
KR20070120003A (ko) | 데이터 재생방법 및 재생장치 그리고 기록방법, 기록장치및 기록매체 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20080917 |