CN103957448A - 媒体容器文件管理 - Google Patents

媒体容器文件管理 Download PDF

Info

Publication number
CN103957448A
CN103957448A CN201410205905.2A CN201410205905A CN103957448A CN 103957448 A CN103957448 A CN 103957448A CN 201410205905 A CN201410205905 A CN 201410205905A CN 103957448 A CN103957448 A CN 103957448A
Authority
CN
China
Prior art keywords
track
media
sub
media data
container file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410205905.2A
Other languages
English (en)
Other versions
CN103957448B (zh
Inventor
克林顿·普里德尔
珀·福罗德亨
安德烈·诺金
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Telefonaktiebolaget LM Ericsson AB
Original Assignee
Telefonaktiebolaget LM Ericsson AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Telefonaktiebolaget LM Ericsson AB filed Critical Telefonaktiebolaget LM Ericsson AB
Publication of CN103957448A publication Critical patent/CN103957448A/zh
Application granted granted Critical
Publication of CN103957448B publication Critical patent/CN103957448B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4332—Content storage operation, e.g. storage operation in response to a pause request, caching operations by placing content in organized collections, e.g. local EPG data repository
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/7921—Processing of colour television signals in connection with recording for more than one processing mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Abstract

通过在文件(1)中组织由媒体轨道(12)所定义的媒体数据(2；3)来生成媒体容器文件(1)。针对媒体轨道(12)中定义的多个子轨道中的每一子轨道，组织标识媒体数据(2；3)的媒体数据部分(4，5；6，7，8)的子轨道信息(72，74)。给子轨道中的至少一个分配选择信息(62，64)，所述选择信息(62，64)定义了关于媒体容器文件(1)中组织的其它媒体数据的、由对子轨道所定义的媒体数据部分(4，5；6，7，8)的选择性处理。媒体数据(2，3)有利地与分层的媒体或定义被组织到子轨道(12)内的多个相机视图的媒体有关。选择信息(62，64)允许当建立媒体会话以及在该媒体会话期间在轨道(12)与子轨道之间进行切换时在轨道(12)和子轨道之中的选择。

Description

媒体容器文件管理
本申请是申请日为2009年11月6日、申请号为200980158568.3、发明名称为“媒体容器文件管理”的中国专利申请的分案申请。
技术领域
本发明通常涉及媒体和多媒体管理，具体地涉及包含这种媒体或多媒体内容的媒体容器文件的创建和使用。
背景技术
近年来通过不同网络对客户端的媒体和多媒体提供已经大大增加。如今，大量用户利用因特网从媒体服务器例如以视频和音频流或文件的形式访问并且下载或流传输媒体。
配合对于在不同的有线和无线通信网络中媒体提供的这种增加需求，正在开发在用于将媒体内容提供给请求客户端的无线网络中可用的流传输和下载服务器。存在朝向透明和灵活的流传输/下载服务器的通常趋势，这意味着服务器应基本上包括执行不同媒体管理功能的大量“标准”模块或程序。然后连同模块/程序应如何处理内容的指令一起提供对这些功能的输入媒体内容。与服务器中固定、预定媒体处理的使用相比，这将提供更灵活的媒体提供。
运动图像专家组(MPEG)已经标准化了文件格式，ISO基本媒体文件格式[1]，其符合流传输和下载服务器的开发中的趋势。ISO基本媒体文件格式指定用于充当用于多种更具体文件格式(例如先进视频编码(AVC)文件格式[2]、可扩缩视频编码(SVC)文件格式[3]和多视图视频编码(MVC)文件格式[4])的基础的多媒体呈现的存储和传输的通用文件格式。
ISO基本媒体文件格式可以将轨道分组为替换组。属于相同的替换组的轨道被称为替换轨道并且充当对彼此的替换。它们可以例如表示相同的内容，但关于质量、编解码器、语言等不同。在媒体会话中一次应处理来自每一替换组的仅一个轨道，以给出完整呈现。
除了替换组之外，ISO基本媒体文件格式还定义切换组。替换组中的所有轨道是用于媒体选择的候选，但其对于在正在进行的媒体会话期间在这些轨道中的一些之间进行切换可能无关紧要。例如，在保持帧大小但不允许不同帧大小、不同视频码或不同音频语言的轨道之间切换的同时，可以以不同比特率在视频轨道之间切换。替换组与切换组之间的区别在于：相同的切换组中的轨道是用于甚至在正在进行的媒体会话期间进行切换的候选，而相同的替换组中的、但在不同的切换组中的轨道在正在进行的媒体会话期间不会被切换。
对于轨道中的媒体数据的现有组织以及将这些轨道分配给不同替换和切换组对于多数媒体类型工作良好。然而，结合特定媒体类型(例如SVC和MVC[5])产生问题。
SVC是对良好建立的H.264/AVC视频编码标准[5]的标准化可扩缩扩展。SVC允许将视频的多个表示编码为单个比特流。特定空间分辨率、质量和帧速率的视频的每一这种编码的表示被表示为层。层构成分级关系，其中，最低层表示基本层(BL)，后续层表示增强层(EL)。
MVC是以多视图的联合编码为目标的AVC/SVC标准的扩展。在这种情况下，多视图是表示利用不同相机拍摄的相同场景的视频序列。MVC视图的结构与SVC层的结构相似，不同之处在于，MVC视图通常具有相似分辨率、质量和帧速率。
发明内容
当将ISO基本媒体文件格式应用于SVC或MVC编码的内容时，每一轨道将包含采取多个层或视图形式的相同的内容的多个版本。然而，针对单个轨道，具体地设计替换组和切换组。这说明，在正在进行的媒体会话期间，切换可以发生在轨道定义的不同的层或视图之间，因为它们将固有地属于相同的替换组和相同的切换组。但是，存在高度期望在层或视图之间动态切换的情况。例如，基本层可以是免费的并且包含广告，而增强层包含内容的额外费用和无付费广告版本。因此，对于已经付费以避免广告的用户而言，不希望从额外费用内容无意地切换到免费内容。
因此，需要一种将替换和/或切换组的构思应用于携带相同的内容的多个版本(例如SVC和MVC)的解决方案。
通用目的在于提供一种可以在媒体会话中使用的媒体容器文件。
特定目的在于提供可以用于包括构成相应子流的多个媒体数据部分的媒体数据的媒体容器文件。
在此公开的实施例满足这些和其它目的。
简单地，通过组织媒体容器文件中的媒体轨道所定义的媒体数据生成媒体容器文件。媒体数据包括关于与相同媒体内容的不同版本有关构成不同子流的部分。例如，媒体数据部分可以与SVC数据的不同的层或MVC数据的不同视图有关。
针对媒体轨道所定义的每一子轨道，在媒体容器文件中提供子轨道信息。子轨道信息标识属于子轨道或由子轨道定义的媒体容器文件中的媒体数据部分。给子轨道中的至少一个分配选择信息，选择信息被包括在媒体容器文件中。选择信息定义了关于在媒体容器文件中组织的其它媒体数据的、对由子轨道所定义的媒体数据部分的选择性处理，并且与子轨道的媒体数据部分相同的内容有关。
一方面还涉及对于生成这种媒体容器文件所设计的媒体内容服务器。媒体内容服务器包括用于在媒体容器文件中组织媒体数据的数据组织器。子轨道信息提供器在媒体容器文件中提供子轨道信息，选择信息提供器在媒体容器文件中提供选择信息。
另一方面定义包括构成相应子流的媒体数据部分的媒体容器文件。在用于定义媒体数据的媒体容器文件中包括媒体轨道。媒体容器文件附加地包括子轨道信息，子轨道信息针对媒体轨道中定义的每一子轨道标识媒体数据的属于子轨道的媒体数据部分。在媒体容器文件中包括针对至少一个子轨道的选择信息，以定义关于在媒体容器文件中组织的其它媒体数据的、对与子轨道相关联的媒体数据部分的选择性处理，并且涉及与媒体数据部分相同的媒体内容。
根据一方面的媒体处理方法结合建立媒体会话，通过基于分配给子轨道作为选择信息的替换组标识符选择子轨道来使用媒体容器文件。基于分配给选择的子轨道的子轨道信息，从媒体容器文件检索与选择的子轨道相关联的媒体数据。将所检索的媒体数据编译为数据分组，并在媒体会话期间发送到至少一个用户终端。
媒体处理方法的另一方面在正在进行的媒体会话期间从当前轨道或子轨道切换到另一子轨道。基于分配给子轨道作为选择信息的切换组标识符来执行切换，因此切换出现在媒体容器文件中。分配给选择的子轨道、并且包括在媒体容器文件中的子轨道信息用于检索子轨道的媒体数据，并且将其编译为数据分组，数据分组被发送到至少一个用户终端，以在正在进行的媒体会话期间影响与相同的内容有关的媒体数据的切换。
根据一方面，媒体处理服务器包括容器提供器，用于提供媒体容器文件。轨道选择器结合建立媒体会话选择媒体容器文件中定义的子轨道。在选择过程中，轨道选择器使用来自媒体容器文件、并且分配给子轨道的替换组标识符。分组编译器从媒体容器文件检索子轨道的媒体数据，并且基于与子轨道相关联的子轨道信息将媒体数据编译为数据分组。发射机在媒体会话期间将数据分组发送到至少一个用户终端。
媒体处理服务器的另一方面在正在进行的媒体会话期间实现与相同的媒体内容有关的流与子流之间的切换。容器提供器提供媒体容器文件，在所述媒体容器文件中，定义了至少一个子轨道，并且至少一个子轨道包括关联的切换组标识符和子轨道信息。轨道选择器使用切换组标识符来选择与相同的媒体内容有关的子轨道作为当前轨道或子轨道。分组编译器基于子轨道信息来对携带选择的子轨道的媒体数据的数据分组进行编译。在正在进行的媒体会话期间将数据分组发送到至少一个用户终端，以影响媒体数据流或子流的切换。
附图说明
通过连同附图一起参照以下描述，可以最佳地理解本发明连同其其它目的和优点，其中：
图1是示出根据实施例的生成媒体容器文件的方法的流程图；
图2是可扩缩视频编码数据组织为不同层的示意性说明；
图3是示出可应用于可扩缩视频编码数据的图1中的信息提供步骤的实施例的流程图；
图4示意性示出使用多个相机视图记录场景；
图5是多视图视频编码数据组织为不同视图的示意性说明；
图6是示出可应用于多视图视频编码数据的图1中的信息提供步骤的实施例的流程图；
图7是示出根据实施例的图1的生成方法的附加步骤的流程图；
图8是根据实施例的媒体容器文件的示意性说明；
图9是根据实施例的包括生成并且使用媒体容器文件的服务器的通信网络的概述；
图10是媒体内容服务器的实施例的示意性框图；
图11是示出根据实施例的媒体处理方法的流程图；
图12是示出根据实施例的图11中的媒体处理方法的附加步骤的流程图；以及
图13是媒体处理服务器的实施例的示意性框图。
具体实施方式
在所有附图，相同附图标记用于相似或对应元件。
本发明通常涉及媒体和多媒体数据管理，具体涉及在包括基于无线电的通信网络的通信网络中结合媒体服务器(例如流传输或下载服务器)创建和利用媒体容器文件。除了用于发送到请求客户端的媒体内容之外，媒体容器文件还包括用于执行媒体服务器中的媒体处理和发送的指令。这些指令包括可以由媒体服务器用于结合媒体会话选择媒体内容(例如当在正在进行的媒体会话期间建立媒体会话和/或在媒体数据流之间切换时选择媒体内容)的选择信息。
根据本发明，媒体或多媒体数据或内容指代内容提供器或服务器可以提供给客户端以呈现数据的任何数据。典型优选示例包括视频数据和音频数据。实施例结合包括多个不同数据部分的媒体数据尤其有用，其中，每一所述数据部分构成相应子流。这种媒体数据被组织为媒体容器文件的单个媒体轨道，但包括多个数据部分(例如SVC中的层或MVC中的视图)。当应用现有技术(即现有技术的替换组和切换组标识符)时，媒体数据组织为子流特定媒体数据部分将问题。为了更清楚地公开实施例的优点，以下首先简短讨论现有技术中的限制。
SVC内容类
SVC允许将视频内容的多个表示编码为单个比特流。视频数据的可扩缩性可以在以下方面实现：
时间可扩缩性-可以通过丢弃帧减小帧速率。
空间可扩缩性-以不同空间分辨率编码层。较高分辨率的预测可以使用较低分辨率的数据。
质量可扩缩性-以相同空间分辨率，但以不同质量对层进行编码。质量可扩缩性在本领域中也表示为信噪比(SNR)。
将编码后的数据2划分为图2所示意性示出的不同的层4、5。层4、5构成分级关系，其中，最低层表示基本层4，后续层表示增强层5。该图示意性示出层4、5之间的这种分级编码关系，至少部分地基于基本层4的(帧内或I/帧内或P)帧来对增强层5的(帧间或P)帧进行编码。
SVC可以用于表示不同版本或相同视频内容的类(例如额外费用版本相对于免费版本)。两个版本之间的差异可以在于质量(例如高保真度相对于低保真度)、分辨率(例如高清晰度(HD)相对于标准清晰度(SD)或1080p相对于720p)、广告(例如广告和标识的空间插入的缺少相对于存在)等。
可以通过具有基本层(BL)中的免费版本和增强层(EL)中的额外费用版本的一个SVC轨道来编码两个内容类。然而，现有技术的切换组句法不能用于分配轨道内的不同切换组：
因此，根据现有技术，无法防止免费版本与额外费用版本之间的无意切换。当然，这对于已经支付了额外费用以避免视频中具有广告的用户是不可接受的。
MVC视图
如图4所示，MVC对从场景86的多个相机视图80-85中捕获的视频数据进行联合编码。该图示意了捕获场景86的不同左视图的三个相机80-82，而三个其它相机83-85被定位为捕获不同的右场景视图。可以在多视图的联合编码中利用视图间相关性，由此与单独地编码不同的视图相比，减小比特率。图5示意了被组织为不同视图6-8的MVC数据3的思想。在这种情况下，视图中的一个是基本视图6，而相对于图中示意性示出的基本视图6或其它附加视图来编码表示为附加视图7、8的其它视图。
MVC数据以与SVC数据相似的方式对现有技术施加问题。例如，假设利用H.263对来自一个左视图和右视图对的视频数据进行编码，并将另一左和右视图对编码为MVC数据的情况：
根据现有技术，由于在轨道级别上分配替换和切换组标识符，因此无法指示两个左编码之间或两个右编码之间的替换。在这种情况下，由于轨道包含左和右视图视频数据，因此轨道3应实际上属于作为H.263左视图的相同的替换组和作为H.263右组的相同的替换组。
我们可能首先尝试通过使用提取器解决这些现有技术问题。提取器引用相同的媒体容器文件内的其它数据。当文件读取器处理提取器时，用该提取器所引用的媒体数据替代该提取器。
用于SVC流的一个轨道
内容 轨道ID 替换组 切换组
SVC BL+EL 1 1 1
由于切换可能在媒体会话期间发生在基本层与增强层之间，因此在这种情况下存在以上识别出的问题。
用于SVC流的一个轨道——将BL提取到不同轨道内
内容 轨道ID 替换组 切换组
SVC BL+EL 1 1 1
SVC BL(来自轨道1的提取器) 2 1 2
甚至在用于两个轨道的不同的切换组的情况下，可以在轨道1中在基本层与增强层之间切换。
用于AVC流的一个轨道——提取BL进入不同轨道
甚至在用于两个轨道的不同的切换组的情况下，可以在轨道2中在基本层与增强层之间切换。
因此，以上提出的对于现有技术解决方案的明显修改将不解决控制基本层与增强层之间的切换(例如防止切换)的问题。
如今，实际上存在可以防止切换到基本层的针对SVC的具体解决方案。可扩缩性信息补充增强指示符(SEI)消息中的layer_output_flag是候选。等于1的layer_output_flag指示用于当前可扩缩层表示的解码结果目的在于输出。等于0的layer_output_flag指示用于当前可扩缩层表示的解码结果目的不在于输出。
然而，如果基本层从不旨在用于输出，则仅仅针对基本层将layer_output_flag设置为0。关于具有不同内容类或版本的要领在于，所有类应是用于输出的潜在候选。不过，在选择它们中的一个之后，它们之间的切换应当是可控的，例如受限的。因此，由于实际上将限制对层中的一个的可访问性，因此以这种方式使用layer_output_flag将不会解决现有技术的问题，由此减少具有不同的层和媒体内容类的优点。此外，layer_output_flag在ISO基本媒体文件格式的文件格式下是不可用的，但反而需要实际比特流的即时查看，这在媒体会话期间是麻烦的。
由于现有技术不能用于实现这种解决方案，因此需要一种允许针对被组织为不同子流(例如SVC和MVC数据)的媒体内容类型使用替换和切换组的解决方案。
图1是根据实施例的生成媒体容器文件的方法的流程图。媒体容器文件可以被看作完整输入包，该完整输入包可以由媒体服务器在媒体会话期间用于提供媒体内容并且将媒体数据形成为可发送的数据分组。因此，除了自身的媒体内容之外，媒体容器文件优选地包括媒体服务器用于执行处理并且允许在媒体会话期间发送媒体内容所需的信息和指令。
方法开始于可选步骤S1，在步骤S1中，提供要包括在媒体容器文件中的媒体数据。根据实施例，媒体数据包括构成媒体内容的相应子流的多个(即，至少两个)数据部分。这些多个媒体数据部分可以被看作构成相同媒体内容的不同版本。例如，分层媒体(例如SVC)典型地以分级顺序包括多个层。处理仅一个层(即，基本层)或此外处理增强层很多时候生成相同的媒体内容，但在不同的类或版本中(例如关于质量、分辨率等)。然而，尽管其可以采取不同版本的形式，然而在处理替换层时提供的实际媒体内容通常是相同的。在媒体数据部分涉及不同相机视图的情况下，针对MVC出现相似情况。尽管SVC和MVC是可以在步骤S1中提供的媒体数据的优选示例，然而实施例不局限于此。明显对比的是，可以使用可以被组织到包括可扩缩的音频数据的不同媒体数据部分(例如层或视图)内的任何其它类型的媒体数据。
本发明预期，即便可以将一个层或视图看作一个媒体数据部分，由于编码关联，也可能需要另一层或视图的编码后的数据是可解码的。例如，可以关于基本层和/或其它增强层对增强层进行编码，并且可以关于基本视图和/或其它附加层对附加视图进行编码。因此，在提供数据分组的可解码流方面处理层或视图可能需要来自其它层或视图的数据。
根据各个实施例可以实现步骤S1中的媒体数据的提供。可以通过通信系统中的一些另外服务器或设备生成或收集媒体数据，并且将其发送到执行媒体容器文件的生成的媒体内容服务器。备选地，媒体内容服务器自身可以包括提供要包括在媒体容器文件中的媒体数据的媒体记录或生成设备。
下一步骤S2在媒体容器文件中组织在步骤S1中提供的媒体数据，从而由媒体容器文件中的媒体轨道定义媒体数据。
在步骤S2中在媒体容器文件中组织的媒体数据优选地共同地包括要在媒体会话期间发送到客户端的所有媒体内容。换句话说，媒体容器文件包含用于包括所有所需层或视图的整个多媒体呈现的媒体数据。因此，如果媒体内容包括音乐视频，则媒体容器文件优选地包括具有视频数据的媒体数据和具有对应音频数据的媒体数据。
媒体容器文件中的媒体轨道定义具有其多个媒体数据部分的媒体数据。这说明媒体轨道包括在媒体会话期间提供媒体内容的呈现所需的信息。优选地，媒体轨道携带其自身的时间和空间信息，并且提供与其所涉及的媒体数据有关的指示信息。
根据实施例，媒体轨道包括多个子轨道，优选地每一媒体数据部分一个这样的子轨道。因此，分层的或基于视图的媒体数据可以具有媒体内容的每层(或层的组)或相机视图一个这样的子轨道。
下一步骤S3在媒体容器文件中提供子轨道信息。该子轨道信息标识属于特定子轨道的媒体数据部分。优选地，针对每一子轨道一次进行步骤S3和下一步骤S4的信息提供，这由线L1示意性示出。
步骤S4提供针对多个子轨道中的至少一个的媒体容器文件中的选择信息。该选择信息定义与被组织在媒体容器文件中的其它媒体数据有关的对由子轨道所定义的媒体数据部分的选择性处理。因此，媒体服务器可以结合媒体会话来使用该选择信息，以选择在开始媒体会话时使用哪个子轨道和媒体部分和/或在媒体会话期间在哪个子轨道和媒体部分之间可以或可以不切换。可以与根据现有技术的替换组标识符和/或切换组标识符相似地使用选择信息。然而，与基于轨道分配替换/切换组标识符(这意味着，相同的替换/切换组标识符可应用于轨道所定义的所有媒体数据)的现有技术明显相反，步骤S4中提供的选择信息仅涉及子轨道和子轨道所定义的媒体数据部分。因此，其它选择信息可以被分配，并且用于全部被组织到单个媒体轨道内的其它媒体数据部分。
优选地，选择信息应用于的媒体数据部分的选择性处理与涉及与媒体数据部分相同的内容的其它媒体数据有关。可以由相同的媒体轨道(即媒体轨道中的另一子轨道)或媒体容器文件中存在的另一媒体轨道定义与相同的内容有关的其它媒体数据。在前一种情况下，与当前子轨道和媒体部分的SVC层或MVC视图相比，其它媒体数据可以是相同的媒体轨道定义的并且与其它SVC层或MVC视图有关的一个或多个其它子轨道。在后一种情况下，媒体容器文件包含与相同的内容有关的两个分离的媒体轨道。例如，一个媒体轨道可以包括定义SVC层或MVC视图的多个子轨道，而至少一个另外轨道可以被编码，而无需任何视图间或层间关系(例如标准AVC(H.264)或H.263数据)。
在线L1示意性示出的步骤S4中，可以将各个选择信息提供给媒体轨道的每一子轨道。备选地，给多个子轨道中的仅一个子轨道或部分分配选择信息。如在此进一步描述的，其余子轨道可以继承可分配给定义了多个子轨道的完整媒体轨道的替换和/或切换组标识符。
步骤S2至S4的顺序可以互换，并且可以另外以任何串行顺序或实际上至少部分并行地进行。
然后，该方法结束。
如果媒体容器文件包含多个媒体轨道，每一媒体轨道由多个子轨道构成，则可以针对每一这种媒体轨道进行步骤S1至S4的过程。
优选地，结合图1描述的媒体容器文件生成在具有对内部或外部媒体内容源的访问的媒体内容创建器或服务器处进行。然后，可以在存储介质(例如计算机存储器)中或利用物理信号(例如电信号或无线电信号来表示所生成的媒体容器文件，例如用于在局部系统内的传送或用于通过局部或全局网络的传输)中。在典型实施例中，将媒体容器文件作为无线电信号提供给媒体服务器，以用于在具有不同客户端的媒体会话中使用。
在下文中，将在整个说明书中使用术语媒体容器文件，其具有包括用于在存储介质中的存储的数据文件和用于传送或发布的信号的意义。
图3是示出可应用于图2所示的SVC数据的信息提供步骤S3和S4的特定实施例的流程图。方法从图1的步骤S2继续。下一步骤S10提供与SVC数据2的基本层4有关的子轨道信息。该信息定义基本层子轨道，以允许对基本层子轨道所涉及的SVC数据部分的标识。相应地，下一步骤S11针对媒体容器文件中的SVC数据2的每一增强层5提供子轨道信息。因此，步骤S11中提供的子轨道标识SVC数据2的定义了子轨道所涉及的特定增强层5的媒体数据部分。
下两个步骤S12和S13提供针对基本层和增强层的选择信息。在子轨道级别进行这些步骤S12和S13中的至少一个。例如，可以给基本层子轨道专用的选择信息，而相应地给增强层子轨道分配专用的选择信息。备选地，给基本层子轨道和增强层子轨道之一分配子轨道特定选择信息，而其它子轨道继承完整媒体轨道的选择信息(替换/切换组标识符)。
步骤S10至S13的顺序可以互换，并且可以另外以任意串行顺序或实际上至少部分并行地进行。
图6是在图5所示的MVC数据的情况下图1的信息提供步骤S3和S4的对应特定实现。方法从图1的步骤S2继续。下一步骤S20提供定义MVC数据3的定义了基本视图6的媒体数据部分的子轨道信息。下一步骤S21对应地提供定义与MVC数据3的附加视图7、8有关的媒体数据部分的子轨道信息。
在步骤S22和S23中，将选择信息分配给定义基本视图和/或附加视图的子轨道。与图3的步骤S12和S13相似，步骤S22和S23可以将子轨道特定的选择信息提供给定义基本视图和附加视图的子轨道，或仅将该子轨道特定的选择信息提供给基本视图或附加视图中的一个或多个。在后一种情况下，未被分配子轨道特定的选择信息的子轨道可以从它们全部被定义的媒体轨道继承这种信息。
步骤S12至S23的顺序可以互换，并且可以另外以任意串行顺序或实际上至少部分并行地进行。
有利地，根据实施例基于子轨道分配的选择信息可以是子轨道特定的替换组标识符。当选择要在媒体会话期间处理(例如解码、代码转换和/或组织为数据分组，以用于传输)的子流时，替换组标识符可由媒体服务器结合建立媒体会话应用。然后，媒体服务器不应一次使用来自每一替换组的多于一个的媒体替换，以给出完整呈现，而无论替换组是在媒体轨道或是在子轨道级别上定义。
因此，替换组中的选项充当对于彼此的替换，即它们表示相同的内容，但可以关于质量、分辨率、编解码器、音频语言等不同。替换组中的所有选项共享相同的替换组标识符，并且是用于在媒体会话开始之前的媒体选择的候选。
在备选实施例中，选择信息与当在正在进行的媒体会话期间在不同的流(完全媒体轨道)和/或子轨道(与子轨道对应的媒体数据部分)之间切换时可应用的子轨道特定的切换组标识符相对应。
切换组中的选项属于相同的替换组。相同的切换组中的选项共享相同的切换组标识符，并且可用于媒体会话期间的切换，而不同的切换组中的选项并非如此。不同切换组可以被看作表示不同的操作点，例如不同帧大小、高质量相对于低质量、不同语言等。切换组内部的选项还表示不同的操作点，例如，在质量方面。
在特定实施例中，在子轨道级别上分配的选择信息包含替换组标识符和切换组标识符。
现在可以根据在此公开的实施例高效地处理以上结合现有技术讨论的示例：
SVC内容类
在这种情况下，根据预定值(例如0)，给定义基本层数据部分和增强层数据部分的媒体轨道分配替代和切换组标识符，该预定值指示媒体轨道包括多个子轨道，以及指示作为代替每一子轨道分配替代和切换组标识符。
给免费和额外费用的SVC数据分配相同的替换组子轨道标识符，以指示它们属于相同的替换组，并且是媒体处理期间的替代或选项。因此，已经针对额外费用内容额外支付了的客户端应获得包含与增强层和基本层有关的媒体数据部分在内的数据分组，其中，为了解码增强层，可能需要后者。然而，其它非额外费用的客户端应仅仅接收基本层数据。
给两个子轨道分配不同的子轨道切换组标识符，以指示在媒体会话期间不应允许从与额外费用SVC内容有关的子流到免费SVC内容的子流的切换，或反之亦然。
也可以结合优雅降级来使用子轨道特定的选择信息，其中，相同的媒体内容的若干质量层可用于允许比特率适配。然而，如果基本层包含广告或是质量非常低，则期望指令媒体服务器在不期望的拥塞或比特率下降期间切换应仅在特定层之上完成。比起无意地打开针对额外费用客户端的广告，可能期望接收机隐瞒数据分组丢失。这种解决方案可以被设计为包括：
每一个子轨道均定义各自增强层(EL1和EL2)的两个子轨道属于相同的切换组，以允许在正在进行的媒体会话期间在子轨道所定义的两个子流之间进行切换。然而，不应允许在定义子流的基本层与定义子流的任何增强层之间进行切换。
MVC视图
在该示例中存在两个替换组，一个与场景的左视图有关，另一个与右场景视图有关。两个替换组包含媒体轨道(H.263轨道1或2)的完整媒体数据以及子轨道(MVC子轨道1或2)的MVC视图数据。在这种情况下，已经采用不同编解码器来编码H.263和MVC数据。因此，不期望H.263编码的数据与MVC编码的数据之间的切换。因此，应当将不同的切换组标识符用于属于相同的替换组的H.263左视图和MVC左视图数据。同样的情况也应用于H.263右视图和MVC右视图数据。注意，由于在替换组内局部地定义切换组，因此可以如以上已经完成的那样重新使用相同的切换组索引。备选地，切换组标识可以是例如1、3、2、4，而不是1、1、2、2。
以上示例示出实施例可以用于解决MVC内容的单独视图以及还有如何将单个轨道媒体类型(H.263)的替换与分层的媒体类型(MVC)相关。
涉及MVC的另一示例是文件可以包含很多视图，但仅它们中的一些适合于平滑切换。考虑具有两个相机簇(例如来自左边的三个相机80-82以及来自对象86的右边的三个相机83-86)的图4所示的情况。在此情况下，平滑切换仅在每一簇内是可能的，以得到免费视角
体验。可以根据以下处理该情况：
所有视图是在建立媒体会话时的替换，通过将相同的替换组标识符分配给所有子轨道来指示。然而，应仅允许在左视图各个右视图当中切换。因此，给所有左视图子轨道分配与对于所有右视图子轨道分配的切换组标识符不同的相同切换组标识符。
可以给媒体轨道分配所谓的轨道选择信息，所谓的轨道选择信息具有指示媒体轨道包括多个子轨道的预定值。该轨道选择信息包括在轨道级别上可分配的替换组标识符和/或切换组标识符。在以上示例中，预定值已经是零，以由此标志可应用于整个媒体轨道的替换/切换组标识符不可用，但反而在媒体容器文件中包括子轨道特定替换/切换组标识符。
然后，媒体服务器可以简单地调查媒体容器文件中的替换/切换组标识符字段或框，以确定轨道特定或子轨道特定替换/切换组标识符是否应被用于当前媒体内容。参照ISO基本媒体文件格式，在此情况下，轨道选择框可以是缺少的，或切换组设置为0，和/或轨道头框中的替换组设置为0。
在备选方法中，针对定义多个子轨道的媒体轨道，可以在轨道级别上分配轨道选择信息(例如替换和/或切换组标识符)。在此情况下，可以将子轨道特定选择信息分配给多个子轨道的一个或部分，而媒体轨道的其余子轨道不具有任何子轨道特定选择信息。这些其余子轨道反而继承分配给媒体轨道的替换/切换组标识符。在此情况下，处理最终媒体容器文件的媒体服务器调查媒体轨道是否具有任意非零替换/切换组标识符，并且附加地调查这些替换/切换组标识符是否被提供用于子轨道。如果将专用替换/切换组标识符分配给子轨道，则该(这些)标识符用于子轨道，而不是轨道特定替换/切换组标识符。
该示例示意性示出在媒体轨道级别上使用替换组标识符，但将切换组标识符用于媒体轨道所定义的每一子轨道。
在该示例中，定义基本层的子轨道继承完整媒体轨道的替换和切换组标识符，而定义不同增强层的两个子轨道具有它们自身的分配的替换和切换组标识符。
图7是示出生成方法的附加、可选步骤的流程图。该方法从图1中的步骤S3继续。下一步骤S30将轨道选择信息提供给媒体轨道。选择信息优选地包括替换组标识符和/或切换组标识符。选择信息的值可以是指示在媒体轨道级别上没有给出替换/切换组标识符但反而给每一子轨道分配各自选择信息的预定值(例如零)。如果在轨道级别上存在选择信息，则该信息用于媒体轨道所定义的所有子轨道，除非子轨道具有具体分配的选择信息。因此，在子轨道级别上分配的选择信息优先于在媒体轨道级别上分配的轨道选择信息。
然后，该方法继续到图1的步骤S4。
以下，将关于使用ISO基本媒体文件格式[1]参照媒体容器文件的特定实现更详细地描述实施例。可以使用的备选容器文件格式包括MP4文件格式、3GP文件格式、AVC、SVC、MVC和QuickTime格式。
ISO基本媒体文件格式被设计为包含定时媒体信息，用于以促进媒体的互换、管理、编辑和呈现的灵活可扩展格式的呈现。该呈现可以是对于包含该呈现的系统本地的，或可以是经由网络或其它流传送机制。使用ISO基本媒体文件的形式的媒体容器文件的优点在于，其被设计为独立于任何特定网络协议，同时使得通常能够高效地支持它们。
ISO基本媒体文件格式的文件结构是面向对象的，这表示可以十分简单地将容器文件分解为组成对象，并且对象的结构是从它们的类型直接推导的。可以将基于ISO基本媒体文件格式的媒体容器文件看作由作为各个唯一标识符所定义的面向对象的构建块的多个框所定义的。
参照图8，示出了符合ISO基本媒体文件格式的媒体容器文件1的实施例。
媒体容器文件1优选地包括电影框(“moov”)10，电影框(“moov”)10是其子框定义了用于呈现的元数据的容器框。
电影框(Movie Box)
Definition：
Box Type：′moov′
Container：File
Mandatory：Yes
Quantity：Exactly one
将用于呈现的元数据存储在单个电影框10中，其出现在媒体容器文件1的顶部。正常地，尽管这不是必需的，但电影框10靠近媒体容器文件1的开始或结束。
句法：
aligned(8)class MovieBox extends Box(′moov′){
}
电影框10包含轨道12、14，轨道12、14定义媒体容器文件1中的有关媒体数据样本的定时序列。
轨道框(Track Box)
Definition：
Box Type：′trak′
Container：Movie Box(′moov′)
Mandatory：Yes
Quantity：One or more
轨道框12、14是用于呈现的单个轨道的容器框。每一轨道12、14携带其自身的时间和空间信息。轨道框12、14用于定义关于媒体轨道的媒体数据，并且包含用于关于所谓的提示轨道例如通过流传输来传送媒体数据的分组化信息。
语法：
aligned(8)class TrackBox extends Box(′trak){
}
图8已经非限定性地将媒体容器文件1示出为包含两个轨道框12、14。然而，由于媒体容器文件1可以包含一个或多个这种轨道框12、14，因此这应仅仅被看作示意性示例。在该图中，轨道框12是定义包括如前所述的多个媒体数据部分的媒体数据的媒体轨道。媒体轨道12因此将包含如在此进一步描述的多个子轨道。
轨道框12优选地包括用户数据框30，用户数据框30包含宣告关于包含框及其数据(即，呈现或轨道)的用户信息的对象。因此，可以将用户数据框30看作针对信息性用户数据的容器框，该容器框被格式化为具有更精确地宣告它们的内容的更特定框类型的框集合。
媒体容器文件1还包括掌控用于呈现的实际媒体数据的媒体数据框(“mdat”)。
媒体数据框(Media Data Box)
Definition：
Box Type：′mdat′
Container：File
Mandatory：No
Quantity：Any number
媒体数据框20包括媒体数据。例如，关于视频轨道12、14，该框20将包括视频帧。
语法：
aligned(8)class MediaDataBox extends Box(′mdat′){
bit(8)data[]；
}
Data表示实际媒体数据。
用户数据框(User DataBox)
Definition：
Box Type：′udta′
Container：Movie Box(′moov′)or Track Box(′trak′)
Mandatory：No
Quantity：Zero or one
语法：
aligned(8)class UserDataBox extends Box(′udta′){
}
配合在此的先前讨论，替换组中的所有轨道是用于媒体选择的候选，这通过将所有媒体轨道分配给相同的替换组来实现。在与轨道框12相关联的轨道头框(未示出)中提供替换组标识符的信息。根据ISO基本媒体文件格式，用于轨道头框(“tkhd”)的语法表示为：
该替换组标识符可应用于轨道级别上，因此应用于由媒体轨道12所定义的整个媒体数据，除非媒体轨道12的子轨道具有其特定的子轨道替换组标识符。在优选实现中，替换组标识符的零值标志媒体轨道包括可以具有它们自身的子轨道替换组的多个子轨道。如果该字段不为0，则其应对于包含用于彼此的替换数据的轨道12相同，并且对于属于不同这些组的轨道12不同。然后，轨道12所定义的子轨道可以继承该替换组标识符，除非它具有其自身的子轨道替换组标识符。
用户数据框30可选地包括用于定义可应用于媒体轨道12的切换组标识符的轨道选择框(“tsel”)40。
轨道选择框(Track Selection Box)
Definition：
Box Type：′tsel′
Container：User Data Box(′udta′)
Mandatory：No
Quantity：Zero or one
轨道选择框40被包含在所涉及的轨道12的用户数据框30中。
语法：
属性列表用作针对相同的替换或切换组中的轨道的轨道描述或区分准则。切换组标识符可以是零，在此情况下解码器可以查找媒体容器文件中的子轨道选择组。没有其自身的子轨道切换组标识符的任何子轨道可以继承非零值。
根据实施例，如果轨道包括子轨道，则用户数据框30包含所谓的子轨道框(“strk”)50，其指定当前轨道中的子轨道。
子轨道框(Sub-Track Box)
Definition：
Box Type：′strk′
Container：User Data Box(′udta′)
Mandatory：No
Quantity：Zero or more
子轨道框50包括定义并且提供关于当前媒体轨道12中的子轨道的信息的对象。
语法：
aligned(8)class SubTrack extends Box(′strk′){
}
子轨道框50是包括两个框的容器：即，子轨道信息框(“stri”)60和子轨道定义框(“strd”)70。
子轨道信息框60包括子轨道描述。这可以例如是子轨道属于哪个切换和/或替换组以及子轨道的其它属性。在特定实施例中，通过媒体容器文件1使用替换和切换组号。这说明，在替换/切换组标识符与子轨道替换/切换组标识符之间共享相同的标识符格式和编号。以这种方式，替换或切换组可以包含轨道和子轨道。
子轨道信息框(Sub-Track Information Box)
Definition：
Box Type：′stri′
Container：Sub-Track Box(′strk′)
Mandatory：Yes
Quantity：One
子轨道信息框60包括提供关于子轨道的信息的对象。
语法：
aligned(8)class SubTrackInformation extends Box(′stri′){
}
子轨道定义框70是包括定义子轨道的框的容器框。子轨道被定义为子轨道定义框中的框所确定的样本子集的并集。可以利用对应的文件格式标准(例如SVC和MVC文件格式标准)来确定定义了这些子集的框。
子轨道定义框(Sub-Track Definition Box)
Definition：
Box Type：′strd′
Container：Sub-Track Box(′strk′)
Mandatory：Yes
Quantity：One
子轨道定义框70包括提供子轨道的定义的对象。
语法：
aligned(8)class SubTrackDefinition extends Box(′strd′){
}
在媒体容器文件1的备选实施例中，可以在没有子轨道信息框60和子轨道定义框70的情况下实现所提出的结构。在此情况下，框存在于子轨道信息框60中，并且作为代替，子轨道定义框70可以直接放置在子轨道框50中。然而，由于可以收集更多的信息，因此具有子轨道信息框60和子轨道定义框70的结构是有利的。例如，如果文件解析器在子轨道定义框70中发现其识别不出的框，则其将得知这是定义子轨道的框。
与ISO基本媒体文件格式标准相似，定义了子轨道选择框(“stsl”)62，并且将其优选地包括在子轨道信息框60中。子轨道选择框62包
括可应用于当前切换组的子轨道切换组标识符。
子轨道选择框(Sub-Track Selection Box)
Definition：
Box Type：′stsl′
Container：Sub-Track Information Box(′stri′)
Mandatory：No
Quantity：Zero or one
语法：
Switch_group(切换组)是子轨道切换组标识符，并且是指定轨道和/或子轨道的组或集合的整数。如果该字段为0(即，默认值)，或者如果缺少子轨道选择框62，则不存在关于子轨道是否可以用于在回放或流传输期间的切换的信息。属于相同的切换组的轨道/子轨道也应属于相同的替换组。
Attribute_list(属性列表)是应用作针对相同的替换或切换组中的轨道/子轨道的子轨道描述或区分准则的属性列表。
可以使用的描述性属性的示例包括：
名称 属性 描述
时间可扩缩性 ‘tesc’ 子轨道可以进行时间扩缩
微粒SNR可扩缩性 ‘fgsc’ 子轨道可以进行微粒扩缩
粗粒SNR可扩缩性 ‘cgsc’ 子轨道可以进行粗粒扩缩
空间可扩缩性 ‘spsc’ 子轨道可以进行空间扩缩
感兴趣区域可扩缩性 ‘resc’ 子轨道可以进行感兴趣区域扩缩
可以使用的区分属性的示例包括：
替换子轨道选择框(“asts”)64用于分配替换组标识符。该框64是可选的，并且如果相同的替换组应用于子轨道，则不需要包括替换子轨道选择框64。
替换子轨道选择框(Alternate Sub-Track Selection Box)
Alternate_group(替换组)是子轨道替换组标识符，并且是指定轨道和/或子轨道的组或集合的整数。如果该字段是0(即，默认值)，或如果缺少替换子轨道选择框64，则不存在关于与其它轨道/子轨道的可能关系的信息。
如果该字段不是0，则其应对于包含针对彼此的替换数据的轨道/子轨道相同，并且对于属于不同这些组的轨道/子轨道不同。在任何一个时间，仅应播放或流传输替换组内的一个轨道/子轨道。
将特定子轨道定义框72、74分配在子轨道定义选择框70中。这些框72、74典型地是编解码特定的，并且确定属于特定子轨道的轨道的部分。如果存在多于一个子轨道定义框70，则子轨道定义的并集定义了子轨道。
以下，将参照SVC和MVC数据公开定义子轨道的不同实施例。如果采用其它编解码器来生成可以被组织为子轨道的媒体数据，则将针对这些编解码器相应地适配定义框。定义框的基本目的在于标识属于子轨道的媒体轨道的部分。因此，可以使用编解码器特定的标识符。
SVC实施例
SVC子轨道层框(SVC Sub-Track Layer Box)
Definition：
Box Type：′sstl′
Container：Sub-Track Definition Box(′strd′)
Mandatory：No
Quantity：Zero or more
语法：
三元(依赖性标识符、质量标识符和时间标识符(DQT))的列表指定属于子轨道的媒体轨道的部分。依赖性标识符、质量标识符和时间标识符的唯一组合确定SVC层。因此，子轨道层框中列出的每一DQT三元确定单个SVC操作点。不同DQT三元值的并集并且因此SVC层的并集描述了框所定义的子轨道。
Item_count计数该框中列出的DQT三元的数，并且依赖性/质量/时间标识符指示网络抽象层(NAL)单元的依赖性/质量/时间标识符值。
SVC子轨道层级框(SVC Sub-Track Tier Box)
Definition：
Box Type：′stti′
Container：Sub-Track Definition Box(′strd′)
Mandatory：No
Quantity：Zero or more
语法：
该框中的层级标识符的并集描述框所定义的子轨道。在这种情况下，层级是SVC层级。如本领域所知，层级是按比特流表示操作点的层的集合。为了将NAL单元映射为层级，可以使用样本组和映射组。样本组在组之间进行样本的划分。然而，由于在一个样本中可以存在若干NAL单元，因此映射组可以用于将一个样本中的NAL单元分配给不同样本组。层级包括一个或多个这种样本组。
Item_count计数在该子轨道层级框中描述的层级的数目，tierId给出该子轨道中包含的层级的标识符。
SVC子轨道样本组框(SVC Sub-Track Sample Group Box)
Definition：
Box Type：′stsg′
Container：Sub-Track Definition Box(′strd′)
Mandatory：No
Quantity：Zero or more
语法：
在该实施例中，直接使用样本组而不是层级，以将轨道划分为子轨道。也可以连同映射组一起使用样本组。
Item_count计数在该子轨道层级框中描述的样本组的数目，groupId给出组条目的标识符。组标识符是任意值，但对于样本组是唯一的。
以上给出的实施例是可以如何定义SVC子轨道的示例。在媒体容器文件1中可以使用这些实施例中的任意实施例。
当使用媒体容器文件1中的层级或提取符时，用于SVC数据的备选解决方案是可能的。以SVC文件格式执行层级的分组[3]。为了基于内容对层级进行分组，将新切换组框(“swgr”)添加到层级的主要定义。在此情况下，允许在层级(即，属于相同的内容组的操作点的集合)之间的切换。允许属于不同内容组的层级之间的切换。该备选解决方案不需要定义子轨道。反之，其修改层级定义。该解决方案的缺点在于，比使用显式子轨道不通用。
切换组框(Switch Group Box)
Definition：
Box Type：′swgr′
Container：Scalable Group Entry
Mandatory：No
Quantity：Zero or one
语法：
aligned(8)class SwitchGroupBox extends Box(′swgr′){
unsigned int(32)content_group＝0；
}
Content_group是指定具有相同内容的层级的组或集合的整数。如果该字段是0或不存在切换组框，则轨道默认属于内容组0。可以在属于相同内容组的层级之间执行切换，但在属于不同组的层级之间不允许切换。内容组优选地仅具有一个成员。因此，根据实施例，content_group在此情况下是可以分配给子轨道的选择信息的示例。
切换组框是可选的，并且然后存在于层级的主要定义中。根据以下示例，可以将切换组框添加到可扩缩组条目：
MVC实施例
MVC子轨道视图框(MVC Sub-Track View Box)
Definition：
Box Type：′mstv′
Container：Sub-Track Definition Box(′strd′)
Mandatory：No
Quantity：Zero or more
语法：
视图标识符和时间标识符的对的列表指定轨道的属于子轨道的部分。视图和时间标识符的组合确定MVC层。因此，MVC子轨道视图框中列出的每一个这样的标识符对确定单个MVC操作点。标识符值的不同对的并集并且因此特定时间分辨率下的MVC视图的并集描述该框所定义的子轨道。
Item_count计数在框中列出的视图标识符和时间标识符对的数目，视图/时间标识符指示MVC NAL单元头部中的标识符值。
在备选实施例中，MVC子轨道视图框仅列出视图标识符，没有时间标识符。然后，子轨道的定义包括具有指定的视图标识符的所有MVC层。
MVC子轨道层级框(MVC Sub-Track Tier Box)
Definition：
Box Type：′stti′
Container：Sub-Track Definition Box(′strd′)
Mandatory：No
Quantity：Zero or more
语法：
该框中的层级标识符的并集描述框所定义的子轨道。在这种情况下，层级是MVC层级。
Iem_count计数在该子轨道层级框中描述的层级的数目，tierId给出子轨道中所包含的层级的标识符。
MVC子轨道多视图组框(MVC Sub-Track MuIti view Group Box)
Definition：
Box Type：′stmg′
Container：Sub-Track Definition Box(′strd′)
Mandatory：No
Quantity：Zero or more
语法：
该框中的多视图组标识符的并集描述框所定义的子轨道。Item_count计数框中描述的多视图组的数目，多视图组标识符给出子轨道中包含的多视图组的标识符。多视图组标识符优选地是以MVC文件格式定义的多视图组的标识符。
MVC子轨道样本组框(MVC Sub-Track Sample Group Box)
Definition：
Box Type：′stsg′
Container：Sub-Track Definition Box(′strd′)
Mandatory：No
Quantity：Zero or more
语法：
在该实施例中，直接使用样本组而不是层级，以将轨道划分为子轨道。也可以连同映射组一起使用样本组。
Item_count计数在该子轨道层级框中描述的样本组的数目，groupId给出组条目的标识符。组标识符是任意值，但对于样本组是唯一的。
以上给出的实施例是可以如何定义MVC子轨道的示例。在媒体容器文件1中可以使用这些实施例中的任意实施例。
当使用媒体容器文件1中的层级或提取符时，用于MVC数据的备选解决方案是可能的。以MVC文件格式执行层级的分组。为了基于内容对层级进行分组，将新切换组框(“swgr”)添加到层级的主要定义。在此情况下，允许在排列(即属于相同的内容组的操作点的集合)之间的切换。允许属于不同内容组的层级(即操作点的集合)之间的切换。该备选解决方案不需要定义子轨道。反之，其修改层级定义。该解决方案的缺点在于，比使用显式子轨道更不通用。
切换组框(Switch Group Box)
Definition：
Box Type：′swgr′
Container：Multiview Group Entry
Mandatory：No
Quantity：Zeor or one
语法：
aligned(8)class SwitchGroupBox extends Box(′swgr′){
unsigned int(32)content_group＝0；
}
Content_group是指定具有相同的内容的层级的组或集合的整数。如果该字段是0或不存在切换组框，则轨道默认属于内容组0。可以在属于相同的内容组的层级之间执行切换，但在属于不同组的层级之间不允许切换。内容组优选地仅具有一个成员。因此，根据实施例，content_group在此情况下是可以分配给子轨道的选择信息的示例。
切换组框是可选的，并且然后存在于层级的主要定义中。根据以下示例，可以将切换组框添加到可扩缩组条目：
以上描述的将媒体容器文件组织为定义媒体数据、包含媒体数据并且标识子轨道和替换/切换组标识符的不同框应被看作特定实现实施例。在其它实施例中，可以替代地使用上述媒体数据和描述性信息(元数据)的其它组织。
图9是示出生成或使用媒体容器文件1的各方的通信网络的示意性概述。媒体内容服务器100表示内容提供器或创建器，其接收媒体数据或具有对媒体数据的访问，并且构建媒体容器文件1。在媒体会话中将该媒体容器文件1的拷贝发送到使用媒体容器文件1的媒体处理服务器200，用于对包含发送(多播)到图中由移动终端表示的不同客户端300、310、320的媒体的数据分组进行编译。有利地，该通信网络可以是具有网络操作者的所谓的私有网络。这种通信网络的示例是将通信服务提供给移动电话的基于无线、无线电的通信网络。
在该图中，将媒体内容服务器100和媒体处理服务器200示意为有利地布置在通信网络的不同网络节点(例如基站)处的分离的服务器。在备选方法中，这两个服务器100、200的操作可以实际上聚焦为单个网络节点，在此情况下，相同的服务器执行媒体内容服务器100和媒体处理服务器200的操作。
图10是根据实施例的媒体内容服务器100的示意性框图。媒体内容服务器100包括发射机和接收机110或公共收发器(TX/RX)。该接收机具体地被布置用于接收输入的媒体内容，并且接收针对媒体容器文件的请求。对应地，该发射机具体由媒体内容服务器100在将这些媒体容器文件发送到在通信网络中的其它服务器时采用。图中所示的接收机/发射机110包括本领域公知的执行数据的发送和接收所需的功能，并且其中，包括调制器/解调器、编码器/解码器等。在数据的有线发送的情况下，发射机/接收机110可以通过执行与发射机/接收机110相似的发送/接收功能的普通输入和输出(I/O)单元交换。
媒体内容服务器100包括媒体提供器160，其被布置用于提供要在媒体容器文件中组织的媒体数据。媒体提供器160可能可以通过发射机110从远程的、但连接的媒体源或引擎400、410获得实际媒体数据。备选地，先前已经将媒体数据提供给媒体内容服务器100，并且存储在数据存储器170中。媒体提供器160然后从存储器170检索有关媒体数据。在另一实施例中，媒体提供器160实际上生成媒体数据自身，并且因此包括媒体生成和/或记录设备。
将来自媒体提供器160的媒体数据转发到数据组织器120，数据组织器120例如在如图8所示的媒体数据框中组织媒体容器文件中的媒体数据。所提供的和组织的媒体数据由先前描述的媒体容器文件中的媒体轨道定义，并且包括定义各个子流的多个数据部分。
在媒体内容服务器100中实现子轨道信息提供器140，以用于提供媒体容器文件中的子轨道信息。子轨道信息使得能够标识属于媒体轨道的特定子轨道的组织的媒体数据的媒体数据部分。因此，媒体轨道定义的多个子轨道中的每一个包括用于标识子轨道应用于的有关媒体数据部分的关联的子轨道信息。
媒体内容服务器100还包括选择信息提供器130，选择信息提供器130提供针对媒体容器文件中的至少一个子轨道的选择信息。选择信息定义关于如前所述的媒体容器文件中组织的其它媒体数据的、对由至少一个子轨道所定义的媒体数据部分的选择性处理。
选择信息提供器130可选地包括替换组标识符提供器132，替换组标识符提供器132被实现为将子轨道替换组标识符提供给媒体容器文件中的至少一个子轨道。在此情况下，该替换组标识符可应用于特定子轨道，而相同的媒体轨道中包含的其它子轨道具有自身的替换组标识符，或共享或继承由可选的轨道选择信息提供器150分配给完整媒体轨道的替换组标识符。
选择信息提供器130的可选切换组标识符提供器134被实现为将子轨道切换组标识符提供给媒体容器文件中的至少一个子轨道。切换组标识符提供器134可以将各个切换组标识符分配给媒体轨道的所有子轨道或仅其部分。在后一种情况下，未被分配切换组标识符的子轨道优选地使用由轨道选择信息提供器150分配给完整媒体轨道的切换组标识符。
对于用于定义选择信息的值的选择信息提供器130的输入，替换和/或切换组标识符优选地可以来自获悉哪些子轨道应当是对于媒体容器文件中的其它子轨道/轨道的替换以及在哪些子轨道/轨道中应允许或防止切换的内容创建器。备选地，选择信息提供器130可以基于所提供的媒体数据的信息自动地确定这些值。例如，选择信息提供器可以被预先配置为防止在常规与额外费用内容之间、在通过不同编解码器编码的媒体数据之间、在具有不同音频语言的媒体数据之间切换，但是例如，允许在不同质量级别中可用的内容之间切换。
媒体内容服务器100有利地适合于处理SVC和MVC数据。子轨道信息提供器140然后被布置为提供子轨道信息，该子轨道信息定义应被组织为与基本和增强层或用于内容的附加视图相对应的不同子轨道的媒体数据部分。
轨道选择信息提供器150可以有利地分配可应用于完整媒体轨道、并且具有指示媒体轨道包括如前所述的多个子轨道的预定值(例如零)的轨道选择信息(例如替换和/或切换组标识符)。
媒体内容服务器100的单元110至160可以被实现或提供为软件、硬件或其组合。在基于软件的实现的情况下，实现媒体内容服务器100或其部分的计算机程序产品包括在通用或专用计算机、处理器、或微处理器上运行的软件或计算机程序。软件包括图10所示的计算机程序代码元素或软件代码部分。程序可以整体或部分地存储在一个或多个适合的计算机可读媒体或数据存储装置(例如磁盘、CD-ROM、DVD盘、USB存储器、硬盘、磁光存储器)上或其中、在RAM或易失性存储器中、在ROM或闪存中、作为固件、或在数据服务器上。
单元110至170可以全部被实现在通信系统中的单个网络节点中的媒体内容服务器100中。备选地，分布式实现也是可能的，并且在本发明的范围内。在此情况下，媒体内容服务器100的不同单元110至170可以被布置在不同的网络节点中，但将不管这而如前所述执行它们期望的操作。
图11是示出利用媒体容器文件的根据实施例的媒体处理方法的流程图。可以由从如图9所示的媒体内容服务器接收媒体容器文件的通信网络中的媒体处理服务器有利地进行处理。
该方法开始于步骤S40，在步骤S40中，提供在此公开的媒体容器文件。可以根据不同实施例进行步骤S40的文件提供。例如，从有线或无线地连接到媒体处理服务器的媒体内容服务器接收媒体容器文件。备选地，媒体容器文件可以在先前已经从远程媒体内容服务器接收，并且因此在步骤S40中从数据存储器中检索。在又一实施例中，当前述媒体内容服务器和媒体处理服务器被组织为公共媒体服务器时，实际上在步骤S40中创建媒体容器文件。
下一步骤S41选择媒体容器文件中定义的多个子轨道中的子轨道。基于分配给子轨道并且存在于媒体容器文件中的替换组标识符来执行子轨道选择。在此情况下，媒体容器文件因此定义包括被分配相同的替换组标识符值的多个轨道/子轨道的替换组。子轨道或子轨道和轨道因此构成在媒体会话中使用的备选。结合建立媒体会话进行选择步骤S41。
下一步骤S42从子轨道定义的媒体容器文件中检索媒体数据部分。基于媒体容器文件中包括的子轨道信息执行该数据检索，并且该数据检索使得能够标识在与选择的子轨道相对应的媒体容器文件中组织的媒体数据的媒体数据部分。在步骤S42中将所检索的媒体数据编译为数据分组，并且在步骤S43中在媒体会话期间将其发送到至少一个客户端或用户终端。
然后，该方法结束。
图12是示出根据另一方面的媒体处理方法的流程图。在此情况下，媒体会话已经开始，并且已经结合建立媒体会话来选择轨道或子轨道。在此情况下，该方法从图11的步骤S43继续，并且下一步骤S50在正在进行的媒体会话期间切换流。步骤S50因此包括：基于被分配给子轨道的切换组标识符来选择在媒体容器文件中定义的子轨道。所选择的子轨道属于与当建立媒体会话时初始地选择的轨道或子轨道相同的替换组。此外，所选择的子轨道还具有与该轨道或子轨道相同的切换组标识符，并且由此属于相同的切换组。所选择的子轨道优选地与和初始轨道或子轨道相同的内容有关，并且可以例如与在SVC数据的情况下的不同层或在MVC数据的情况下的不同视图有关。
根据各个实施例，可以触发步骤S50的流切换。例如，源自数据分组被发送到的用户终端的请求或输入消息可以触发切换准则。备选地，媒体处理服务器和/或用户终端所估计的信号质量或强度信息可以用于在步骤S50中触发流切换。实际上，根据实施例，用于触发轨道之间的切换的本领域公知的任何过程可以用于从子轨道到另一子轨道、从轨道到子轨道或实际上从子轨道到轨道的切换，或根据现有技术从轨道到另一轨道的切换。此外，可以使用用于从SVC层到另一层或从MVC到另一视图的切换的任何已知过程。
下一步骤S51从媒体容器文件中检索与所选择的子轨道相对应的媒体数据部分。基于与所选择的子轨道相关联的、并且被包括在媒体容器文件中的子轨道信息来执行该检索。还将所检索的媒体数据组织为数据分组。与图11的步骤S42相似地执行该步骤S51。下一步骤S52将数据分组发送到参与正在进行的媒体会话的至少一个用户终端。然后，该方法结束。
图13是示出媒体处理服务器200的实施例的示意性框图。媒体处理服务器200包括发射机/接收机210，被布置为进行与外部单元的通信。接收机210具体地被布置为从媒体内容服务器接收媒体容器文件，除非媒体处理服务器200的容器提供器220生成媒体容器文件。发射机210具体地被布置为在媒体会话中将携带从媒体容器文件取得的媒体数据的数据分组发送到一个或多个用户终端。
容器提供器220从媒体容器文件先前已经存储在其中的接收机210或数据存储器250提供媒体容器文件。备选地，容器提供器220实际上可以包括以上讨论的、并且如图10所示的媒体内容服务器的功能，由此创建媒体容器文件。
媒体处理服务器200的轨道选择器230使用分配给媒体容器文件中的轨道或子轨道的替换组标识符，以选择在建立媒体会话时使用哪个轨道或子轨道。在优选实施例中，轨道选择器230在多个子轨道之中选择涉及相同内容的、并且如前所述地在媒体容器文件中定义的子轨道。轨道选择器230可结合建立媒体会话来操作，由此选择初始轨道/子轨道以开始媒体会话。
分组编译器240检索与轨道选择器230所选择的轨道/子轨道相对应的媒体数据。在优选实施例中，当选择子轨道时，使用与所选择的子轨道相关联的、并且被包括在媒体容器文件中的子轨道信息来标识媒体容器文件中的媒体数据的部分，以进行检索。媒体数据被组织并且编译为数据分组，并由发射机210发送到至少一个用户终端。
在正在进行的媒体会话期间，轨道选择器230可以切换到涉及与初始子轨道或轨道相同的内容的另一子轨道或轨道。轨道选择器230基于分配给如前所述的媒体容器文件中的轨道和子轨道的切换组标识符来执行这种切换。分组编译器240然后检索与新选择的子轨道或轨道相关联的媒体数据，并且将媒体数据编译为发射机210所发送的数据分组。
媒体处理服务器200的单元210至240可以被实现或提供为软件、硬件或其组合。在基于软件的实现的情况下，实现媒体处理服务器200或其部分的计算机程序产品包括在通用或专用计算机、处理器、或微处理器上运行的软件或计算机程序。软件包括图13所示的计算机程序代码元素或软件代码部分。程序可以整体或部分地存储在一个或多个适合的计算机可读媒体或数据存储装置(例如磁盘、CD-ROM、DVD盘、USB存储器、硬盘、磁光存储器)上或中、在RAM或易失性存储器中、在ROM或闪存中、作为固件、或在数据服务器上。
单元210至250可以全部被实现在通信系统中的的单个网络节点中的媒体处理服务器200中。备选地，分布式实现也是可能的，并且在本发明的范围内。在此情况下，媒体处理服务器200的不同单元210至250可以被布置在不同的网络节点中，但将不管这如前所述执行它们期望的操作。
上述实施例应被理解为本发明的若干示意性示例。本领域技术人员应理解，在不背离本发明的范围的的情况下，可以对实施例进行各种修改、组合和改变。具体地说，在技术上可能的情况下，可以通过其它配置组合不同实施例中的的不同部分解决方案。然而，本发明的范围由所附权利要求限定。
参考
[1]ISO/IEC14496-12：2008，Information technology-Coding ofaudio-visual objects-Part12：ISO base media file format
[2]ISO/IEC14496-15：2004，Information technology-Coding ofaudio-visual objects-Part15：Advanced Video Coding(AVC)file format
[3]ISO/IEC14496-15：2004/Amd2：2008，Information technology-Coding of audio-visual obj ects-Part15：Advanced Video Coding(AVC)file format；Amendment2：File format support for Scalable Video Coding(SVC)
[4]ISO/IEC14496-15：2004/FPDAmd3，Information technology-Coding of audio-visual obj ects-Part15：Advanced Video Coding(AVC)file format；Amendment3：File format support for Multiview VideoCoding
[5]ISO/IEC14496-10：2009，Information technology-Coding ofaudio-visual obj ects-Part10：Advanced Video Coding

Claims (33)

1.一种生成媒体容器文件的方法，所述方法包括：
a)在所述媒体容器文件中组织媒体数据，其中，所述媒体容器文件包括在媒体会话期间待发送到客户端的媒体数据，所述媒体数据由所述媒体容器文件中的媒体轨道定义，并且包括构成相应子流的多个媒体数据部分；
b)在所述媒体容器文件中提供子轨道信息，所述子轨道信息针对在所述媒体轨道中定义的多个子轨道中的每一个子轨道，标识所述媒体数据的属于所述子轨道的媒体数据部分；以及
c)在所述媒体容器文件中并且针对所述多个子轨道中的至少一个子轨道提供选择信息，所述选择信息定义了关于在所述媒体容器文件中组织的其它媒体数据的、对由所述至少一个子轨道所定义的媒体数据部分的选择性处理，并且所述选择信息涉及与由所述至少一个子轨道所定义的所述媒体数据部分相同的内容；
其中，由媒体服务器结合所述媒体会话来使用所述选择信息，以选择所述至少一个子轨道以及当开始所述媒体会话时使用的媒体数据部分或者在所述媒体会话期间切换的媒体数据部分。
2.如权利要求1所述的方法，其中，所述提供c)包括：在所述媒体容器文件中并且针对所述多个子轨道中的所述至少一个子轨道提供子轨道信息，所述子轨道信息定义了关于由所述多个子轨道中的其余子轨道所定义的其余媒体数据部分的、对由所述至少一个子轨道所定义的所述媒体数据部分的选择性处理。
3.如权利要求1所述的方法，其中，所述提供c)包括：在所述媒体容器文件中并且针对所述多个子轨道中的所述至少一个子轨道，提供当选择在媒体会话期间待处理的子流时能够结合用于建立所述媒体会话的替换组标识符。
4.如权利要求1所述的方法，其中，所述提供c)包括：在所述媒体容器文件中并且针对所述多个子轨道中的所述至少一个子轨道，提供当在正在进行的媒体会话期间在不同的流和/或子流之间切换时能够应用的切换组标识符。
5.如权利要求1所述的方法，其中，所述媒体数据是可扩缩视频编码数据，所述可扩缩视频编码数据包括构成基本层的第一媒体数据部分和构成至少一个增强层的至少一个第二媒体数据部分，并且所述提供b)包括：
在所述媒体容器文件中并且针对第一子轨道，提供标识所述第一媒体数据部分的子轨道信息；以及
在所述媒体容器文件中并且针对至少一个第二子轨道，提供标识所述至少一个第二媒体数据部分的子轨道信息。
6.如权利要求1所述的方法，其中，所述媒体数据是多视图视频编码数据，所述多视图视频编码数据包括构成第一视图的第一视频数据部分和构成至少一个第二视图的至少一个第二视频数据部分，并且所述提供步骤b)包括：
在所述媒体容器文件中并且针对第一子轨道，提供标识所述第一媒体数据部分的子轨道信息；以及
在所述媒体容器文件中并且针对至少一个第二子轨道，提供标识所述至少一个第二媒体数据部分的子轨道信息。
7.如权利要求1所述的方法，还包括：在所述媒体容器文件中，提供轨道选择信息，所述轨道选择信息定义了对由所述媒体轨道所定义的所述媒体数据的选择性处理，所述轨道选择信息具有指示所述媒体轨道包括多个子轨道的预定值。
8.如权利要求1所述的方法，其中，针对所述多个子轨道的第一部分执行所述提供c)，所述方法还包括：在所述媒体容器文件中，提供轨道选择信息，所述轨道选择信息定义了对由所述媒体轨道所定义的所述媒体数据的选择性处理，所述轨道选择信息能够应用于所述多个子轨道的第二其余部分。
9.如权利要求1所述的方法，其中，所述媒体轨道还包括与所述媒体数据的传送有关的分组化信息。
10.一种旨在生成媒体容器文件的媒体内容服务器，所述媒体内容服务器包括处理器和存储器，并且还包括：
数据组织器，被配置为在所述媒体容器文件中组织媒体数据，其中，所述媒体容器文件包括在媒体会话期间待发送到客户端的媒体数据，所述媒体数据由所述媒体容器文件中的媒体轨道定义，并且包括定义相应子流的多个媒体数据部分；
子轨道信息提供器，被配置为在所述媒体容器文件中提供子轨道信息，所述子轨道信息针对在所述媒体轨道中定义的多个子轨道中的每一个子轨道，标识所述媒体数据的属于所述子轨道的媒体数据部分；以及
选择信息提供器，被配置为在所述媒体容器文件中并且针对所述多个子轨道中的至少一个子轨道提供选择信息，所述选择信息定义了关于在所述媒体容器文件中组织的其它媒体数据的、对由所述至少一个子轨道所定义的媒体数据部分的选择性处理，并且所述选择信息涉及与由所述至少一个子轨道所定义的所述媒体数据部分相同的内容；
其中，由所述选择信息提供器结合所述媒体会话来使用所述选择信息，以选择所述至少一个子轨道以及当开始所述媒体会话时使用的媒体数据部分或者在所述媒体会话期间切换的媒体数据部分。
11.如权利要求10所述的媒体内容服务器，其中，所述选择信息提供器包括替换组标识符提供器，被配置为在所述媒体容器文件中并且针对所述多个子轨道中的所述至少一个子轨道，提供当选择在所述媒体会话期间待处理的子流时能够结合用于建立媒体会话的替换组标识符。
12.如权利要求10所述的媒体内容服务器，其中，所述选择信息提供器包括切换组标识符提供器，被配置为在所述媒体容器文件中并且针对所述多个子轨道中的所述至少一个子轨道，提供当在正在进行的媒体会话期间在不同的流和/或子流之间切换时能够应用的切换组标识符。
13.如权利要求10所述的媒体内容服务器，其中，所述媒体数据是可扩缩视频编码数据，所述可扩缩视频编码数据包括构成基本层的第一媒体数据部分和构成至少一个增强层的至少一个第二媒体数据部分，并且所述子轨道信息提供器被配置为：在所述媒体容器文件中并且针对第一子轨道，提供标识所述第一媒体数据部分的子轨道信息；以及在所述媒体容器文件中并且针对至少一个第二子轨道，提供标识所述至少一个第二媒体数据部分的子轨道信息。
14.如权利要求10所述的媒体内容服务器，其中，所述媒体数据是多视图视频编码数据，所述多视图视频编码数据包括构成第一视图的第一视频数据部分和构成至少一个第二视图的至少一个第二视频数据部分，并且所述子轨道信息提供器被配置为：在所述媒体容器文件中并且针对第一子轨道，提供标识所述第一媒体数据部分的子轨道信息；以及在所述媒体容器文件中并且针对至少一个第二子轨道，提供标识所述至少一个第二媒体数据部分的子轨道信息。
15.如权利要求10所述的媒体内容服务器，还包括：轨道选择信息提供器，被配置为在所述媒体容器文件中提供轨道选择信息，所述轨道选择信息定义了对由所述媒体轨道所定义的所述媒体数据的选择性处理，所述信息具有指示所述媒体轨道包括多个子轨道的预定值。
16.如权利要求10所述的媒体内容服务器，其中，所述选择信息提供器被配置为分配定义了针对所述多个子轨道的第一部分的选择性处理的相应选择信息，所述媒体内容服务器还包括：轨道选择信息提供器，被配置为在所述媒体容器文件中提供轨道选择信息，所述轨道选择信息定义了对由所述媒体轨道所定义的所述媒体数据的选择性处理，所述轨道选择信息能够应用于所述多个子轨道的第二其余部分。
17.如权利要求10所述的媒体内容服务器，其中，所述媒体轨道还包括与所述媒体数据的传送有关的分组化信息。
18.一种包括媒体容器文件的存储器，所述媒体容器文件包括：
媒体数据，所述媒体数据包括构成相应子流的多个媒体数据部分；
媒体轨道，所述媒体轨道定义了所述媒体数据；
子轨道信息，所述子轨道信息针对在所述媒体轨道中定义的多个子轨道中的每一个子轨道，标识所述媒体数据的属于所述子轨道的媒体数据部分；以及
选择信息，所述选择信息针对所述多个子轨道中的至少一个子轨道，定义关于在所述媒体容器文件中组织的其它媒体数据的、对由所述至少一个子轨道所定义的媒体数据部分的选择性处理，并且所述选择信息涉及与由所述至少一个子轨道所定义的所述媒体数据部分相同的内容；
其中，由媒体服务器结合媒体会话来使用所述选择信息，以选择所述至少一个子轨道以及当开始所述媒体会话时使用的媒体数据部分或者在所述媒体会话期间切换的媒体数据部分。
19.如权利要求18所述的包括媒体容器文件的存储器，其中，所述选择信息包括当选择在媒体会话期间待处理的子流时能够结合用于建立所述媒体会话的替换组标识符。
20.如权利要求18所述的包括媒体容器文件的存储器，其中，所述选择信息包括当在正在进行的媒体会话期间在不同的流和/或子流之间切换时能够应用的切换组标识符。
21.如权利要求18所述的包括媒体容器文件的存储器，其中，所述媒体数据是可扩缩视频编码数据，所述可扩缩视频编码数据包括构成基本层的第一媒体数据部分和构成至少一个增强层的至少一个第二媒体数据部分，并且所述子轨道信息包括：
第一子轨道信息，所述第一子轨道信息针对第一子轨道，标识所述第一媒体数据部分；以及
至少一个第二子轨道信息，所述至少一个第二子轨道信息针对至少一个第二子轨道，标识所述至少一个第二媒体数据部分。
22.如权利要求18所述的包括媒体容器文件的存储器，其中，所述媒体数据是多视图视频编码数据，所述多视图视频编码数据包括构成第一视图的第一视频数据部分和构成至少一个第二视图的至少一个第二视频数据部分，并且所述子轨道信息包括：
第一子轨道信息，所述第一子轨道信息针对第一子轨道，标识所述第一媒体数据部分；以及
至少一个第二子轨道信息，所述至少一个第二子轨道信息针对至少一个第二子轨道，标识所述至少一个第二媒体数据部分。
23.如权利要求18所述的包括媒体容器文件的存储器，还包括：轨道选择信息，所述轨道选择信息定义了对由所述媒体轨道所定义的所述媒体数据的选择性处理，所述轨道选择信息具有指示所述媒体轨道包括多个子轨道的预定值。
24.如权利要求18所述的包括媒体容器文件的存储器，其中，所述多个子轨道的第一部分具有相应选择信息，所述媒体容器文件还包括轨道选择信息，所述轨道选择信息定义了对由所述媒体轨道所定义的所述媒体数据的选择性处理，所述轨道选择信息能够应用于所述多个子轨道的第二其余部分。
25.如权利要求18所述的包括媒体容器文件的存储器，其中，所述媒体轨道还包括与所述媒体数据的传送有关的分组化信息。
26.一种媒体处理方法，包括：
提供媒体容器文件，所述媒体容器文件包括定义了在所述媒体容器文件中组织的媒体数据的媒体轨道，其中，所述媒体容器文件包括在媒体会话期间待发送到客户端的媒体数据，所述媒体数据包括多个媒体数据部分、子轨道信息和替换组标识符，所述多个媒体数据部分定义了相应子流，所述子轨道信息针对在所述媒体轨道中定义的多个子轨道中的每一个子轨道，标识所述媒体数据的属于所述子轨道的媒体数据部分，以及所述替换组标识符针对所述多个子轨道中的至少一个子轨道，构成与相同的内容有关的流和/或子流之中的流选择准则；
结合建立所述媒体会话，基于所述替换组标识符在所述多个子轨道中选择子轨道；
通过基于与所选择的子轨道相关联的所述子轨道信息从所述媒体容器文件提取媒体数据，来编译数据分组；以及
在所述媒体会话期间，将所述数据分组发送到至少一个用户终端。
27.如权利要求26所述的媒体处理方法，其中，所述媒体轨道还包括与所述媒体数据的传送有关的分组化信息。
28.一种媒体处理服务器，包括：
容器提供器，被配置为提供媒体容器文件，所述媒体容器文件包括定义了在所述媒体容器文件中组织的媒体数据的媒体轨道，其中，所述媒体容器文件包括在媒体会话期间待发送到客户端的媒体数据，所述媒体数据包括多个媒体数据部分、子轨道信息和替换组标识符，所述多个媒体数据部分定义了相应子流，所述子轨道信息针对在所述媒体轨道中定义的多个子轨道中的每一个子轨道，标识所述媒体数据的属于所述子轨道的媒体数据部分，以及所述替换组标识符针对所述多个子轨道中的至少一个子轨道，构成与相同的内容有关的流和/或子流之中的流选择准则；
轨道选择器，被配置为结合建立所述媒体会话，基于所述替换组标识符在所述多个子轨道中选择子轨道；
分组编译器，被配置为通过基于与所选择的子轨道相关联的所述子轨道信息从所述媒体容器文件提取媒体数据，来编译数据分组；以及
发射机，被配置为在所述媒体会话期间，将所述数据分组发送到至少一个用户终端。
29.如权利要求28所述的媒体处理服务器，其中，所述媒体轨道还包括与所述媒体数据的传送有关的分组化信息。
30.一种媒体处理方法，包括：
提供媒体容器文件，所述媒体容器文件包括定义了在所述媒体容器文件中组织的媒体数据的媒体轨道，其中，所述媒体容器文件包括在媒体会话期间待发送到客户端的媒体数据，所述媒体数据包括多个媒体数据部分、子轨道信息和切换组标识符，所述多个媒体数据部分定义了相应子流，所述子轨道信息针对在所述媒体轨道中定义的多个子轨道中的每一个子轨道，标识所述媒体数据的属于所述子轨道的媒体数据部分，以及所述切换组标识符针对所述多个子轨道中的至少一个子轨道，构成与相同的内容有关的流和/或子流之间的流切换准则；
在涉及发送所述媒体容器文件中包含的媒体数据到至少一个用户终端的正在进行的媒体会话期间，基于所述切换组标识符在所述多个子轨道中选择子轨道；
通过基于与所选择的子轨道相关联的所述子轨道信息从所述媒体容器文件提取媒体数据，来编译数据分组；以及
在所述正在进行的媒体会话期间，将所述数据分组发送到所述至少一个用户终端，以实现对所选择的子轨道的媒体数据的切换。
31.如权利要求30所述的媒体处理方法，其中，所述媒体轨道还包括与所述媒体数据的传送有关的分组化信息。
32.一种媒体处理服务器，包括处理器和存储器，并且还包括：
容器提供器，被配置为提供媒体容器文件，所述媒体容器文件包括定义了在所述媒体容器文件中组织的媒体数据的媒体轨道，其中，所述媒体容器文件包括在媒体会话期间待发送到客户端的媒体数据，所述媒体数据包括多个媒体数据部分、子轨道信息和切换组标识符，所述多个媒体数据部分定义了相应子流，所述子轨道信息针对在所述媒体轨道中定义的多个子轨道中的每一个子轨道，标识所述媒体数据的属于所述子轨道的媒体数据部分，以及所述切换组标识符针对所述多个子轨道中的至少一个子轨道，构成与相同的内容有关的流和/或子流之间的流切换准则；
轨道选择器，被配置为在涉及发送所述媒体容器文件中包含的媒体数据到至少一个用户终端的正在进行的媒体会话期间，基于所述切换组标识符在所述多个子轨道中选择子轨道；
分组编译器，被配置为通过基于与所选择的子轨道相关联的所述子轨道信息从所述媒体容器文件提取媒体数据，来编译数据分组；以及
发射机，被配置为在所述正在进行的媒体会话期间，将所述数据分组发送到所述至少一个用户终端，以实现对所选择的子轨道的媒体数据的切换。
33.如权利要求32所述的媒体处理服务器，其中，所述媒体轨道还包括与所述媒体数据的传送有关的分组化信息。
CN201410205905.2A 2009-04-09 2009-11-06 生成媒体容器文件的方法、媒体内容服务器、以及媒体处理方法和媒体处理服务器 Expired - Fee Related CN103957448B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US16799809P 2009-04-09 2009-04-09
US61/167,998 2009-04-09
CN200980158568.3A CN102388613B (zh) 2009-04-09 2009-11-06 媒体容器文件管理

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN200980158568.3A Division CN102388613B (zh) 2009-04-09 2009-11-06 媒体容器文件管理

Publications (2)

Publication Number Publication Date
CN103957448A true CN103957448A (zh) 2014-07-30
CN103957448B CN103957448B (zh) 2017-05-17

Family

ID=42936425

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201410205905.2A Expired - Fee Related CN103957448B (zh) 2009-04-09 2009-11-06 生成媒体容器文件的方法、媒体内容服务器、以及媒体处理方法和媒体处理服务器
CN200980158568.3A Expired - Fee Related CN102388613B (zh) 2009-04-09 2009-11-06 媒体容器文件管理

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN200980158568.3A Expired - Fee Related CN102388613B (zh) 2009-04-09 2009-11-06 媒体容器文件管理

Country Status (7)

Country Link
US (1) US8768984B2 (zh)
EP (1) EP2417772B1 (zh)
JP (2) JP5542912B2 (zh)
CN (2) CN103957448B (zh)
CA (1) CA2758237C (zh)
RU (1) RU2534936C2 (zh)
WO (1) WO2010117315A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108702478A (zh) * 2016-02-22 2018-10-23 索尼公司 文件生成装置、文件生成方法、再现装置和再现方法
CN109076528A (zh) * 2016-04-01 2018-12-21 寰发股份有限公司 无线通信系统设计

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5627860B2 (ja) * 2009-04-27 2014-11-19 三菱電機株式会社 立体映像配信システム、立体映像配信方法、立体映像配信装置、立体映像視聴システム、立体映像視聴方法、立体映像視聴装置
US8823782B2 (en) * 2009-12-31 2014-09-02 Broadcom Corporation Remote control with integrated position, viewer identification and optical and audio test
US8964013B2 (en) 2009-12-31 2015-02-24 Broadcom Corporation Display with elastic light manipulator
US8854531B2 (en) 2009-12-31 2014-10-07 Broadcom Corporation Multiple remote controllers that each simultaneously controls a different visual presentation of a 2D/3D display
US9247286B2 (en) 2009-12-31 2016-01-26 Broadcom Corporation Frame formatting supporting mixed two and three dimensional video data communication
JP5996439B2 (ja) * 2010-02-19 2016-09-21 テレフオンアクチーボラゲット エルエム エリクソン（パブル） Ｈｔｔｐストリーミングにおける表現切り替えのための方法及び装置
US8930562B2 (en) * 2010-07-20 2015-01-06 Qualcomm Incorporated Arranging sub-track fragments for streaming video data
JP5577953B2 (ja) * 2010-08-25 2014-08-27 富士通株式会社 判定プログラム、検証装置及び検証方法
US8548961B2 (en) 2011-03-30 2013-10-01 Splunk Inc. System and method for fast file tracking and change monitoring
US8566336B2 (en) 2011-03-30 2013-10-22 Splunk Inc. File identification management and tracking
WO2013033458A2 (en) 2011-08-30 2013-03-07 Divx, Llc Systems and methods for encoding and streaming video encoded using a plurality of maximum bitrate levels
US8818171B2 (en) 2011-08-30 2014-08-26 Kourosh Soroushian Systems and methods for encoding alternative streams of video for playback on playback devices having predetermined display aspect ratios and network connection maximum data rates
KR101885852B1 (ko) 2011-09-29 2018-08-08 삼성전자주식회사 컨텐트 전송 및 수신 방법 및 장치
US20140003523A1 (en) * 2012-06-30 2014-01-02 Divx, Llc Systems and methods for encoding video using higher rate video sequences
US10452715B2 (en) * 2012-06-30 2019-10-22 Divx, Llc Systems and methods for compressing geotagged video
RU2510589C2 (ru) * 2012-07-05 2014-03-27 Вадим Витальевич Ярошенко Способ кодирования цифрового видеоизображения
US9262423B2 (en) * 2012-09-27 2016-02-16 Microsoft Technology Licensing, Llc Large scale file storage in cloud computing
US9936196B2 (en) * 2012-10-30 2018-04-03 Qualcomm Incorporated Target output layers in video coding
KR101358295B1 (ko) * 2012-12-21 2014-02-05 서울대학교산학협력단 액체를 이용한 에너지 전환 기판
GB2516826B (en) * 2013-07-23 2016-06-22 Canon Kk Method, device and computer program for encapsulating partitioned timed media data by creating tracks to be independently encapsulated in at least one media f
WO2015053157A1 (ja) * 2013-10-11 2015-04-16 ソニー株式会社 送信装置、送信方法および受信装置
EP3065410B1 (en) * 2013-11-01 2019-02-06 Sony Corporation Transmission apparatus, transmission method, reception apparatus, and reception method
CN104919812B (zh) * 2013-11-25 2018-03-06 华为技术有限公司 处理视频的设备和方法
EP3092806A4 (en) * 2014-01-07 2017-08-23 Nokia Technologies Oy Method and apparatus for video coding and decoding
JP2015136057A (ja) * 2014-01-17 2015-07-27 ソニー株式会社 通信装置、通信データ生成方法、および通信データ処理方法
US9348495B2 (en) 2014-03-07 2016-05-24 Sony Corporation Control of large screen display using wireless portable computer and facilitating selection of audio on a headphone
KR102422493B1 (ko) * 2014-06-30 2022-07-20 소니그룹주식회사 정보 처리 장치 및 정보 처리 방법
RU2701060C2 (ru) * 2014-09-30 2019-09-24 Сони Корпорейшн Передающее устройство, способ передачи, приемное устройство и способ приема
US9922680B2 (en) * 2015-02-10 2018-03-20 Nokia Technologies Oy Method, an apparatus and a computer program product for processing image sequence tracks
US9672831B2 (en) * 2015-02-25 2017-06-06 International Business Machines Corporation Quality of experience for communication sessions
JP6576122B2 (ja) * 2015-06-29 2019-09-18 キヤノン株式会社 データ記録装置およびその制御方法、撮像装置
US10937460B2 (en) 2016-06-09 2021-03-02 Apple Inc. Media files and protocols supporting runtime dependent tracks
US10148989B2 (en) 2016-06-15 2018-12-04 Divx, Llc Systems and methods for encoding video content
IT201700038903A1 (it) * 2017-04-07 2018-10-07 Milano Politecnico Un interferometro birifrangente per misurare le proprieta’ di fotoluminescenza di campioni.
KR102495915B1 (ko) 2018-04-30 2023-02-03 삼성전자 주식회사 스토리지 장치 및 상기 스토리지 장치를 포함하는 서버
US11010410B1 (en) * 2018-10-12 2021-05-18 Facebook, Inc. Processing data groupings belonging to data grouping containers
CN109491762B (zh) * 2018-11-09 2021-07-09 网易（杭州）网络有限公司 容器状态控制方法及装置、存储介质、电子设备
US10945005B2 (en) * 2018-12-07 2021-03-09 Arris Enterprises Llc Multiple parental rating content and method of presentation
JP7297439B2 (ja) * 2018-12-19 2023-06-26 キヤノン株式会社 ファイル生成装置及びファイル生成方法、画像生成装置及び画像生成方法、並びにプログラム
JP2023504097A (ja) * 2019-11-29 2023-02-01 中興通訊股▲ふん▼有限公司 マルチビュービデオ処理方法および装置
US11743441B2 (en) * 2020-08-31 2023-08-29 Mediatek Singapore Pte. Ltd. Methods and apparatus for selecting and switching input video tracks using track derivations
CN115623183A (zh) * 2021-07-12 2023-01-17 腾讯科技（深圳）有限公司 容积媒体的数据处理方法、装置、设备以及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080052306A1 (en) * 2006-08-24 2008-02-28 Nokia Corporation System and method for indicating track relationships in media files
WO2008048064A1 (en) * 2006-10-19 2008-04-24 Lg Electronics Inc. Encoding method and apparatus and decoding method and apparatus
WO2008135932A2 (en) * 2007-05-04 2008-11-13 Nokia Corporation Media stream recording into a reception hint track of a multimedia container file

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030020753A1 (en) * 2001-07-25 2003-01-30 Asa Kling Product cost control graphical user interface
US20030123546A1 (en) * 2001-12-28 2003-07-03 Emblaze Systems Scalable multi-level video coding
US7613727B2 (en) * 2002-02-25 2009-11-03 Sont Corporation Method and apparatus for supporting advanced coding formats in media files
AU2003267699A1 (en) * 2002-10-15 2004-05-04 Koninklijke Philips Electronics N.V. System and method for transmitting scalable coded video over an ip network
KR20050084284A (ko) * 2002-12-13 2005-08-26 코닌클리즈케 필립스 일렉트로닉스 엔.브이. 게이트웨이를 위한 장치, 전송 장치, 네트워크, 시스템전환 방법, 인코딩된 스트림 전송 방법 및 네트워크 제공방법
US20060251167A1 (en) * 2002-12-20 2006-11-09 Koninkijkle Phillips Electronics N.V. Multi-track hinting for receiver-driven streaming system
US7369610B2 (en) * 2003-12-01 2008-05-06 Microsoft Corporation Enhancement layer switching for scalable video coding
US20060233247A1 (en) * 2005-04-13 2006-10-19 Visharam Mohammed Z Storing SVC streams in the AVC file format
US7725593B2 (en) * 2005-07-15 2010-05-25 Sony Corporation Scalable video coding (SVC) file format
JP4950206B2 (ja) * 2005-10-11 2012-06-13 ノキア コーポレイション 効率的なスケーラブルストリーム適応のためのシステム及び方法
US7903737B2 (en) 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
US8571215B2 (en) * 2006-01-05 2013-10-29 Telefonaktiebolaget L M Ericsson (Publ) Combined storage and transmission of scalable media
EP1969856B1 (en) 2006-01-05 2012-08-15 Telefonaktiebolaget LM Ericsson (publ) Media container file management
KR20070108434A (ko) * 2006-01-09 2007-11-12 한국전자통신연구원 ＳＶＣ(Ｓｃａｌａｂｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ)파일포맷에서의 데이터 공유 개선방법
MX2009003968A (es) * 2006-10-16 2009-06-01 Nokia Corp Sistema y método para usar segmentos decodificables paralelamente para codificación de video de vistas múltiples.
CN101523920B (zh) * 2006-10-16 2013-12-04 汤姆森许可贸易公司 在视频操作期间使用网络抽象层单元以信号方式指示即时解码刷新的方法
AU2008206744B2 (en) * 2007-01-18 2011-09-22 Nokia Technologies Oy Carriage of SEI messages in RTP payload format
EP2147558A2 (en) * 2007-04-17 2010-01-27 Nokia Corporation Feedback based scalable video coding
MX2009011217A (es) * 2007-04-18 2009-12-07 Thomson Licensing Sistemas de codificacion.
WO2009001313A2 (en) * 2007-06-26 2008-12-31 Nokia Corporation System and method for indicating temporal layer switching points
KR101242472B1 (ko) * 2008-07-16 2013-03-12 노키아 코포레이션 트랙 및 트랙 서브세트의 그룹화를 위한 방법 및 장치
US8976871B2 (en) * 2009-09-16 2015-03-10 Qualcomm Incorporated Media extractor tracks for file format track selection

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080052306A1 (en) * 2006-08-24 2008-02-28 Nokia Corporation System and method for indicating track relationships in media files
WO2008048064A1 (en) * 2006-10-19 2008-04-24 Lg Electronics Inc. Encoding method and apparatus and decoding method and apparatus
WO2008135932A2 (en) * 2007-05-04 2008-11-13 Nokia Corporation Media stream recording into a reception hint track of a multimedia container file

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
KARSTEN GRUNEBERG ET AL.: "Deliverable D3.2 MVC/SVC storage format", 《INFORMATION AND COMMUNICATION TECHNOLOGIES PROGRAMME》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108702478A (zh) * 2016-02-22 2018-10-23 索尼公司 文件生成装置、文件生成方法、再现装置和再现方法
CN108702478B (zh) * 2016-02-22 2021-07-16 索尼公司 文件生成装置、文件生成方法、再现装置和再现方法
CN109076528A (zh) * 2016-04-01 2018-12-21 寰发股份有限公司 无线通信系统设计

Also Published As

Publication number Publication date
CA2758237C (en) 2017-08-15
RU2534936C2 (ru) 2014-12-10
CN102388613B (zh) 2014-04-30
US8768984B2 (en) 2014-07-01
EP2417772A1 (en) 2012-02-15
CN102388613A (zh) 2012-03-21
CN103957448B (zh) 2017-05-17
RU2011145299A (ru) 2013-05-20
EP2417772B1 (en) 2018-05-09
US20120016917A1 (en) 2012-01-19
JP2014197848A (ja) 2014-10-16
JP5542912B2 (ja) 2014-07-09
JP2012523746A (ja) 2012-10-04
WO2010117315A1 (en) 2010-10-14
JP5869613B2 (ja) 2016-02-24
CA2758237A1 (en) 2010-10-14
EP2417772A4 (en) 2012-08-29

Similar Documents

Publication Publication Date Title
CN102388613B (zh) 媒体容器文件管理
CN102132562B (zh) 用于轨道和轨道子集归组的方法和设备
US10397595B2 (en) Provision of supplemental processing information
Amon et al. File format for scalable video coding
CN102177718B (zh) 一种用于产生多视图媒体数据的方法及设备
CN102271249B (zh) 用于可伸缩视频的感兴趣区域信息设置方法和解析方法
CN101595475B (zh) 可伸缩视频编码（svc）文件格式
EP2387241A1 (en) Grid encoded media asset data
US20130243391A1 (en) Method and apparatus for creating a media file for multilayer images in a multimedia system, and media-file-reproducing apparatus using same
CN107534801A (zh) 用于处理图像序列轨道的方法、装置和计算机程序产品
CN1973545A (zh) 用于可缩放媒体编码和传输的多个互操作性点
CN103299616A (zh) 再生装置及其控制方法、生成装置及其控制方法、记录介质、数据结构、控制程序以及记录了该程序的记录介质
CN101924944A (zh) 可伸缩视频编码操作点选择方法、信息提供方法及设备
CN103856778A (zh) 用于处理视频文件的系统和方法
CN104365110A (zh) 改进的播放列表内容选择系统和方法
JP6632550B2 (ja) タイムピリオドにまたがってオブジェクトを識別する方法および対応デバイス
KR101995270B1 (ko) 비디오 데이터를 재생하는 방법 및 장치
CN111147952A (zh) 一种监控资源数据发送方法、装置及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170517