CN102404560B - 实现可伸缩视频编码业务协同传输的方法及系统 - Google Patents
实现可伸缩视频编码业务协同传输的方法及系统 Download PDFInfo
- Publication number
- CN102404560B CN102404560B CN 201010287806 CN201010287806A CN102404560B CN 102404560 B CN102404560 B CN 102404560B CN 201010287806 CN201010287806 CN 201010287806 CN 201010287806 A CN201010287806 A CN 201010287806A CN 102404560 B CN102404560 B CN 102404560B
- Authority
- CN
- China
- Prior art keywords
- service
- layer
- business
- information
- scalable video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 36
- 238000000034 method Methods 0.000 title claims abstract description 32
- 239000010410 layer Substances 0.000 claims description 208
- 239000011229 interlayer Substances 0.000 claims description 27
- 238000005111 flow chemistry technique Methods 0.000 claims description 6
- 230000002045 lasting effect Effects 0.000 claims description 6
- 238000005538 encapsulation Methods 0.000 claims description 4
- 238000012545 processing Methods 0.000 abstract description 7
- 238000005516 engineering process Methods 0.000 description 8
- 230000032798 delamination Effects 0.000 description 5
- 230000014509 gene expression Effects 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 238000005204 segregation Methods 0.000 description 3
- 241001269238 Data Species 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/633—Control signals issued by server directed to the network components or client
- H04N21/6332—Control signals issued by server directed to the network components or client directed to client
- H04N21/6336—Control signals issued by server directed to the network components or client directed to client directed to decoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8451—Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了实现可伸缩视频编码业务协同传输的方法及系统，此方法包括：将可伸缩视频编码业务的视频流中基本层码流和增强层码流分别封装于广播信道帧中的不同复用子帧中，将用于正确解码多层视频流的协同辅助信息封装于所述广播信道帧中，一并发送至终端；所述终端从接收到的广播信道帧中解析出所述协同辅助信息，并根据所述协同辅助信息接收符合自身视频流处理能力而且属于所述可伸缩视频编码业务的多层码流，并进行解码。本发明可以有效的传送SVC业务的各分层业务同时保证终端准确接收及处理，保证SVC业务的应用。
Description
技术领域
本发明涉及移动多媒体广播系统中传输技术，尤其涉及一种中国移动多媒体广播系统(China Mobile Multimedia Broadcasting，简称CMMB)中实现可伸缩视频编码(Scalable Video Coding，简称SVC)业务协同传输的方法及系统。
背景技术
随着通信技术的发展，移动多媒体广播技术的应用越来越广。目前，中国移动多媒体广播系统(CMMB)标准规定了在广播业务频率范围内，移动多媒体广播系统广播信道传输信号的帧结构、信道编码和调制等。CMMB标准《移动多媒体广播第2部分：复用》中规定，采用复用子帧来封装视频、音频等流媒体数据，进行传送。图1所示的是CMMB信道帧的组成结构。
可伸缩视频编码(SVC)是一种视频分级编码方式。编码器对视频内容源进行编码，产生多个层次的码流，基本层码流可以单独解码，增强层码流包含用于提高低层码流质量的附加信息，需要和包括基本层在内的低层一起解码。SVC技术可以提供可分级可伸缩的业务，实现有服务质量差别的区分业务、实现各种终端的能力适配，具有诸多优点，在CMMB系统中传送SVC业务是很有必要的。具体如何有效的传送SVC业务的各分层业务以及保证终端准确接收并处理是需要解决的一个技术问题。
发明内容
本发明要解决的技术问题是提供实现可伸缩视频编码业务协同传输的方法及系统，有效的传送SVC业务的各分层业务同时保证终端准确接收及处理。
为了解决上述技术问题，本发明提供了实现可伸缩视频编码业务协同传输的方法，包括：将可伸缩视频编码业务的视频流中基本层码流和增强层码流分别封装于广播信道帧中的不同复用子帧中，将用于正确解码多层视频流的协同辅助信息封装于所述广播信道帧中，一并发送至终端；所述终端从接收到的广播信道帧中解析出所述协同辅助信息，并根据所述协同辅助信息接收符合自身视频流处理能力而且属于所述可伸缩视频编码业务的多层码流，并进行解码。
进一步，上述方法还可以具有以下特点：
将所述协同辅助信息在广播信道帧内封装时，将所述协同辅助信息封装于控制信息表中，或者封装于电子业务指南数据流中，或者部分封装于控制信息表中部分封装于电子业务指南数据流中，或者与可伸缩视频编码业务基本层媒体数据封装在同一复用子帧中，或者部分与可伸缩视频编码业务基本层媒体数据封装在同一复用子帧中部分封装在控制信息表和/或电子业务指南数据流中。
进一步，上述方法还可以具有以下特点：
所述协同辅助信息包括所述可伸缩视频编码业务中业务分层信息、层间依赖关系，层业务传输位置信息，层业务参数信息。
进一步，上述方法还可以具有以下特点：
设置一业务信息表用于表示所述协同辅助信息中业务分层信息和层间依赖关系；为所述可伸缩视频编码业务设置业务标识，具体的，为所述可伸缩视频编码业务设置全业务标识，为所述可伸缩视频编码业务所包含各层业务设置层业务标识；所述业务信息表中携带的业务标识为全业务标识时，同时指示此可伸缩视频编码业务中各层业务对应的各层业务标识；所述业务信息表中携带的业务标识为层业务标识时，同时指示此层业务标识对应的层业务所依赖的其它层业务的层业务标识。
进一步，上述方法还可以具有以下特点：
将所述协同辅助信息中业务分层信息、层间依赖关系、层业务传输位置信息封装在控制信息表中在所述广播信道帧的时隙0中发送；将所述协同辅助信息中层业务参数信息封装在电子业务指南数据流中发送。
进一步，上述方法还可以具有以下特点：
将所述协同辅助信息中业务分层信息、层间依赖关系、层业务传输位置信息封装在控制信息表中在所述广播信道帧的时隙0中具体包括：将所述可伸缩视频编码业务的业务标识封装在持续业务配置表或短时间业务配置表中；将所述可伸缩视频编码业务中各层业务的层业务标识以及传输此层业务所用的复用子帧的信息封装在持续业务复用配置表或短时间业务复用配置表中；将所述可伸缩视频编码业务的业务标识以及相关电子业务指南信息、所述可伸缩视频编码业务中各层业务的业务标识以及相关电子业务指南信息封装在电子业务指南基本描述表中；将所述协同辅助信息中层业务参数信息封装在电子业务指南数据流中具体包括：将层业务参数信息封装在电子业务指南业务参数信息中。
进一步，上述方法还可以具有以下特点：
终端确定所需要处理的最高层级的分层后，从所述协同辅助信息中获取这一分层所依赖的所有低层级的信息，包括层间依赖关系、层业务传输位置信息以及各分层的层业务参数信息，根据这些信息，接收这一分层及其所依赖的各低层级所对应的复用子帧，从各复用子帧中提取出各分层数据，进行同步合并和解码。
为了解决上述技术问题，本发明提供了实现可伸缩视频编码业务协同传输的系统，包括移动多媒体广播设备和终端；所述移动多媒体广播设备，用于将可伸缩视频编码业务的视频流中基本层码流和增强层码流分别封装于广播信道帧中的不同复用子帧中，将用于正确解码多层视频流的协同辅助信息封装于所述广播信道帧中，一并发送至终端；所述终端，用于从接收到的广播信道帧中解析出所述协同辅助信息，并根据所述协同辅助信息接收符合自身视频流处理能力而且属于所述可伸缩视频编码业务的多层码流，并进行解码。
进一步，上述系统还可以具有以下特点：
所述协同辅助信息包括所述可伸缩视频编码业务中业务分层信息、层间依赖关系，层业务传输位置信息，层业务参数信息；所述移动多媒体广播设备，还用于将所述协同辅助信息中业务分层信息、层间依赖关系、层业务传输位置信息封装在控制信息表中在所述广播信道帧的时隙0中发送；将所述协同辅助信息中层业务参数信息封装在电子业务指南数据流中发送。
进一步，上述系统还可以具有以下特点：
所述移动多媒体广播设备，还用于设置一业务信息表用于表示所述协同辅助信息中业务分层信息和层间依赖关系；为所述可伸缩视频编码业务设置业务标识，具体的，为所述可伸缩视频编码业务设置全业务标识，为所述可伸缩视频编码业务所包含各层业务设置层业务标识；所述业务信息表中携带的业务标识为全业务标识时，同时指示此可伸缩视频编码业务中各层业务对应的各层业务标识；所述业务信息表中携带的业务标识为层业务标识时，同时指示此层业务标识对应的层业务所依赖的其它层业务的层业务标识。
本发明可以有效的传送SVC业务的各分层业务同时保证终端准确接收及处理，保证SVC业务的应用。
附图说明
图1是现有技术中CMMB信道帧的组成结构示意图；
图2是实施例中实现可伸缩视频编码业务协同传输的方法流程图；
图3是具体实施例中广播信道帧中资源使用方式示意图；
图4具体实施例中业务信息表的示例图。
具体实施方式
SVC视频业务包括基本层码流和至少一个增强层码流，基本层码流可以单独解码，增强层码流包含用于提高低层码流质量的附加信息，需要和包括基本层在内的低层一起解码。为便于描述，实施例设广播业务包含了SVC视频和一路音频，SVC视频采用空间分层模式，被编码为一路QVGA(QuarterVGA，320×240像素图像)基本流和一路VGA(Video GraphicArray，640X480像素图像)增强视频流，音频被编码为一路音频流。需要说明的是，本发明所述方法同样适用于多路增强流及其它SVC编码模式的情况。
实现可伸缩视频编码业务协同传输的系统，包括移动多媒体广播设备和终端。
所述移动多媒体广播设备用于将可伸缩视频编码业务的视频流中基本层码流和增强层码流分别封装于广播信道帧中的不同复用子帧中，将用于正确解码多层视频流的协同辅助信息封装于所述广播信道帧中，一并发送至终端。
所述终端用于从接收到的广播信道帧中解析出所述协同辅助信息，并根据所述协同辅助信息接收符合自身视频流处理能力而且属于所述可伸缩视频编码业务的多层码流，并进行解码。
移动多媒体广播设备还用于将协同辅助信息在广播信道帧内封装时，可与SVC业务媒体数据分开，不与SVC业务媒体数据在同样的复用子帧内传送，而是封装于控制信息表中，或者封装于电子业务指南数据流中，或者部分封装于控制信息表中部分封装于电子业务指南数据流中。还可以与SVC业务基本层媒体数据在同一个复用子帧内。还可以采用上述两种方式的组合，部分与可伸缩视频编码业务基本层媒体数据封装在同一复用子帧中部分封装在控制信息表和/或电子业务指南数据流中。
具体应用中，所述协同辅助信息包括所述可伸缩视频编码业务中业务分层信息、层间依赖关系，层业务传输位置信息，层业务参数信息。移动多媒体广播设备具体的用于将所述协同辅助信息中业务分层信息、层间依赖关系、层业务传输位置信息封装在控制信息表中在所述广播信道帧的时隙0中发送；将所述协同辅助信息中层业务参数信息封装在电子业务指南数据流中发送。
移动多媒体广播设备还用于设置一业务信息表用于表示所述协同辅助信息中业务分层信息和层间依赖关系；为所述可伸缩视频编码业务设置业务标识，具体的，为所述可伸缩视频编码业务设置全业务标识，为所述可伸缩视频编码业务所包含各层业务设置层业务标识；所述业务信息表中携带的业务标识为全业务标识时，同时指示此可伸缩视频编码业务中各层业务对应的各层业务标识；所述业务信息表中携带的业务标识为层业务标识时，同时指示此层业务标识对应的层业务所依赖的其它层业务的层业务标识。
终端还用于确定所需要处理的最高层级的分层后，从所述协同辅助信息中获取这一分层所依赖的所有低层级的信息，包括层间依赖关系、层业务传输位置信息以及各分层的层业务参数信息，根据这些信息，接收这一分层及其所依赖的各低层级所对应的复用子帧，从各复用子帧中提取出各分层数据，进行同步合并和解码。
如图2所示，实现可伸缩视频编码业务协同传输的方法包括：
步骤201，将可伸缩视频编码业务的视频流中基本层码流和增强层码流分别封装于广播信道帧中的不同复用子帧中，将用于正确解码多层视频流的协同辅助信息封装于所述广播信道帧中，一并发送至终端。
所述协同辅助信息包括所述可伸缩视频编码业务中业务分层信息(即一个业务中包括哪几层层业务)、层间依赖关系(每一层所依赖的其它层级)，层业务传输位置信息(即分别在哪些复用子帧传送层业务)，层业务参数信息(包括但不限于空间分层标识、时间分层标识、质量分层标识、指示限定参数范围内的视频编解码的子集的编码前层级别标识、帧率、分辨率、码率)。终端根据此协同辅助信息协同接收并处理分开在不同的复用子帧传送的各个SVC分层。
将协同辅助信息在广播信道帧内封装时，可与SVC业务媒体数据分开，不与SVC业务媒体数据在同样的复用子帧内传送，而是封装于控制信息表中，或者封装于电子业务指南数据流中，或者部分封装于控制信息表中部分封装于电子业务指南数据流中。还可以与SVC业务基本层媒体数据在同一个复用子帧内。还可以采用上述两种方式的组合，部分与可伸缩视频编码业务基本层媒体数据封装在同一复用子帧中部分封装在控制信息表和/或电子业务指南数据流中。
设置一业务信息表用于表示所述协同辅助信息中业务分层信息和层间依赖关系。为SVC业务设置业务标识，具体的，为所述SVC业务设置全业务标识，为SVC业务所包含各层业务设置层业务标识。业务信息表中携带的业务标识为全业务标识时，同时指示此SVC业务中各层业务对应的各层业务标识；所述业务信息表中携带的业务标识为层业务标识时，同时指示此层业务标识对应的层业务所依赖的其它层业务的层业务标识。例如，业务标识的类型分为普通业务、SVC业务、SVC分层业务，业务标识的类型取值0时表示普通业务，取值为1时表示全业务标识即对应于SVC业务，取值为2时表示层业务标识即对应于SVC层业务。
将所述协同辅助信息中业务分层信息、层间依赖关系、层业务传输位置信息封装在控制信息表中在所述广播信道帧的时隙0中发送。具体包括：将所述SVC业务的业务标识以及对应的频点信息封装在持续业务配置表或短时间业务配置表中；将所述SVC业务中各层业务的层业务标识以及传输此层业务所用的复用子帧的信息封装在持续业务复用配置表或短时间业务复用配置表中；将所述SVC业务的业务标识以及相关电子业务指南信息、所述SVC业务中各层业务的业务标识以及相关电子业务指南信息封装在电子业务指南基本描述表中。
将所述协同辅助信息中层业务参数信息封装在电子业务指南数据流中发送。具体包括：将层业务参数信息封装在电子业务指南业务参数信息中。将SVC业务相关的其它ESG数据信息如业务信息、业务编排、内容等ESG信息，用ESG的业务信息、业务编排信息、内容信息等规格分别封装。
其中，将业务信息表、持续业务配置表或短时间业务配置表、持续业务复用配置表或短时间业务复用配置表、ESG基本描述表等控制信息表在CMMB广播信道帧时隙0传送，将ESG的业务信息、业务编排信息、内容信息、ESG业务参数信息等ESG数据信息，用ESG数据流传送。除上述的业务信息表扩展、SVC分层的自身参数信息通过ESG业务参数信息传送外，控制信息表在CMMB广播信道帧时隙0的传送、ESG数据信息通过ESG数据流的传送，后向兼容于现有标准和技术。
步骤202，终端从接收到的广播信道帧中解析出所述协同辅助信息，并根据所述协同辅助信息接收符合自身视频流处理能力而且属于所述SVC业务的多层码流，并进行解码。
终端监听广播信道帧，并广播信道帧时隙0和ESG数据流中提取协同辅助信息，解析出SVC业务的业务分层信息、SVC层间依赖关系、SVC层传输信息以及SVC各分层的自身参数信息。
终端确定所需要处理的最高层级的分层后，从所述协同辅助信息中获取这一分层所依赖的所有低层级的信息，包括层间依赖关系、层业务传输位置信息以及各分层的层业务参数信息，根据这些信息，接收这一分层及其所依赖的各低层级所对应的复用子帧，从各复用子帧中提取出各分层数据，进行同步合并和解码。
具体的：
1)终端通过ESG基本描述表、ESG数据信息得到当前业务的业务标识、业务参数等信息，以及其他业务标识相关的ESG信息。
2)终端根据当前业务标识确定从业务信息表确定所处理业务是一SVC业务，并得到该SVC业务所包含的SVC分层的层业务标识等信息；在此过程中，结合步骤1的ESG信息，可得知SVC分层的层自身参数信息。
3)终端确定其所需要接收处理的最高层级SVC分层，根据该分层的层业务标识，从业务信息表确定其所依赖的所有低层级SVC分层的层业务标识。所需要接收处理的最高层级SVC分层的确定，可以将SVC分层的层自身参数信息作为约束条件。
4)终端从持续业务复用配置表或短时间业务复用配置表中，得知各分层所对应的复用子帧，接收步骤3)所确定的分层及其所依赖的各低层级SVC分层所属的复用子帧。
5)从各复用子帧中提取出各分层数据，协同进行同步合并、解码。在此过程中，可以将SVC分层的层自身参数信息作为处理所依据的参数。
下面通过具体实施例详细说明本发明。
图3是具体实施例中广播信道帧的组成结构示意图。某频点F上有40个时隙，其中时隙0(复用帧0)用于传送控制信息，时隙1至时隙39用于传送业务信息。移动多媒体广播设备将SVC视频业务S中的视频基本层码流、音频以及数据信息配置为复用帧1中，占用时隙1至时隙4，复用子帧号为1。视频增强层码流配置为复用帧2，占用时隙5至时隙6，复用子帧号为1。复用帧1和复用帧2中不再传输其他业务。移动多媒体广播设备获取SVC视频业务S的基本层码流V1，封装到复用帧1的复用子帧1中，获取视频业务S的增强层码流V2，封装到复用帧2的复用子帧1中。前端发送设备获取视频业务S的音频码流及数据段信息，添加到复用帧1的复用子帧1中，即与基本层码流一起承载于同一个复用子帧中。
所述协同辅助信息，包括业务分层信息，本实施例中的SVC视频采用空间分层SVC编码，包括QVGA基本层和VGA增强层两个层，设QVGA基本层层标识为L0，VGA增强层层标识为L1；层间依赖关系，QVGA基本层L0可独立解码，VGA增强层L1的解码依赖于L0，终端如果要接收解码展现VGA视频必须同时接收L0和L1的视频数据；层传输信息，QVGA基本层L0通过复用帧1的复用子帧1传输，VGA增强层L1通过复用帧2的复用子帧1传输；层的自身参数信息，如QVGA基本层L0的参数包括层标识L0、空间分层标识D0、时间分层标识T0、质量分层标识T0、Profile Level ID参数为(profile_idc＝0x42，level_idc＝0x0d)，帧率为25，分辨率为320×240，码率为480kbps；VGA增强层L1的参数包括层标识L1、空间分层标识D1、时间分层标识T0、质量分层标识T0、Profile Level ID参数为(profile_idc＝0x42，level_idc＝0x0d)，帧率为25，分辨率为640×480，码率为360kbps。
将协同辅助信息在广播信道帧内封装时，采用以下方法：
为SVC业务设定一全业务标识SIDx，为SVC业务所包含的各分层，设定一层业务标识，QVGA基本层层业务标识为SID10，VGA增强层层业务标识为SID11。
利用CMMB广播信道帧时隙0传送的控制信息表，生成一业务信息表，该信息表指示某个业务标识的业务类型及业务关联关系。业务标识包括了SVC业务的全业务标识和SVC分层业务的层业务标识。业务标识对应的类务类型分为普通业务(由0表示)、SVC业务(由1表示)、SVC分层业务(由2表示)；如果业务标识对应类型为SVC业务，则同时指示该SVC业务所包含的层业务标识；如果业务标识对应类型为SVC分层业务，则同时指示该SVC分层业务所依赖的其它层级SVC分层业务的层业务标识。对于本实施例，业务信息表可如图4所示，如SIDx为一SVC业务，包含SID10、SID11两个SVC分层业务；SID10为一SVC分层业务，可独立解码；SID11为一SVC分层业务，依赖于SID10分层。
将SVC业务的业务标识如SIDx、对应的频点信息封装到持续业务配置表或短时间业务配置表中。将SVC分层业务的业务标识、传送该分层所用的复用子帧的有关信息，封装到持续业务复用配置表或短时间业务复用配置表中。本实施例中SID10对应复用帧1的复用子帧1，SID11对应复用帧2的复用子帧1。将SVC业务的业务标识及相关ESG信息、SVC分层业务的业务标识及相关的ESG信息，封装到ESG基本描述表中。将前述SVC分层的自身参数信息，用ESG业务参数信息封装；SVC业务相关的其它ESG数据信息如业务信息、业务编排、内容等ESG信息，用ESG的业务信息、业务编排信息、内容信息等规格分别封装。
终端上监听广播信道帧中SVC视频流相关的协同辅助信息，从广播信道帧时隙0接收业务信息表、持续业务配置表或短时间业务配置表、持续业务复用配置表或短时间业务复用配置表、ESG基本描述表等控制信息表，从ESG数据流接收ESG数据信息。终端根据自身能力接收处理与之适应的相关SVC分层码流，根据协同辅助信息，将属于同一SVC业务的不同分层的数据协同接收处理，然后进行视频解码展现。
终端进行SVC视频帧合成时，参与合成的基本层视频单元和增强层视频单元必须保证具有协同关系，SVC视频帧合成处理需要协同关系相关信息。
具体包括：
1)终端从广播信道帧时隙0接收业务信息表、持续业务配置表或短时间业务配置表、持续业务复用配置表或短时间业务复用配置表、ESG基本描述表等控制信息表，从ESG数据流接收ESG数据信息，获得SVC业务相关的协同辅助信息。
2)终端确定其所需要接收处理的最高层级SVC分层后，从协同辅助信息获取这一分层所依赖的所有低层级SVC分层的有关信息，接收这一分层及其所依赖的各低层级SVC分层所属的复用子帧，从各复用子帧中提取出各分层数据，根据层间关系、层自身参数等信息，协同进行同步合并、解码。
步骤2)可进一步描述为：
1》终端通过ESG基本描述表、ESG数据信息得到当前业务的业务标识SIDx、业务参数等信息，以及其他业务标识如SID10、SID11相关的ESG信息。
2》终端根据当前业务标识SIDx确定从业务信息表确定所处理业务是一SVC业务，并得到该SVC业务所包含的SVC分层的层业务标识SID10、SID11等信息；在此过程中，结合步骤1的ESG信息，可得知相关的SVC分层SID10、SID11的层自身参数信息。
3》终端从SVC分层SID10、SID11的层自身参数信息得知SID11为一SVC分层，比较该分层的其它层自身参数信息后，确定该层为其所需要接收处理的最高层级SVC分层。根据该分层的层业务标识SID11，从业务信息表确定其所依赖的所有低层级SVC分层的层业务标识为(SID10)，即需要同时接收处理SID11和SID10这两个SVC分层。
4》终端从持续业务复用配置表或短时间业务复用配置表中，得知SID10、SID11所对应的复用子帧分别为复用帧1的复用子帧1和复用帧2的复用子帧1，一并接收这两个复用子帧。
5)》从复用帧1的复用子帧1和复用帧2的复用子帧1这两路复用子帧中提取出QVGA基本层和VGA增强层的视频媒体数据，进行同步合并，解码输出VGA视频。在此过程中，可以将SID10、SID11的层自身参数信息作为处理所依据的控制参数。
当然，本发明还可有其他多种实施例，在不背离本发明精神及其实质的情况下，熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形，但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
本领域普通技术人员可以理解上述方法中的全部或部分步骤可通过程序来指令相关硬件完成，所述程序可以存储于计算机可读存储介质中，如只读存储器、磁盘或光盘等。可选地，上述实施例的全部或部分步骤也可以使用一个或多个集成电路来实现。相应地，上述实施例中的各模块/单元可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。本发明不限制于任何特定形式的硬件和软件的结合。
Claims (9)
1.实现可伸缩视频编码业务协同传输的方法，其特征在于，
将可伸缩视频编码业务的视频流中基本层码流和增强层码流分别封装于广播信道帧中的不同复用子帧中，将用于正确解码多层视频流的协同辅助信息封装于所述广播信道帧中，一并发送至终端；
所述终端从接收到的广播信道帧中解析出所述协同辅助信息，并根据所述协同辅助信息接收符合自身视频流处理能力而且属于所述可伸缩视频编码业务的多层码流，并进行解码；
其中，所述协同辅助信息包括所述可伸缩视频编码业务中业务分层信息、层间依赖关系、层业务传输位置信息、层业务参数信息。
2.如权利要求1所述的方法，其特征在于，
将所述协同辅助信息在广播信道帧内封装时，将所述协同辅助信息封装于控制信息表中，或者封装于电子业务指南数据流中，或者部分封装于控制信息表中部分封装于电子业务指南数据流中，或者与可伸缩视频编码业务基本层媒体数据封装在同一复用子帧中，或者部分与可伸缩视频编码业务基本层媒体数据封装在同一复用子帧中部分封装在控制信息表和/或电子业务指南数据流中。
3.如权利要求1所述的方法，其特征在于，
设置一业务信息表用于表示所述协同辅助信息中业务分层信息和层间依赖关系；
为所述可伸缩视频编码业务设置业务标识，具体的，为所述可伸缩视频编码业务设置全业务标识，为所述可伸缩视频编码业务所包含各层业务设置层业务标识；
所述业务信息表中携带的业务标识为全业务标识时，同时指示此可伸缩视频编码业务中各层业务对应的各层业务标识；所述业务信息表中携带的业务标识为层业务标识时，同时指示此层业务标识对应的层业务所依赖的其它层业务的层业务标识。
4.如权利要求1所述的方法，其特征在于，
将所述协同辅助信息中业务分层信息、层间依赖关系、层业务传输位置信息封装在控制信息表中在所述广播信道帧的时隙0中发送；
将所述协同辅助信息中层业务参数信息封装在电子业务指南数据流中发送。
5.如权利要求4所述的方法，其特征在于，
将所述协同辅助信息中业务分层信息、层间依赖关系、层业务传输位置信息封装在控制信息表中在所述广播信道帧的时隙0中具体包括：
将所述可伸缩视频编码业务的业务标识封装在持续业务配置表或短时间业务配置表中；将所述可伸缩视频编码业务中各层业务的层业务标识以及传输此层业务所用的复用子帧的信息封装在持续业务复用配置表或短时间业务复用配置表中；将所述可伸缩视频编码业务的业务标识以及相关电子业务指南信息、所述可伸缩视频编码业务中各层业务的业务标识以及相关电子业务指南信息封装在电子业务指南基本描述表中；
将所述协同辅助信息中层业务参数信息封装在电子业务指南数据流中具体包括：
将层业务参数信息封装在电子业务指南业务参数信息中。
6.如权利要求2至5中任一权利要求所述的方法，其特征在于，
终端确定所需要处理的最高层级的分层后，从所述协同辅助信息中获取这一分层所依赖的所有低层级的信息，包括层间依赖关系、层业务传输位置信息以及各分层的层业务参数信息，根据这些信息，接收这一分层及其所依赖的各低层级所对应的复用子帧，从各复用子帧中提取出各分层数据，进行同步合并和解码。
7.实现可伸缩视频编码业务协同传输的系统，包括移动多媒体广播设备和终端，其特征在于，
所述移动多媒体广播设备，用于将可伸缩视频编码业务的视频流中基本层码流和增强层码流分别封装于广播信道帧中的不同复用子帧中，将用于正确解码多层视频流的协同辅助信息封装于所述广播信道帧中，一并发送至终端；
所述终端，用于从接收到的广播信道帧中解析出所述协同辅助信息，并根据所述协同辅助信息接收符合自身视频流处理能力而且属于所述可伸缩视频编码业务的多层码流，并进行解码；
其中，所述协同辅助信息包括所述可伸缩视频编码业务中业务分层信息、层间依赖关系、层业务传输位置信息、层业务参数信息。
8.如权利要求7所述的系统，其特征在于，
所述移动多媒体广播设备，还用于将所述协同辅助信息中业务分层信息、层间依赖关系、层业务传输位置信息封装在控制信息表中在所述广播信道帧的时隙0中发送；将所述协同辅助信息中层业务参数信息封装在电子业务指南数据流中发送。
9.如权利要求8所述的系统，其特征在于，
所述移动多媒体广播设备，还用于设置一业务信息表用于表示所述协同辅助信息中业务分层信息和层间依赖关系；为所述可伸缩视频编码业务设置业务标识，具体的，为所述可伸缩视频编码业务设置全业务标识，为所述可伸缩视频编码业务所包含各层业务设置层业务标识；所述业务信息表中携带的业务标识为全业务标识时，同时指示此可伸缩视频编码业务中各层业务对应的各层业务标识；所述业务信息表中携带的业务标识为层业务标识时，同时指示此层业务标识对应的层业务所依赖的其它层业务的层业务标识。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 201010287806 CN102404560B (zh) | 2010-09-17 | 2010-09-17 | 实现可伸缩视频编码业务协同传输的方法及系统 |
| PCT/CN2011/076618 WO2012034441A1 (zh) | 2010-09-17 | 2011-06-30 | 实现可伸缩视频编码业务协同传输的方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 201010287806 CN102404560B (zh) | 2010-09-17 | 2010-09-17 | 实现可伸缩视频编码业务协同传输的方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102404560A CN102404560A (zh) | 2012-04-04 |
| CN102404560B true CN102404560B (zh) | 2013-12-18 |
Family
ID=45830985
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 201010287806 Expired - Fee Related CN102404560B (zh) | 2010-09-17 | 2010-09-17 | 实现可伸缩视频编码业务协同传输的方法及系统 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN102404560B (zh) |
| WO (1) | WO2012034441A1 (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102685494A (zh) * | 2012-04-10 | 2012-09-19 | 中国联合网络通信集团有限公司 | 移动视频业务处理方法、装置和系统 |
| GB2519746B (en) * | 2013-10-22 | 2016-12-14 | Canon Kk | Method, device and computer program for encapsulating scalable partitioned timed media data |
| CN105580376A (zh) * | 2014-09-05 | 2016-05-11 | 华为技术有限公司 | 一种业务流的控制方法及装置 |
| HK1221373A2 (zh) | 2016-03-29 | 2017-05-26 | 萬維數碼有限公司 | 種提升視頻分辨率和視頻質量的方法、編碼器及解碼器 |
| CN107592555A (zh) * | 2016-07-08 | 2018-01-16 | 北京信威通信技术股份有限公司 | 一种动态获取视频数据的方法、装置及系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2005112464A1 (en) * | 2004-05-12 | 2005-11-24 | Nokia Corporation, | Multiple interoperability points for scalable media coding and transmission |
| CN101390399A (zh) * | 2006-01-11 | 2009-03-18 | 诺基亚公司 | 可伸缩视频编码中的图片的后向兼容聚合 |
| WO2010014211A1 (en) * | 2008-07-28 | 2010-02-04 | Thomson Licensing | Method and apparatus fast channel change using a scalable videdo coding (svc) stream |
| CN101783935A (zh) * | 2009-01-19 | 2010-07-21 | 财团法人工业技术研究院 | 可调性视频编码标准的比特流封装方法 |
-
2010
- 2010-09-17 CN CN 201010287806 patent/CN102404560B/zh not_active Expired - Fee Related
-
2011
- 2011-06-30 WO PCT/CN2011/076618 patent/WO2012034441A1/zh active Application Filing
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2005112464A1 (en) * | 2004-05-12 | 2005-11-24 | Nokia Corporation, | Multiple interoperability points for scalable media coding and transmission |
| CN101390399A (zh) * | 2006-01-11 | 2009-03-18 | 诺基亚公司 | 可伸缩视频编码中的图片的后向兼容聚合 |
| WO2010014211A1 (en) * | 2008-07-28 | 2010-02-04 | Thomson Licensing | Method and apparatus fast channel change using a scalable videdo coding (svc) stream |
| CN101783935A (zh) * | 2009-01-19 | 2010-07-21 | 财团法人工业技术研究院 | 可调性视频编码标准的比特流封装方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2012034441A1 (zh) | 2012-03-22 |
| CN102404560A (zh) | 2012-04-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101945261B (zh) | 移动多媒体广播系统中分级传送、接收方法与装置 | |
| US11445228B2 (en) | Apparatus for transmitting broadcast signal, apparatus for receiving broadcast signal, method for transmitting broadcast signal and method for receiving broadcast signal | |
| US11323755B2 (en) | Broadcast signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method | |
| CN101951506B (zh) | 实现可伸缩视频编码业务同步发送、接收的系统和方法 | |
| JP6233984B2 (ja) | マルチビュー・ビデオ符号化のための仮想参照デコーダ | |
| US7483489B2 (en) | Streaming multimedia data over a network having a variable bandwith | |
| CN106796797B (zh) | 发送设备、发送方法、接收设备和接收方法 | |
| CN102404560B (zh) | 实现可伸缩视频编码业务协同传输的方法及系统 | |
| CN107211200B (zh) | 用于发送/接收媒体数据的方法和设备 | |
| US20220094993A1 (en) | Transmission device, transmission method, reception device and reception method | |
| CN102098542A (zh) | 一种多媒体数据传输的方法、系统和装置 | |
| US10666549B2 (en) | Broadcast signal transmission apparatus, broadcast signal reception apparatus, broadcast signal transmission method and broadcast signal reception method | |
| CN103475900A (zh) | 手机电视业务视频帧的封装方法、装置及前端系统 | |
| KR101697385B1 (ko) | 채널 적응형 계층적 방송 장치 및 방법 | |
| CN101453653B (zh) | 一种传播数字音视频参数集的方法 | |
| CN101754024B (zh) | 一种复用装置及复用方法 | |
| US20100315486A1 (en) | Stereoscopic video service providing/receiving method and apparatus in digital broadcasting system | |
| CN102480634B (zh) | 移动多媒体广播中分级业务同步的方法、设备和系统 | |
| JP2018517329A (ja) | 放送信号送信装置、放送信号受信装置、放送信号送信方法、及び放送信号受信方法 | |
| CN103024369A (zh) | 分级编码复用的发送端、终端、系统及方法 | |
| KR20200123786A (ko) | Mpeg-h 3d 오디오 스트림에 내장된 보조 미디어 스트림들의 처리를 위한 방법 및 장치 | |
| CN112436919B (zh) | 流数据传输方法、装置、设备及计算机可读存储介质 | |
| KR100950082B1 (ko) | Ｍｐｅｇ-4 ｂｉｆｓ 스트림을 이용한 압축 이미지 전송방법 | |
| Noland | ATSC 3.0 Standards Usher in Next Gen TV Era | |
| CN116233336A (zh) | 一种多通道音视频融合监视方法及设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| ASS | Succession or assignment of patent right |
Owner name: NANJING BRANCH OF ZTE CORPORATION Free format text: FORMER OWNER: ZTE CORPORATION Effective date: 20131010 |
|
| C41 | Transfer of patent application or patent right or utility model | ||
| COR | Change of bibliographic data |
Free format text: CORRECT: ADDRESS; FROM: 518057 SHENZHEN, GUANGDONG PROVINCE TO: 210012 NANJING, JIANGSU PROVINCE |
|
| TA01 | Transfer of patent application right |
Effective date of registration: 20131010 Address after: 210012 Zhongxing communication, No. 68, Bauhinia Road, Yuhuatai District, Jiangsu, Nanjing Applicant after: Nanjing Branch of Zhongxing Communication Co., Ltd. Address before: 518057 Nanshan District Guangdong high tech Industrial Park, South Road, science and technology, ZTE building, Ministry of Justice Applicant before: ZTE Corporation |
|
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| C41 | Transfer of patent application or patent right or utility model | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20150707 Address after: 518057 Nanshan District Guangdong high tech Industrial Park, South Road, science and technology, ZTE building, Ministry of Justice Patentee after: ZTE Corporation Address before: 210012 Zhongxing communication, No. 68, Bauhinia Road, Yuhuatai District, Jiangsu, Nanjing Patentee before: Nanjing Branch of Zhongxing Communication Co., Ltd. |
|
| CF01 | Termination of patent right due to non-payment of annual fee | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20131218 Termination date: 20170917 |